18、如何识别数据中的异常值

网上有关“18、如何识别数据中的异常值”话题很是火热,小编也是针对18、如何识别数据中的异常值寻找了一些与之相关的一些信息进行分析,如果能碰巧解决你现在面临的问题,希望能够帮助到您。

Bojan Miletic在使用机器学习算法时询问了有关数据集中异常值检测的问题。这篇文章是对他的问题的回答。

许多机器学习算法对输入数据中属性值的范围和分布敏感。输入数据中的异常值可能会扭曲和误导机器学习算法的训练过程,从而导致更长的训练时间,更不准确的模型以及最终的较差结果。

异常值

由 Robert S. Donovan拍摄 ,保留一些权利

即使在针对训练数据准备预测模型之前,异常值也可能导致误导性表示,进而导致对收集数据的误导性解释。异常值可以在描述性统计中偏离属性值的摘要分布,如平均值和标准差,以及直方图和散点图等图形,压缩数据体。

最后,异常值可以表示与问题相关的数据实例的示例,例如欺诈检测和计算机安全性中的异常。

异常值是极端值,远远超出其他观察值。例如,在正态分布中,异常值可以是分布尾部的值。

识别异常值的过程在数据挖掘和机器学习中有许多名称,例如异常值挖掘,异常值建模和新颖性检测以及异常检测。

在他的书 Outlier Analysis (会员链接)中,Aggarwal提供了一个有用的离群检测方法分类,如下:

Aggarwal评论说,异常模型的可解释性至关重要。对于特定数据实例为何或不是异常值的决策,需要上下文或基本原理。

在他的 数据挖掘和知识发现手册 (会员链接)的贡献章节中 ,Irad Ben-Gal提出了异常模型的分类,如单变量或多变量,参数和非参数。这是基于已知数据来构造方法的有用方法。例如:

有许多方法和很多研究都用于异常检测。首先进行一些假设和设计实验,您可以清楚地观察这些假设对某些性能或准确度测量的影响。

我建议通过极值分析,接近方法和投影方法的步进过程。

您无需了解高级统计方法即可查找,分析和过滤数据中的异常值。通过极值分析开始简单。

一旦探索了更简单的极值方法,请考虑转向基于邻近度的方法。

投影方法应用起来相对简单,并且可以快速突出显示无关的值。

另一种策略是转向对异常值具有鲁棒性的模型。有强大的回归形式可以最小化中位数最小二乘误差而不是均值(所谓的稳健回归),但计算量更大。还有一些方法,如决策树,对异常值很强。

您可以检查一些对异常值有效的方法。如果存在显着的模型准确性优势,则可能有机会对训练数据中的异常值进行建模和过滤。

有很多网页讨论异常值检测,但我建议阅读一本关于这个主题的好书,更具权威性。即使查看机器学习和数据挖掘的入门书籍也不会对您有用。有关统计学家对异常值的经典处理,请查看:

关于“18、如何识别数据中的异常值”这个话题的介绍,今天小编就给大家分享完了,如果对你有所帮助请保持对本站的关注!

本文来自作者[婉玉儿]投稿,不代表盛龙号立场,如若转载,请注明出处:https://wap.snlon.net/sn/43036.html

(33)

文章推荐

  • 南宁到德天瀑布有几公里-在南宁有动车到大新县么-

    网上有关“南宁到德天瀑布有几公里?在南宁有动车到大新县么?”话题很是火热,小编也是针对南宁到德天瀑布有几公里?在南宁有动车到大新县么?寻找了一些与之相关的一些信息进行分析,如果能碰巧解决你现在面临的问题,希望能够帮助到您。驾车路线:全程约245.8公里起点:南宁市1.南宁市内驾车方案1)从起点向东

    2025年10月18日
    187315
  • 从广州新白云机场到广州番禺长隆酒店怎么走最近

    网上有关“从广州新白云机场到广州番禺长隆酒店怎么走最近”话题很是火热,小编也是针对从广州新白云机场到广州番禺长隆酒店怎么走最近寻找了一些与之相关的一些信息进行分析,如果能碰巧解决你现在面临的问题,希望能够帮助到您。地铁3号线北延段→地铁3号线全程约1小时57分钟/47.4公里/20站/换乘1次起点新

    2025年10月21日
    302306
  • 旅游管理国考可以报哪些职位

    网上有关“旅游管理国考可以报哪些职位”话题很是火热,小编也是针对旅游管理国考可以报哪些职位寻找了一些与之相关的一些信息进行分析,如果能碰巧解决你现在面临的问题,希望能够帮助到您。旅游管理国考可以报哪些职位如下:旅游管理专业可以考旅游运营岗、旅游促销岗、旅游经济岗、旅游文化岗。1、国考中的国家事务管理

    2025年11月10日
    149321
  • 不同资格审查方式引发两种招标投标流程

    网上有关“不同资格审查方式引发两种招标投标流程”话题很是火热,小编也是针对不同资格审查方式引发两种招标投标流程寻找了一些与之相关的一些信息进行分析,如果能碰巧解决你现在面临的问题,希望能够帮助到您。法律分析:资审方式的不同,引发了两种不同的招投标流程。采用资格预审的招标项目,一般遵循如下流程进行操作

    2025年11月14日
    157306
  • 墙面开裂怎么办装修达人支招七种常见居家问题修复方法

    网上有关“墙面开裂怎么办装修达人支招七种常见居家问题修复方法”话题很是火热,小编也是针对墙面开裂怎么办装修达人支招七种常见居家问题修复方法寻找了一些与之相关的一些信息进行分析,如果能碰巧解决你现在面临的问题,希望能够帮助到您。墙体裂缝是建筑结构的墙体部分产生的开裂现象,按照材料自身材质的不同,可以分

    2025年12月21日
    107319
  • 天平山赏枫最佳季节——赏枫景点推荐

    网上有关“天平山赏枫最佳季节——赏枫景点推荐”话题很是火热,小编也是针对天平山赏枫最佳季节——赏枫景点推荐寻找了一些与之相关的一些信息进行分析,如果能碰巧解决你现在面临的问题,希望能够帮助到您。苏州的天平山虽然陡峭,但还是有很多游客登高远眺。每年秋天不要错过天平山,因为天平山是中国著名的赏枫胜地。什

    2025年12月26日
    113310
  • 实测教程“微乐内蒙麻将小程序怎么提高胜率”开挂神器{透视辅助}全揭秘

    【无需打开直接搜索;操作使用教程:1、界面简单,没有任何广告弹出,只有一个编辑框。2、没有风险,里面的黑科技,一键就能快速透明。3、上手简单,内置详细流程视频教学,新手小白可以快速上手。4、体积小,不占用任何手机内存,运行流畅。微乐家乡麻将免费开挂详细了解请添加《》(加我们微)1、用户打开微乐家乡

    2026年02月08日
    53306
  • 实测教程“微乐麻将小程序万能开挂器”开挂神器{透视辅助}全揭秘

    >>>您好:,软件加微信【添加图中QQ群】确实是有挂的,很多玩家在这款游戏中打牌都会发现很多用户的牌特别好,总是好牌,而且好像能看到其他人的牌一样。所以很多小伙伴就怀疑这款游戏是不是有挂,实际上这款游戏确实是有挂的,添加客服微信【添加图中QQ群】安装软件.1、起手看牌2、随意选牌3

    2026年02月11日
    64300
  • 连喷墨盒和普通墨盒哪个好

    网上有关“连喷墨盒和普通墨盒哪个好”话题很是火热,小编也是针对连喷墨盒和普通墨盒哪个好寻找了一些与之相关的一些信息进行分析,如果能碰巧解决你现在面临的问题,希望能够帮助到您。根据具体要求,决定使用连供还是使用原装墨盒。使用原装墨盒最好。墨水流畅,不容易堵塞喷头,打印照片质量高,清晰,不容易退色。但是

    2026年02月19日
    70323
  • 起亚狮跑迎宾灯开关在哪

    网上有关“起亚狮跑迎宾灯开关在哪”话题很是火热,小编也是针对起亚狮跑迎宾灯开关在哪寻找了一些与之相关的一些信息进行分析,如果能碰巧解决你现在面临的问题,希望能够帮助到您。在车顶的位置,同阅读灯、天窗开关等设置在一起。车门迎宾灯开关会设置在车顶的位置,同阅读灯、天窗开关等设置在一起。只要开启一次,以后

    2026年02月22日
    46303
  • 怎么做闺蜜手链简单又好看

    网上有关“怎么做闺蜜手链简单又好看”话题很是火热,小编也是针对怎么做闺蜜手链简单又好看寻找了一些与之相关的一些信息进行分析,如果能碰巧解决你现在面临的问题,希望能够帮助到您。做闺蜜手链简单又好看的方法如下:1、首先准备材料:十根以上的彩色橡皮筋、一个S扣。2、然后开始编织,先将绿色皮_以交叉的8字形

    2026年02月22日
    46313
  • 从马桥到顺义杨镇杜庄怎么坐地铁

    网上有关“从马桥到顺义杨镇杜庄怎么坐地铁”话题很是火热,小编也是针对从马桥到顺义杨镇杜庄怎么坐地铁寻找了一些与之相关的一些信息进行分析,如果能碰巧解决你现在面临的问题,希望能够帮助到您。公交线路:通12路→亦庄线→地铁5号线→地铁15号线→918路,全程约86.6公里1、从马桥中学步

    2026年03月09日
    31316

发表回复

本站作者才能评论

评论列表(3条)

  • 婉玉儿的头像
    婉玉儿 2026年02月25日

    我是盛龙号的签约作者“婉玉儿”

  • 婉玉儿
    婉玉儿 2026年02月25日

    本文概览:网上有关“18、如何识别数据中的异常值”话题很是火热,小编也是针对18、如何识别数据中的异常值寻找了一些与之相关的一些信息进行分析,如果能碰巧解决你现在面临的问题,希望能够帮助...

  • 婉玉儿
    用户022507 2026年02月25日

    文章不错《18、如何识别数据中的异常值》内容很有帮助