18、如何识别数据中的异常值

网上有关“18、如何识别数据中的异常值”话题很是火热,小编也是针对18、如何识别数据中的异常值寻找了一些与之相关的一些信息进行分析,如果能碰巧解决你现在面临的问题,希望能够帮助到您。

Bojan Miletic在使用机器学习算法时询问了有关数据集中异常值检测的问题。这篇文章是对他的问题的回答。

许多机器学习算法对输入数据中属性值的范围和分布敏感。输入数据中的异常值可能会扭曲和误导机器学习算法的训练过程,从而导致更长的训练时间,更不准确的模型以及最终的较差结果。

异常值

由 Robert S. Donovan拍摄 ,保留一些权利

即使在针对训练数据准备预测模型之前,异常值也可能导致误导性表示,进而导致对收集数据的误导性解释。异常值可以在描述性统计中偏离属性值的摘要分布,如平均值和标准差,以及直方图和散点图等图形,压缩数据体。

最后,异常值可以表示与问题相关的数据实例的示例,例如欺诈检测和计算机安全性中的异常。

异常值是极端值,远远超出其他观察值。例如,在正态分布中,异常值可以是分布尾部的值。

识别异常值的过程在数据挖掘和机器学习中有许多名称,例如异常值挖掘,异常值建模和新颖性检测以及异常检测。

在他的书 Outlier Analysis (会员链接)中,Aggarwal提供了一个有用的离群检测方法分类,如下:

Aggarwal评论说,异常模型的可解释性至关重要。对于特定数据实例为何或不是异常值的决策,需要上下文或基本原理。

在他的 数据挖掘和知识发现手册 (会员链接)的贡献章节中 ,Irad Ben-Gal提出了异常模型的分类,如单变量或多变量,参数和非参数。这是基于已知数据来构造方法的有用方法。例如:

有许多方法和很多研究都用于异常检测。首先进行一些假设和设计实验,您可以清楚地观察这些假设对某些性能或准确度测量的影响。

我建议通过极值分析,接近方法和投影方法的步进过程。

您无需了解高级统计方法即可查找,分析和过滤数据中的异常值。通过极值分析开始简单。

一旦探索了更简单的极值方法,请考虑转向基于邻近度的方法。

投影方法应用起来相对简单,并且可以快速突出显示无关的值。

另一种策略是转向对异常值具有鲁棒性的模型。有强大的回归形式可以最小化中位数最小二乘误差而不是均值(所谓的稳健回归),但计算量更大。还有一些方法,如决策树,对异常值很强。

您可以检查一些对异常值有效的方法。如果存在显着的模型准确性优势,则可能有机会对训练数据中的异常值进行建模和过滤。

有很多网页讨论异常值检测,但我建议阅读一本关于这个主题的好书,更具权威性。即使查看机器学习和数据挖掘的入门书籍也不会对您有用。有关统计学家对异常值的经典处理,请查看:

关于“18、如何识别数据中的异常值”这个话题的介绍,今天小编就给大家分享完了,如果对你有所帮助请保持对本站的关注!

本文来自作者[婉玉儿]投稿,不代表盛龙号立场,如若转载,请注明出处:https://snlon.net/sn/43036.html

(29)

文章推荐

  • 初中毕业去学护理好不好

    网上有关“初中毕业去学护理好不好”话题很是火热,小编也是针对初中毕业去学护理好不好寻找了一些与之相关的一些信息进行分析,如果能碰巧解决你现在面临的问题,希望能够帮助到您。初中毕业去学护理好。初中毕业去学护理是一个很好的选择。现在医疗行业需要护士,就业前景广阔。护理专业以医护专业课为主,文化课是辅助,

    2025年09月15日
    189304
  • 卫生间下水道变窄结垢

    网上有关“卫生间下水道变窄结垢”话题很是火热,小编也是针对卫生间下水道变窄结垢寻找了一些与之相关的一些信息进行分析,如果能碰巧解决你现在面临的问题,希望能够帮助到您。卫生间下水道变窄结垢如何疏通?一、水道疏通剂:是目前市场上最优秀的产品。这个产品对头发、油腻、纸等引起的堵塞疏通特别有效。广泛用

    2025年09月23日
    194316
  • 30%是什么意思

    网上有关“30%是什么意思”话题很是火热,小编也是针对30%是什么意思寻找了一些与之相关的一些信息进行分析,如果能碰巧解决你现在面临的问题,希望能够帮助到您。这个30%就是可以从原价中减免的钱。如果你买一样东西是100元,30%的折扣就是100*30%=30元,这30元就可以从你的买价100元中扣除

    2025年09月25日
    168314
  • 实测教程”微乐湖北麻将万能开挂器”附开挂脚本详细步骤

    您好:微乐湖北麻将万能开挂器这款游戏是可以开挂的,软件加微信【添加图中微信】确实是有挂的,很多玩家在这款游戏中打牌都会发现很多用户的牌特别好,总是好牌,而且好像能看到其他人的牌一样。所以很多小伙伴就怀疑这款游戏是不是有挂,实际上这款游戏确实是有挂的,添加客服微信【添加图中微信】安装软件.1.微乐

    2025年09月25日
    176316
  • 必看教程“微乐捉鸡麻将开挂神器下载安装”附开挂脚本详细步骤

    ˂pstyle="font-size:16px;font-family:-apple-system,BlinkMacSystemFont,"vertical-align:baseline;font-weight:400;color:#1A1A1A;font-style:normal;

    2025年10月02日
    141315
  • 微信营销平台添加自定义菜单时提示错误错误代码40019怎么解决?

    网上有关“微信营销平台添加自定义菜单时提示错误错误代码40019怎么解决?”话题很是火热,小编也是针对微信营销平台添加自定义菜单时提示错误错误代码40019怎么解决?寻找了一些与之相关的一些信息进行分析,如果能碰巧解决你现在面临的问题,希望能够帮助到您。微信营销平台添加自定义菜单时提示错误,错误代码

    2025年10月19日
    190310
  • 实测教程”微信麻将外卦神器下载安装”(原来确实是有挂)

    ˂pstyle="font-size:16px;font-family:-apple-system,BlinkMacSystemFont,"vertical-align:baseline;font-weight:400;color:#1A1A1A;font-style:normal;

    2025年10月28日
    140302
  • 实操教程“微乐麻将先挂试用一天”其实确实有挂

    亲,微乐麻将先挂试用一天这款游戏可以开挂的,确实是有挂的,很多玩家在这款游戏中打牌都会发现很多用户的牌特别好,总是好牌,而且好像能看到其他人的牌一样。所以很多小伙伴就怀疑这款游戏是不是有挂,实际上这款游戏确实是有挂的通过添加客服微:本司针对手游进行匹配,选择我们的四大理由:1、软件是

    2025年11月13日
    180315
  • 实测教程”手机棋牌输赢原理”附开挂脚本详细步骤

    >亲,手机棋牌输赢原理这款游戏原来确实可以开挂,详细开挂教程1、起手看牌2、随意选牌3、控制牌型4、注明,就是全场,公司软件防封号、防检测、 正版软件、非诚勿扰。2022首推。全网独家,诚信可靠,无效果全额退款,本司推出的多功能作 弊辅助软件。软件提

    2025年11月14日
    122305
  • 山东枣庄到辽宁开原全长多少公里

    网上有关“山东枣庄到辽宁开原全长多少公里”话题很是火热,小编也是针对山东枣庄到辽宁开原全长多少公里寻找了一些与之相关的一些信息进行分析,如果能碰巧解决你现在面临的问题,希望能够帮助到您。驾车路线:全程约1369.8公里起点:枣庄市1.枣庄市内驾车方案1)从起点向正西方向出发,行驶20米,右转2)

    2025年11月28日
    112314
  • 推荐一款“微乐河南麻将万能开挂器通用版”附开挂脚本详细步骤

    >亲,微乐河南麻将万能开挂器通用版这款游戏原来确实可以开挂,详细开挂教程1、起手看牌2、随意选牌3、控制牌型4、注明,就是全场,公司软件防封号、防检测、 正版软件、非诚勿扰。2022首推。全网独家,诚信可靠,无效果全额退款,本司推出的多功能作 弊辅助

    2025年12月13日
    94310
  • 为什么钢笔放久了会写不出水

    网上有关“为什么钢笔放久了会写不出水”话题很是火热,小编也是针对为什么钢笔放久了会写不出水寻找了一些与之相关的一些信息进行分析,如果能碰巧解决你现在面临的问题,希望能够帮助到您。许久不用,钢笔通墨水流道堵塞了,墨水里有些细微物质,另外墨水里含胶水长期不用就会干结的。解决方法:1、把墨放净后用温水冲洗

    2026年02月21日
    74300

发表回复

本站作者才能评论

评论列表(3条)

  • 婉玉儿的头像
    婉玉儿 2026年02月25日

    我是盛龙号的签约作者“婉玉儿”

  • 婉玉儿
    婉玉儿 2026年02月25日

    本文概览:网上有关“18、如何识别数据中的异常值”话题很是火热,小编也是针对18、如何识别数据中的异常值寻找了一些与之相关的一些信息进行分析,如果能碰巧解决你现在面临的问题,希望能够帮助...

  • 婉玉儿
    用户022507 2026年02月25日

    文章不错《18、如何识别数据中的异常值》内容很有帮助