18、如何识别数据中的异常值

网上有关“18、如何识别数据中的异常值”话题很是火热,小编也是针对18、如何识别数据中的异常值寻找了一些与之相关的一些信息进行分析,如果能碰巧解决你现在面临的问题,希望能够帮助到您。

Bojan Miletic在使用机器学习算法时询问了有关数据集中异常值检测的问题。这篇文章是对他的问题的回答。

许多机器学习算法对输入数据中属性值的范围和分布敏感。输入数据中的异常值可能会扭曲和误导机器学习算法的训练过程,从而导致更长的训练时间,更不准确的模型以及最终的较差结果。

异常值

由 Robert S. Donovan拍摄 ,保留一些权利

即使在针对训练数据准备预测模型之前,异常值也可能导致误导性表示,进而导致对收集数据的误导性解释。异常值可以在描述性统计中偏离属性值的摘要分布,如平均值和标准差,以及直方图和散点图等图形,压缩数据体。

最后,异常值可以表示与问题相关的数据实例的示例,例如欺诈检测和计算机安全性中的异常。

异常值是极端值,远远超出其他观察值。例如,在正态分布中,异常值可以是分布尾部的值。

识别异常值的过程在数据挖掘和机器学习中有许多名称,例如异常值挖掘,异常值建模和新颖性检测以及异常检测。

在他的书 Outlier Analysis (会员链接)中,Aggarwal提供了一个有用的离群检测方法分类,如下:

Aggarwal评论说,异常模型的可解释性至关重要。对于特定数据实例为何或不是异常值的决策,需要上下文或基本原理。

在他的 数据挖掘和知识发现手册 (会员链接)的贡献章节中 ,Irad Ben-Gal提出了异常模型的分类,如单变量或多变量,参数和非参数。这是基于已知数据来构造方法的有用方法。例如:

有许多方法和很多研究都用于异常检测。首先进行一些假设和设计实验,您可以清楚地观察这些假设对某些性能或准确度测量的影响。

我建议通过极值分析,接近方法和投影方法的步进过程。

您无需了解高级统计方法即可查找,分析和过滤数据中的异常值。通过极值分析开始简单。

一旦探索了更简单的极值方法,请考虑转向基于邻近度的方法。

投影方法应用起来相对简单,并且可以快速突出显示无关的值。

另一种策略是转向对异常值具有鲁棒性的模型。有强大的回归形式可以最小化中位数最小二乘误差而不是均值(所谓的稳健回归),但计算量更大。还有一些方法,如决策树,对异常值很强。

您可以检查一些对异常值有效的方法。如果存在显着的模型准确性优势,则可能有机会对训练数据中的异常值进行建模和过滤。

有很多网页讨论异常值检测,但我建议阅读一本关于这个主题的好书,更具权威性。即使查看机器学习和数据挖掘的入门书籍也不会对您有用。有关统计学家对异常值的经典处理,请查看:

关于“18、如何识别数据中的异常值”这个话题的介绍,今天小编就给大家分享完了,如果对你有所帮助请保持对本站的关注!

本文来自作者[婉玉儿]投稿,不代表盛龙号立场,如若转载,请注明出处:https://wak.snlon.net/sn/43036.html

(96)

文章推荐

  • 处理的物理方法有哪些工业废

    网上有关“处理的物理方法有哪些工业废”话题很是火热,小编也是针对处理的物理方法有哪些工业废寻找了一些与之相关的一些信息进行分析,如果能碰巧解决你现在面临的问题,希望能够帮助到您。塑料的回收处理技术以前大多采用化学方法,现在慢慢向物理方法转移。处理技术如下:1传统处理回收技术塑料工业发展的初级阶段就

    2025年10月25日
    225303
  • 玩家辅助神器:“微乐小程序麻将开挂方法”(详细开挂教程)

    您好:微乐小程序麻将开挂方法这款游戏是可以开挂的,软件加微信【添加图中微信】确实是有挂的,很多玩家在这款游戏中打牌都会发现很多用户的牌特别好,总是好牌,而且好像能看到其他人的牌一样。所以很多小伙伴就怀疑这款游戏是不是有挂,实际上这款游戏确实是有挂的,添加客服微信【添加图中微信】安装软件.1.微乐

    2025年10月27日
    194316
  • 东北电力大学热能工程专业硕士要多少分?

    网上有关“东北电力大学热能工程专业硕士要多少分?”话题很是火热,小编也是针对东北电力大学热能工程专业硕士要多少分?寻找了一些与之相关的一些信息进行分析,如果能碰巧解决你现在面临的问题,希望能够帮助到您。专业硕士今年320就够了,学术330就行,但我们学校的热动没有电气好---“紧急通知”----:2

    2025年11月15日
    200319
  • 教程开挂辅助“微乐宁夏开挂器通用版”开挂(透视)辅助教程

     >>>您好:微乐宁夏开挂器通用版,软件加微信【】确实是有挂的,很多玩家在微乐宁夏开挂器通用版这款游戏中打牌都会发现很多用户的牌特别好,总是好牌,而且好像能看到其他人的牌一样。所以很多小伙伴就怀疑微乐宁夏开挂器通用版这款游戏是不是有挂,实际上这款游戏确实是有挂的,添加客服

    2025年11月27日
    168320
  • 欧体楷书适合初学者吗-

    网上有关“欧体楷书适合初学者吗?”话题很是火热,小编也是针对欧体楷书适合初学者吗?寻找了一些与之相关的一些信息进行分析,如果能碰巧解决你现在面临的问题,希望能够帮助到您。可以从欧体字学起。我的楷书就是从学欧体字开始进步快的,在这之前我练了柳体、颜体。顺便说一下,其实练习书法,除了要多写之外,平时还要

    2026年01月02日
    139305
  • 四川省第一大湖

    网上有关“四川省第一大湖”话题很是火热,小编也是针对四川省第一大湖寻找了一些与之相关的一些信息进行分析,如果能碰巧解决你现在面临的问题,希望能够帮助到您。白龙湖位于青川县和广元市中区境内,距广元市区60公里,面积100平方公里,为四川省第一大湖。白龙湖是一大型人工湖泊,宝珠寺电站大坝建成蓄水后,将形

    2026年01月19日
    134308
  • 客厅地毯怎么铺?

    网上有关“客厅地毯怎么铺?”话题很是火热,小编也是针对客厅地毯怎么铺?寻找了一些与之相关的一些信息进行分析,如果能碰巧解决你现在面临的问题,希望能够帮助到您。很多人喜欢在沙发范围内摆放一块华丽缤纷的大地毯,既可增添美感,同时又可突出沙发在客厅中的主导地位。客厅风水——饰物之地毯篇很多人喜欢在沙发

    2026年02月01日
    123320
  • 真实辅助“微乐海南麻将开挂神器”(详细开挂教程)

    您好:,软件加微信【添加图中QQ群】确实是有挂的,很多玩家在这款游戏中打牌都会发现很多用户的牌特别好,总是好牌,而且好像能看到其他人的牌一样。所以很多小伙伴就怀疑这款游戏是不是有挂,实际上这款游戏确实是有挂的,添加客服微信【添加图中QQ群】安装软件.1、起手看牌2、随意选牌3、控制牌型4、注明,就是

    2026年02月12日
    109300
  • 美国技术移民职业一览表 哪些职业更容易申请成功

    网上有关“美国技术移民职业一览表哪些职业更容易申请成功”话题很是火热,小编也是针对美国技术移民职业一览表哪些职业更容易申请成功寻找了一些与之相关的一些信息进行分析,如果能碰巧解决你现在面临的问题,希望能够帮助到您。 美国环境优越,教育完善,是不少移民者心中的目的地,那么哪些职业更容易申请成功?跟

    2026年02月20日
    102301
  • 薰衣草的花语由来?

    网上有关“薰衣草的花语由来?”话题很是火热,小编也是针对薰衣草的花语由来?寻找了一些与之相关的一些信息进行分析,如果能碰巧解决你现在面临的问题,希望能够帮助到您。熏衣草是一种馥郁的紫蓝色的小花。它就像它的所在地一样具有浪漫的情怀。这种生於法国普鲁旺的花,有一个美丽的爱情传说:传说一:古时的普罗望斯

    2026年03月22日
    108305
  • 真实辅助“小程序微乐麻将有没有挂”(免费)开挂辅助教学(最新辅助开挂教程)

    您好:德州wepoker有透视挂吗这款游戏是可以开挂的,软件加【添加图中QQ群】确实是有挂的,很多玩家在这款游戏中打牌都会发现很多用户的牌特别好,总是好牌,而且好像能看到其他人的牌一样。所以很多小伙伴就怀疑这款游戏是不是有挂,实际上这款游戏确实是有挂的,添加QQ客服【添加图中QQ群】安装软件.1.德

    2026年04月01日
    64303
  • 什么牌子的果冻面膜比较好用?

    网上有关“什么牌子的果冻面膜比较好用?”话题很是火热,小编也是针对什么牌子的果冻面膜比较好用?寻找了一些与之相关的一些信息进行分析,如果能碰巧解决你现在面临的问题,希望能够帮助到您。什么牌子的面膜好用,现在面膜的功效非常多,美白、保湿、胶原蛋白、祛斑、祛痘……太多太多,可是在选择功效时,对于类型该如

    2026年05月08日
    16321

发表回复

本站作者才能评论

评论列表(3条)

  • 婉玉儿的头像
    婉玉儿 2026年02月25日

    我是盛龙号的签约作者“婉玉儿”

  • 婉玉儿
    婉玉儿 2026年02月25日

    本文概览:网上有关“18、如何识别数据中的异常值”话题很是火热,小编也是针对18、如何识别数据中的异常值寻找了一些与之相关的一些信息进行分析,如果能碰巧解决你现在面临的问题,希望能够帮助...

  • 婉玉儿
    用户022507 2026年02月25日

    文章不错《18、如何识别数据中的异常值》内容很有帮助