18、如何识别数据中的异常值

网上有关“18、如何识别数据中的异常值”话题很是火热,小编也是针对18、如何识别数据中的异常值寻找了一些与之相关的一些信息进行分析,如果能碰巧解决你现在面临的问题,希望能够帮助到您。

Bojan Miletic在使用机器学习算法时询问了有关数据集中异常值检测的问题。这篇文章是对他的问题的回答。

许多机器学习算法对输入数据中属性值的范围和分布敏感。输入数据中的异常值可能会扭曲和误导机器学习算法的训练过程,从而导致更长的训练时间,更不准确的模型以及最终的较差结果。

异常值

由 Robert S. Donovan拍摄 ,保留一些权利

即使在针对训练数据准备预测模型之前,异常值也可能导致误导性表示,进而导致对收集数据的误导性解释。异常值可以在描述性统计中偏离属性值的摘要分布,如平均值和标准差,以及直方图和散点图等图形,压缩数据体。

最后,异常值可以表示与问题相关的数据实例的示例,例如欺诈检测和计算机安全性中的异常。

异常值是极端值,远远超出其他观察值。例如,在正态分布中,异常值可以是分布尾部的值。

识别异常值的过程在数据挖掘和机器学习中有许多名称,例如异常值挖掘,异常值建模和新颖性检测以及异常检测。

在他的书 Outlier Analysis (会员链接)中,Aggarwal提供了一个有用的离群检测方法分类,如下:

Aggarwal评论说,异常模型的可解释性至关重要。对于特定数据实例为何或不是异常值的决策,需要上下文或基本原理。

在他的 数据挖掘和知识发现手册 (会员链接)的贡献章节中 ,Irad Ben-Gal提出了异常模型的分类,如单变量或多变量,参数和非参数。这是基于已知数据来构造方法的有用方法。例如:

有许多方法和很多研究都用于异常检测。首先进行一些假设和设计实验,您可以清楚地观察这些假设对某些性能或准确度测量的影响。

我建议通过极值分析,接近方法和投影方法的步进过程。

您无需了解高级统计方法即可查找,分析和过滤数据中的异常值。通过极值分析开始简单。

一旦探索了更简单的极值方法,请考虑转向基于邻近度的方法。

投影方法应用起来相对简单,并且可以快速突出显示无关的值。

另一种策略是转向对异常值具有鲁棒性的模型。有强大的回归形式可以最小化中位数最小二乘误差而不是均值(所谓的稳健回归),但计算量更大。还有一些方法,如决策树,对异常值很强。

您可以检查一些对异常值有效的方法。如果存在显着的模型准确性优势,则可能有机会对训练数据中的异常值进行建模和过滤。

有很多网页讨论异常值检测,但我建议阅读一本关于这个主题的好书,更具权威性。即使查看机器学习和数据挖掘的入门书籍也不会对您有用。有关统计学家对异常值的经典处理,请查看:

关于“18、如何识别数据中的异常值”这个话题的介绍,今天小编就给大家分享完了,如果对你有所帮助请保持对本站的关注!

本文来自作者[婉玉儿]投稿,不代表盛龙号立场,如若转载,请注明出处:https://wak.snlon.net/sn/43036.html

(97)

文章推荐

  • 江苏高考322分左右能上什么大学

    网上有关“江苏高考322分左右能上什么大学”话题很是火热,小编也是针对江苏高考322分左右能上什么大学寻找了一些与之相关的一些信息进行分析,如果能碰巧解决你现在面临的问题,希望能够帮助到您。2023年江苏高考分数在322分这个区间的同学是有不少的,而可以选择报考的大学也有很多,下面小编整理出江苏高考

    2025年09月30日
    291317
  • 村委会低保证明怎么开

    网上有关“村委会低保证明怎么开”话题很是火热,小编也是针对村委会低保证明怎么开寻找了一些与之相关的一些信息进行分析,如果能碰巧解决你现在面临的问题,希望能够帮助到您。法律分析:需要去民政局,办理需要材料如下:一、申请书(由民政部门统一印制)。二、居民户口簿、居民身份证。三、收人证明:在职人员收入证明

    2025年10月04日
    254304
  • 实操教程“微乐麻将挂先试用后付款是真的吗”(详细开挂教程)

    ˂pstyle="font-size:16px;font-family:-apple-system,BlinkMacSystemFont,"vertical-align:baseline;font-weight:400;color:#1A1A1A;font-style:normal;

    2025年10月12日
    189323
  • 遇到斤斤计较小气的同事怎么相处

    网上有关“遇到斤斤计较小气的同事怎么相处”话题很是火热,小编也是针对遇到斤斤计较小气的同事怎么相处寻找了一些与之相关的一些信息进行分析,如果能碰巧解决你现在面临的问题,希望能够帮助到您。小气的人,有几个特点,什么事都上心,大小事都往心里去,不放过,他们一般都很勤劳,每做一件事,不知道对与错,任何事情

    2025年10月13日
    209306
  • 武汉市开车到浙江桐乡市高速收费多少

    网上有关“武汉市开车到浙江桐乡市高速收费多少”话题很是火热,小编也是针对武汉市开车到浙江桐乡市高速收费多少寻找了一些与之相关的一些信息进行分析,如果能碰巧解决你现在面临的问题,希望能够帮助到您。过路费350左右驾车路线:全程约780.3公里起点:武汉市1.武汉市内驾车方案1)从起点向正东方向出发,

    2025年10月21日
    219310
  • 建设厂房预留地分为吗-

    网上有关“建设厂房预留地分为吗?”话题很是火热,小编也是针对建设厂房预留地分为吗?寻找了一些与之相关的一些信息进行分析,如果能碰巧解决你现在面临的问题,希望能够帮助到您。不可以,预留建设用地是指土地利用总体规划期内按上级下达的规划控制总规模而在乡镇土地利用总体规划图上标注划定的城镇、村庄发展建设预留

    2025年12月05日
    179323
  • 20万左右的女款车哪款好?

    网上有关“20万左右的女款车哪款好?”话题很是火热,小编也是针对20万左右的女款车哪款好?寻找了一些与之相关的一些信息进行分析,如果能碰巧解决你现在面临的问题,希望能够帮助到您。你比如说要高端大气上档次。你这个价格区间,个人更推荐看一看,奥迪A3,毕竟是一个豪华品牌,只是空间方面表现得有点小。自己一

    2025年12月22日
    156316
  • 这辆大众辉昂才开了4千公里就贬值17万!26万买它划算吗?

    网上有关“这辆大众辉昂才开了4千公里就贬值17万!26万买它划算吗?”话题很是火热,小编也是针对这辆大众辉昂才开了4千公里就贬值17万!26万买它划算吗?寻找了一些与之相关的一些信息进行分析,如果能碰巧解决你现在面临的问题,希望能够帮助到您。哈喽,大家好!检车家老司机又和大家见面了,我是检车家的检车

    2026年02月02日
    136323
  • 建设工程监理(水利工程监理)

    网上有关“建设工程监理(水利工程监理)”话题很是火热,小编也是针对建设工程监理(水利工程监理)寻找了一些与之相关的一些信息进行分析,如果能碰巧解决你现在面临的问题,希望能够帮助到您。很大的题目。简介如下:1、前期资料:规划、可研、初设的各种报告及批复;2、施工期:招投标、施工合同、计划、质量、安全、

    2026年02月21日
    110308
  • 常州100台机器的网吧一年能赚多少

    网上有关“常州100台机器的网吧一年能赚多少”话题很是火热,小编也是针对常州100台机器的网吧一年能赚多少寻找了一些与之相关的一些信息进行分析,如果能碰巧解决你现在面临的问题,希望能够帮助到您。把你网吧的设施设备都弄好点环境好配置高人家才会一直来而且如果是在街面上或者学校附近那生意是更不用

    2026年03月19日
    110312
  • 五菱荣光EV对比瑞驰新能源EC31 谁是电动-带货-王

    网上有关“五菱荣光EV对比瑞驰新能源EC31谁是电动"带货"王”话题很是火热,小编也是针对五菱荣光EV对比瑞驰新能源EC31谁是电动"带货"王寻找了一些与之相关的一些信息进行分析,如果能碰巧解决你现在面临的问题,希望能够帮助到您。推广"绿色物流"已经成为未来城市推进运输结构调整的大趋势,新能源城

    2026年04月07日
    78304
  • 地中海沿岸发展水果业的有利条件

    网上有关“地中海沿岸发展水果业的有利条件”话题很是火热,小编也是针对地中海沿岸发展水果业的有利条件寻找了一些与之相关的一些信息进行分析,如果能碰巧解决你现在面临的问题,希望能够帮助到您。这考的是气候对农业的影响。应该分这样几个方面来回答:气温,降水,是否雨热同期,光照,热量,温差。——注意:并不是每

    2026年04月25日
    55301

发表回复

本站作者才能评论

评论列表(3条)

  • 婉玉儿的头像
    婉玉儿 2026年02月25日

    我是盛龙号的签约作者“婉玉儿”

  • 婉玉儿
    婉玉儿 2026年02月25日

    本文概览:网上有关“18、如何识别数据中的异常值”话题很是火热,小编也是针对18、如何识别数据中的异常值寻找了一些与之相关的一些信息进行分析,如果能碰巧解决你现在面临的问题,希望能够帮助...

  • 婉玉儿
    用户022507 2026年02月25日

    文章不错《18、如何识别数据中的异常值》内容很有帮助