数据分析的数值处理是什么?这些处理方法才是数据分析师的基础
更新时间:2020-06-16 10:04:58
来源:环球网校
浏览
收藏
摘要 在检查数据集是否正确时,很容易发现需要处理的是空值和异常值。当数据集中出现空值时,可以一目了然地识别出来,那么数据分析的数值处理是什么?这些处理方法才是数据分析师的基础,小编为大家讲数据分析的数值处理是什么?这些处理方法才是数据分析师的基础。
在检查数据集是否正确时,很容易发现需要处理的是空值和异常值。当数据集中出现空值时,可以一目了然地识别出来;当出现异常值时,需要根据经验判断,例如,数据类型的值过大、文本过长和不匹配。在接下来的数据认知步骤中,对指标进行统计汇总和分布观察,也有助于识别异常值。
一、数据分析的数值处理是什么——空值处理
空值。如果在常规摘要统计中可以忽略它,则可以忽略它。如果不能忽略,可以使用以下方法:
替换:使用平均值或模式替换它,或使用最接近的数据替换它。您需要仔细比较并找出此行中数据的其他值是否相似;
推断:利用模型与非空变量相结合,对空值进行推断、预测和计算,如:时间序列、回归模型等;
删除:为空值,不可处理,已确定影响后续计算分析,可考虑删除该行记录。如果你不确定它是否会影响你,你可以考虑暂时不处理它。
二、数据分析的数值处理是什么——异常值的处理
初步观察发现异常值:
在Excel中,可以通过过滤函数或删除重复值来观察数据列;
在SQL中,可以使用distinct来消除重复观测;
在Python中,您可以熊猫.drop复制()和其他方法。
垃圾数据或异常值可以用较少的方法处理。当数据记录占很大比重时,首先要找出数据异常的原因,并从源头上加以解决。当数据记录所占比例很小时,可以直接删除。
以上就是《数据分析的数值处理是什么?这些处理方法才是数据分析师的基础》的全部内容,从文字中我们可以看到,在检查数据集是否正确时,很容易发现需要处理的是空值和异常值。当数据集中出现空值时,可以一目了然地识别出来。如果你想学习更多数据分析知识,可以点击下方资料下载链接。
编辑推荐
最新资讯
- 数据分析汇总报告有哪些组成?这才是数据分析师能力的体现2020-07-17
- 什么是EOI框架?这对于数据分析师竟然这么重要2020-07-17
- 如何进行业务核心数据分析?这对于数据分析师来说竟如此重要2020-07-16
- 有哪些数据分析实践的概念?不会这个的数据分析师都转行了2020-07-13
- 数据的分析思路是什么?正确的分析思路可以帮助数据分析师进步2020-07-10
- 什么是数据回归分析方法?这才是数据分析师要用到的利器2020-07-10
- 数据相关的分析方法是什么?这三种才是数据分析师的救星2020-07-10
- 高级数据分析方法是什么?这才是数据分析师进阶的必备技能2020-07-09
- 提出数据假设的方法是什么?这才是数据分析师应该明白的东西2020-07-09
- 如何找出数据优化指标?优秀的数据分析师都在这样思考2020-07-09