数据处理的特点

数据处理的特点

数据处理的特点就是从大量的、杂乱无章、难以理解的数据中抽取并推导出对解决问题有价值、有意义的数据。

数据处理主要包括数据清洗、数据转化、数据提取、数据计算等处理方法。

数据清洗包括三部分，清除掉不必要的重复数据、填充缺失的数据、检测有逻辑错误的数据。主要是为后面的数据加工提供简洁、完整、正确的数据。

数据转换就是将数据进行合并、清理和整合，通过转换从一种表现形式变为另一种表现形式，并能够实现不同的源数据在语义上保持一致性的过程。

数据提取是指保留原数据中某些字段的部分信息，组合成一个新的字段。可以是截取某一字段的部分信息——字段分列；也可以是将某几个字段合并成一个新字段——字段合并；还可以将原数据中没有的，其他数据表中有的字段有效的匹配过来——字段匹配。

数据计算是指当我们想要的字段不能从数据源中直接提取，但可以通过计算来实现我们的需求。包括简单计算、函数计算、分组计算等。