数据处理的目的是从大量的、杂乱无章的、难以理解的数据中抽取并推导出对于某些特定人群来说是有价值、有意义的数据。数据处理是对各种数据进行分析和加工的技术过程,把数据转换成便于观察分析、传送或进一步处理的形式。

数据处理的基本方式:

1)根据处理设备的结构方式可分为联机处理方式和脱机处理方式。

2)根据数据处理时间的分配方式可分为批处理方式、分时处理方式和实时处理方式。

3)根据数据处理空间的分布方式可分为集中式处理方式和分布处理方式。

4)根据计算机中央处理器的工作方式可分为单道作业处理方式、多道作业处理方式和交互式处理方式。

数据处理的部分工具:

1、在数据转换部分,使用专业的ETL工具来帮助完成数据的提取、转换和加载,相应的工具有Informatica和开源的Kettle。

2、在数据存储和计算部分,借助数据库和数据仓库等工具,如Oracle、DB2、MySQL等。

3、在数据可视化部分,需要对数据的计算结果进行分析和展现,可以利用有BIEE、Microstrategy、Yonghong的Z-Suite等工具。

发表评论

您的电子邮箱地址不会被公开。