大数据技术体系详解

大数据技术专业学的有：程序设计实践、离散数学、数据结构、数学分析。

教育数据采集的技术体系共包括：物联感知类技术、录类技术、图像识别类技术、平台采集类技术。 1、物联感知类技术 该类技术主要包括物联网感知技术、可穿戴设备技术和校园一卡通技术。

重点要突破分布式高速高可靠数据爬取或采集、高速数据全映像等大数据收集技术;突破高速数据解析、转换与装载等大数据整合技术;设计质量评估模型，开发数据质量技术。

1、大数据生态技术体系——Hadoop 由Apache基金会开发的分布式系统基础设施。 Hadoop框架的核心设计是HDFS和MapReduce。 HDFS提供海量数据的存储，MapReduce提供海量数据的计算。