问题描述:
如何构建大数据平台(搭建大数据平台具体的流程和步骤)
问题解答:
我来补答1、 步骤三:建设企业大数据平台 基于大数据平台咨询规划的成果,进行大数据的建设和实施。 由于大数据技术的复杂性,因此企业级大数据平台的建设不是一蹴而就,需循序渐进,分步实施,是一个续迭代的工程,需本着开放、平等、协作、分享的互联网精神,构建大数据平台生态圈,形成相互协同、相互促进的良好的态势。
3、 2.3 存储数据第二步,一旦数据进入大数据系统,清洗,并转化为所需格式时,这些过程都将在数据存储到一个合适的久化层中进行。 在下面的章节中,本文将介绍一些存储方面的最佳实践(包括逻辑上和物理上)。 在本文结尾也会讨论一部分涉及数据安全方面的问题。
4、 ·查询应用:平台实现条件不固定、不可预见、格式灵活的按需查询功能; ·固定报表应用:统计维度和指标固定的分析结果的展示,可根据业务系统的需求,分析产生各种业务报表数据等; ·动态分析应用:按关心的维度和指标对数据进行主题性的分析,动态分析应用中维度和指标不固定。
5、 作系统的选择作系统一般使用开源版的RedHat、Centos或者Debian作为底层的构建平台,要根据大数据平台所要搭建的数据分析工具可以支的系统,正确的选择作系统的版本。 搭建Hadoop集群Hadoop作为一个开发和运行处理大规模数据的软件平台,实现了在大量的廉价计算机组成的集群中对海量数据进行分布式计算。
2、 1、作体系的挑选 作体系一般使用开源版的RedHat、Centos或许Debian作为底层的构建渠道,要根据大数据渠道所要建立的数据析东西能够支撑的体系,正确的挑选作体系的版本。