！

最近我和我的团队一直在做一些大数据相关的工作，我来一下这个问题。

首先是第一个问题，大数据平台是什么？

当我们说到一个平台的时候，我们的意识里面往往就知道，这里面肯定不止一样东西，它是很多东西的一个集合，大数据平台也是一样，首先如果用几个字来描述它的话就是“它是一个数据解决方案”，进一步解析就是：大数据平台它是一个以分布式存储为基础，集成了数据获取，数据清洗，数据流转，数据分析，数据输出等工具集的一个数据解决方案。它的核心使命是提供数据存储和数据分析服务给目标客户。

那么它的核心组成部分是什么呢？实现的方法有多种，我就举一个最典型的大数据平台结构作为说明。

目前无论是国内或者国外，应用最广泛也是最典型的大数据平台是以Hadoop为核心进行功能延伸的生态系统，业内把它叫做Hadoop生态，它开源并且免费使用，它长什么样子？它的面目基本上是这样：

。希望一起交流大数据

大数据，所谓大，最起码是PB级别的数据量，而且每天以给飞快的速度积累，如何存储，迁移数据，如何计算这些数据，就成了系统的瓶颈。单节点很难完成这样的任务。

大数据平台可以处理上述问题，分布式架构，高可用的集群保证安全快速的处理数据，能够达到毫秒级别的反应速度。

依我的理解，至少得是TB级以上的数据量要处理，同时传统的数据库已无法满足数据处理和分析的需求，或者是性能不支持了。

小的大数据平台，弄三台服务器，就可以搭建。关键还是看您的数据量和运算需求，后面再逐步增加服务器。

另外如果是自己不会建也可以用阿里云，腾讯云，华为云，租赁也是一种选择。

大数据平台搭建，网上也有教程的，大家现在普遍用的开源技术，自己研究下就可以了。