有spark，hadoop，es，kafka，hbase，hive等。Fansoft是一家商业智能和数据分析平台提供商。从报表工具到商业智能，有十几年的数据应用基础。它在这个领域已经非常成熟，目前正处于快速成长和低调的时期。是一家有技术实力，对客户有诚意的公司。
这个要分好几块来讲，首先我要说明的是大数据项目也是要有很多依赖的模块的。每个模块的软件不一样，下面分别聊一下。一、大数据处理这个是所谓大数据项目中最先想到的模块。主要有spark，hadoop，es，kafka，hbase，hive等。当然像是flume，sqoop也都很常用。这些软件主要是为了解决海量数据处理的问题。
软件很多，我只列几个经典的，具体可以自行百度。二、机器学习相关大部分大数据项目都和机器学习相关。因此会考虑到机器学习的一些软件，比如说sklearn，spark的ml，当然还有自己实现的代码。三、web相关技术大部分项目也都跑不了一个web的展示，因此web就很重要的，java的ssh，python的django都可以，这个看具体的项目组习惯了。
四、其它还有一些很常用的东西，个人感觉不完全算是大数据特定使用范围。反正我在做大数据项目的时候也都用到了。比如说数据存储：redis，mysql。数据可视化：echart，d3js。图数据库：neo4j。再来说说大数据平台的软件或者工具：1、 数据库，大数据平台类，星环，做Hadoop生态系列的大数据平台公司。
Hadoop是开源的，星环主要做的是把Hadoop不稳定的部分优化，功能细化，为企业提供Hadoop大数据引擎及数据库工具。2、 大数据存储硬件类，浪潮，很老牌的IT公司，国资委控股，研究大数据方面的存储，在国内比较领先。3、 云计算，云端大数据类，阿里巴巴，明星产品-阿里云，与亚马逊AWS抗衡，做公有云、私有云、混合云。
实力还不错，符合阿里巴巴的气质，很有野心。4.还有很多数据应用，比如Fansoft旗下的FineReport报表系统、FineBI大数据分析平台等。Fansoft是一家商业智能和数据分析平台提供商。从报表工具到商业智能，有十几年的数据应用基础。在这个领域已经很成熟了，目前处于快速成长期，但是很低调。是一家有技术实力，对客户有诚意的公司。
文章TAG：电商 分布式 文件系统 架构 集群
