大数据一般用什么软件有哪些,大数据平台的软件有哪些

大数据是海量的数据。一般只有达到TB级别才能算大数据。与传统的企业内部数据相比，大数据的内容和结构更加多样，数字文本、视频、语音、图像、文档XMLHTML等。可以作为大数据的内容。大数据技术的应用需要一个完善的环境支撑，其中有三个重要内容。第一，要有数据采集能力，这是互联网行业天然的优势，因为数据采集能力强。第二，要有数据价值能力，这是大数据技术的终极目标之一。目前数据分析是大数据价值的主要方式。第三，要有应用场景，可以看作是大数据应用的出口，往往很大。

大数据平台的软件有哪些？

这个要分好几块来讲，首先我要说明的是大数据项目也是要有很多依赖的模块的。每个模块的软件不一样，下面分别聊一下。一大数据处理这个是所谓大数据项目中最先想到的模块。主要有spark，hadoop，es，kafka，hbase，hive等。当然像是flume，sqoop也都很常用。这些软件主要是为了解决海量数据处理的问题。

软件很多，我只列几个经典的，具体可以自行百度。二机器学习相关大部分大数据项目都和机器学习相关。因此会考虑到机器学习的一些软件，比如说sklearn，spark的ml，当然还有自己实现的代码。三web相关技术大部分项目也都跑不了一个web的展示，因此web就很重要的，java的ssh，python的django都可以，这个看具体的项目组习惯了。

四其它还有一些很常用的东西，个人感觉不完全算是大数据特定使用范围。反正我在做大数据项目的时候也都用到了。比如说数据存储redis，mysql。数据可视化echart，d3js。图数据库neo4j。再来说说大数据平台的软件或者工具1 数据库，大数据平台类，星环，做Hadoop生态系列的大数据平台公司。

Hadoop是开源的，星环主要做的是把Hadoop不稳定的部分优化，功能细化，为企业提供Hadoop大数据引擎及数据库工具。2 大数据存储硬件类，浪潮，很老牌的IT公司，国资委控股，研究大数据方面的存储，在国内比较领先。3 云计算，云端大数据类，阿里巴巴，明星产品-阿里云，与亚马逊AWS抗衡，做公有云私有云混合云。

实力不差，符合阿里巴巴的气质，很有野心。4 数据应用方面这个有很多，比如帆软旗下的FineReport报表系统和FineBI大数据分析平台等。帆软是商业智能和数据分析平台提供商，从报表工具到商业智能，有十多年的数据应用的底子，在这个领域很成熟，目前处于快速成长期，但是很低调，是一家有技术有实力而且对客户很真诚的公司。

大数据具体是做什么？有哪些应用？

大数据即海量的数据，一般至少要达到TB级别才能算得上大数据，相比于传统的企业内数据，大数据的内容和结构要更加多样化，数值文本视频语音图像文档XMLHTML等都可以作为大数据的内容。提到大数据，最常见的应用就是大数据分析，大数据分析的数据来源不仅是局限于企业内部的信息化系统，还包括各种外部系统机器设备传感器数据库的数据，如政府银行国计民生行业产业社交网站等数据，通过大数据分析技术及工具将海量数据进行统计汇总后，以图形图表的方式进行数据展现，实现数据的可视化，在此基础上结合机器学习算法，对数据进行深度挖掘，发掘数据的潜在价值。

应用部分，大数据不仅包括企业内部应用系统的数据分析，还包括与行业产业的深度融合，大数据分析的应用场景具有行业性，不同行业所呈现的内容与分析维度各不相同，具体场景包括互联网行业政府行业金融行业传统企业中的地产医疗能源制造电信行业等等。1.t互联网行业大数据的应用代表为电商社交网络检索领域，可以根据销售数据客户行为活跃度商品偏好购买率等数据交易数据商品收藏数据售后数据等搜索数据刻画用户画像，根据客户的喜好为其推荐对应的产品。

2.t政府行业包括大数据分析板块中的质检部门、公安部门、气象部门、医疗部门。质检部门包括收集、核实和检查商品生产、加工、物流、贸易和消费全过程的信息，确保食品项目的安全。气象部门通过构建大气运动规律评估模型和气象变化的相关性分析，可以准确预测气象变化，找到最佳方案，规划应急救灾工作。3.t金融行业大数据分析多用于银行、证券、保险等子领域。大数据分析方面，通过结合各种渠道的数据进行分析，如客户在社交媒体上的行为数据、客户在网站上消费的交易数据、客户业务办理的预留数据、客户群体的精准定位、客户在金融行业的需求分析等。