大数据开发主要做哪些工作？
大家好，我是Lake，专注大数据技术、程序员经验、互联网科技见解分享。作为一个软件工程师，我个人目前从事的就是大数据方向。目前大数据可以分成很多具体的方向：大数据平台开发、大数据分析师(BI)、大数据运维、大数据处理(ETL)、大数据组件开发(偏大数据组件底层)。不同的工作方向，其工作内容还是有一定差异的，下面我来说下不同工作岗位具体的工作内容：大数据平台开发更偏向对整体数据平台功能性开发，比如离线计算平台、实时计算平台、算法推荐平台等等。
平时用的较多的语言是Java，其更偏向于Java开发。如果用户是上层用户，大数据相关组件作为最低层，大数据平台就桥接着用户和大数据组件，方便用户使用大数据组件的功能。大数据分析师(BI同学)更多的是对我们已有的线上数据进行价值分析，从相关的线上用户所产生的数据中，发现出一些潜在的商业价值，能够更好的去辅助决策层的战略决定。
BI需要对数据敏感、细心，善于从数据中发现业务价值，平常很多工作就是数据可视化、简单化、深入化、PPT化。大数据运维同学主要是保障公司相关机器集群的稳定，使得它们不能出现故障。当申请到新的机器时，会在新机器上面部署各种大数据组件组成的集群。同样，当有业务同学需要用到机器时，可以给大数据运维同学提需求。
当大数据组件集群突然因为什么变得集群不稳定时，运维同学需要去定位问题和解决问题，运维同学平时用的较多的Linux Shell脚本和命令行等，其职位更偏向于为其他同学提供机器稳定保障。ETL同学(数仓同学)则是对我们的线上数据进行数据加工，形成DWD层(公共明细层)、DWS层(公共汇总层)，形成统一的指标口径。
ETL同学会根据不同的业务需求，一般使用SQL进行数据指标的加工，指导业务同学更好的运营相关业务。同时ETL同学更关注业务指标的口径，在指标开发的过程中，使用数仓模型对业务数据进行建模，便于开发的指标数据更加统一，减少口径偏差。大数据组件开发，更多的是结合公司业务，对大数据基础组件进行定制化开发、性能优化、BUG修复等等。
同时，也需要对业务方接入进行问题答疑，指导他们使用大数据组件满足业务需求。同时，你也需要运维你的大数据组件，当出现故障BUG时，需要你能及时修复，保证大数据组件的稳定。大数据组件开发需要对你自己运维的组件原理掌握的很全很深，只有这样，你才能够更好的指导别人。总结大数据开发有很多方向，你可以结合你自己的兴趣，选择一个从事方向。
大数据毕业都是做什么工作好？
作为一名IT从业者，同时也是一名教育工作者，我来回答一下这个问题。首先，当前大数据领域的人才缺口还是比较大的，随着工业互联网的发展，未来不仅在IT（互联网）行业有大量的大数据岗位，在传统行业领域也会释放出大量的大数据人才需求。从这个角度来看，当前大数据专业的就业前景还是非常广阔的。目前大数据领域的技术岗位主要集中在大数据开发、大数据分析和大数据运维等领域，从近两年大数据领域的人才需求情况来看，大数据开发岗位的人才需求量相对比较大，随着大型科技（互联网）公司纷纷布局大数据平台开发领域，未来大数据开发岗位的人才需求量会进一步攀升。
大数据开发岗位可以简单划分为平台开发和应用开发两类，大数据平台开发对于开发人员的要求相对比较高，需要从业者具有较强的研发能力，目前不少研究生比较愿意从事大数据平台开发岗位。相对于大数据平台开发岗位来说，大数据应用开发岗位的人才需求量也是非常大的，随着大数据平台的落地应用，行业领域也会有大量的大数据应用开发需求。
对于本科生来说，从事大数据应用开发是比较适合的。最后，不论是从事大数据开发岗位，还是大数据运维和大数据分析岗位，这些岗位对于从业者的要求也都比较高，尤其要注重动手实践能力的培养，所以大数据专业的学生一方面要尽量丰富自身的知识结构，另一方面还需要注重动手实践能力的培养。我从事互联网行业多年，目前也在带计算机专业的研究生，主要的研究方向集中在大数据和人工智能领域，我会陆续写一些关于互联网技术方面的文章，感兴趣的朋友可以关注我，相信一定会有所收获。
学了java能做什么实际的东西？
关于“学好java能干什么”的问题，下面我谈谈自己的一些看法。1. java是一种跨平台的开发语言，不仅可以在windows平台下进行开发，还可以在linux、iOS等平台下开发，2. java不仅常用在网站后台、数据库系统的开发，也可以用在嵌入式开发中。3. 你所说的“学好”，可能有几个层面，一是熟练，而是精通。
什么是大数据?要简单通俗点的解释？
什么是大数据及应用？大数据即为海量数据。人类生活在三维空间中，一草一木，一山一水，人类活动的行为轨迹，都能用数据来表达。如企业的生产运营，商品标准。政府的管理决策，消费者的消费水平，消费习惯。地理环境的一条公路，一条河流等等。每方面都有每方面的大数据。每个行业都有每个行业的大数据。通过各企业，行业，社会主体等等数据的集成。
形成了概念更大，更有价值的大数据流。通过宇宙万物是互联的原理。以及逻辑关系的分析。能够得到。关于社会治理，企业运营，个人服务的便捷可靠，真实的服务方案。一件事物的组成并非由单一因素组成。由多方组合或者协同完成的。一件衣服的完成，要有生产布料的厂家，制衣厂家，制扣厂家，制线厂家，设计方，工人加工等等环节组合而成。
大数据现在很火，如果想学大数据，应该去哪里培训比较好？
如题所言，现在是大数据时代，的确大数据很火。但是想学，我们得先搞清楚大数据！大数据是什么大数据是指无法在一定时间范围内用常规软件工具进行捕捉、管理和处理的数据集合，是需要新处理模式才能具有更强的决策力、洞察发现力和流程优化能力的海量、高增长率和多样化的信息资产。大数据的来源由于移动时代的到来，数据获取的方式和便捷性大大提高，数据的产生和类型也多种多样化，到此一人一面的大数据时代来了。
如何学习大数据学习大数据，就是学习处理大数据的方式，目前大数据的处理就是java和python来实现。建议可以先通过腾讯课堂里面的免费的网络课了解下。兴趣使然，如果没有兴趣的话，建议不要轻易入行。了解清楚后，的确的想入行大数据，看你有没有编程基础，没有的话建议去培训机构系统学习一下，比如传智播客，不过去培训机构需要花费一段时间，那如果有编程基础的话，可以去腾讯课堂报个网络课程，网络课可以在业务时间学习，有录屏，不耽误工作。
大数据开发、大数据分析、大数据运维主要工作各是什么？哪个好？
在大数据领域大概有四个大的工作方向，除了大数据平台应用及开发、大数据分析与应用和大数据平台集成与运维之外，还有大数据平台架构与研发，除了以上四个大的工作方向之外，还有一个工作方向是大数据技术推广和培训，这部分工作目前也有不少人在从事。大数据平台架构与研发主要的工作内容是研发底层的大数据平台，这部分工作的难度较高，从事这部分工作的研发级岗位也并不多。
现在不少技术研发团队都以Hadoop、Spark平台为基础进行研发，这样能够节省大量的时间，也更容易做出市场接受度比较高的大数据平台（商用较多）。大数据平台应用开发是目前一个就业的热门方向，一方面是大数据开发的场景众多，另一方面是难度并不高，能够接纳的从业人数也非常多。大数据开发主要是满足企业在大数据平台上的应用开发，与场景有密切的关系。
大数据开发是在大数据平台基础之上的开发，充分利用大数据平台提供的功能来满足企业的实际需求。大数据分析是大数据应用的一个重点，甚至可以说是大数据的核心内容。大数据分析是基于大数据平台提供的功能进行具体的数据分析，数据分析与场景有密切的关系，比如出行大数据分析、营销大数据分析、金融大数据分析等等。目前采用机器学习的方式进行大数据分析是一个趋势，机器学习的步骤包括数据收集、算法设计、训练算法、验证算法和使用算法，所以算法在数据分析中起到了重要的作用，做数据分析工作要有一定的算法基础。
大数据运维主要从事大数据平台的软硬件集成和运维工作，主要的工作内容是完成大数据平台的部署和调试等相关工作，这部分工作岗位也比较多，企业往往需要有一个专门的运维团队来保障大数据平台的平稳运行。相对来说，这部分工作的难度小一些，但是需要掌握的内容也比较多，包括网络、服务器等软硬件知识。大数据是我的主要研究方向之一，目前我也在带大数据方向的研究生，我会陆续在头条写一些关于大数据方面的文章，感兴趣的朋友可以关注我的头条号，相信一定会有所收获。
文章TAG：2021那些事儿 大数据主要擅长做什么 那些 那些事儿 大数
