大数据平台开发大数据分析师(BI)大数据运维大数据处理(ETL)大数据组件开发(大数据组件底层)。大数据开发可以简单分为两类,一类是大数据平台开发,一类是大数据应用开发。目前大厂的岗位多集中在大数据平台开发岗位。随着大数据逐渐开始应用,未来大数据应用开发岗位对人才的需求会逐渐增加。

大数据岗位有哪些推荐?

大数据岗位有哪些推荐

其实大数据和计算机差不多,学习的知识也差不多,在所有有关大数据的领域都要要求懂代码,学习大数据的人基本上都成为程序员。大数据相关领域有一Hadoop开发二ETL研发三可视化工具开发四数据仓库研究五OLAP开发六数据预测分析七数据安全研究八企业数据管理等等,基本上在所有的领域有都有大数据相关的岗位,工资待遇也很高。

大数据开发主要做哪些工作?

大数据开发主要做哪些工作

大家好,我是Lake,专注大数据技术程序员经验互联网科技见解分享。作为一个软件工程师,我个人目前从事的就是大数据方向。目前大数据可以分成很多具体的方向大数据平台开发大数据分析师(BI)大数据运维大数据处理(ETL)大数据组件开发(偏大数据组件底层)。不同的工作方向,其工作内容还是有一定差异的,下面我来说下不同工作岗位具体的工作内容大数据平台开发更偏向对整体数据平台功能性开发,比如离线计算平台实时计算平台算法推荐平台等等。

平时用的较多的语言是Java,其更偏向于Java开发。如果用户是上层用户,大数据相关组件作为最低层,大数据平台就桥接着用户和大数据组件,方便用户使用大数据组件的功能。大数据分析师(BI同学)更多的是对我们已有的线上数据进行价值分析,从相关的线上用户所产生的数据中,发现出一些潜在的商业价值,能够更好的去辅助决策层的战略决定。

BI需要对数据敏感细心,善于从数据中发现业务价值,平常很多工作就是数据可视化简单化深入化PPT化。大数据运维同学主要是保障公司相关机器集群的稳定,使得它们不能出现故障。当申请到新的机器时,会在新机器上面部署各种大数据组件组成的集群。同样,当有业务同学需要用到机器时,可以给大数据运维同学提需求。

当大数据组件集群突然因为什么变得集群不稳定时,运维同学需要去定位问题和解决问题,运维同学平时用的较多的Linux Shell脚本和命令行等,其职位更偏向于为其他同学提供机器稳定保障。ETL同学(数仓同学)则是对我们的线上数据进行数据加工,形成DWD层(公共明细层)DWS层(公共汇总层),形成统一的指标口径。

ETL同学会根据不同的业务需求,一般使用SQL进行数据指标的加工,指导业务同学更好的运营相关业务。同时ETL同学更关注业务指标的口径,在指标开发的过程中,使用数仓模型对业务数据进行建模,便于开发的指标数据更加统一,减少口径偏差。大数据组件开发,更多的是结合公司业务,对大数据基础组件进行定制化开发性能优化BUG修复等等。

同时,也需要对业务方接入进行问题答疑,指导他们使用大数据组件满足业务需求。同时,你也需要运维你的大数据组件,当出现故障BUG时,需要你能及时修复,保证大数据组件的稳定。大数据组件开发需要对你自己运维的组件原理掌握的很全很深,只有这样,你才能够更好的指导别人。总结大数据开发有很多方向,你可以结合你自己的兴趣,选择一个从事方向。

大数据行业薪资有多少如何去学习大数据开发?

大数据行业薪资有多少,如何去学习大数据开发

大数据是我的主要研究方向之一,我也是大数据的研究生,我来回答这个问题。首先,从近几年的研究生就业情况来看,大数据行业的从业人员薪酬还是比较高的,而且上升趋势明显。除了薪资,从行业发展的角度来说,目前学习大数据技术也是一个不错的选择。大数据技术经过多年的发展,已经形成了一个庞大的技术体系,有很多方向可以选择。不同的方向需要学习不同的技术,学习者可以根据自己的知识结构和兴趣爱好进行选择。


文章TAG:大数据开发有哪些职位  薪资  数据  职位  开发  
下一篇