说完了基础,再来说说还有哪些大数据技术需要学习。我们可以按照我写的顺序来学习。大数据相关岗位多为大数据开发、大数据分析、大数据运维,那么下面就从这几个方面简单分析一下你需要学习哪些知识以及大致的学习周期。学习大数据分析还需要了解大数据平台的基础知识,算法知识,机器学习等。从学习周期来说,和大数据开发差不多,6个月左右。

大数据究竟学的什么,学会哪些才能入行?

大数据究竟学的什么,学会哪些才能入行

你好!我是@程序员学习很高兴回答你的提问,希望对你有所帮助,谢谢!学习大数据首先我们要学习Java语言和Linux操作系统,这两个是学习大数据的基础,学习的顺序不分前后。Java大家都知道Java的方向有JavaSEJavaEEJavaME,学习大数据要学习那个方向呢?只需要学习Java的标准版JavaSE就可以了,像ServletJSPTomcatStrutsSpringHibernate,Mybatis都是JavaEE方向的技术在大数据技术里用到的并不多,只需要了解就可以了,当然Java怎么连接数据库还是要知道的,像JDBC一定要掌握一下。

有同学说Hibernate或Mybites也能连接数据库啊,为什么不学习一下,我这里不是说学这些不好,而是说学这些可能会用你很多时间,到最后工作中也不常用,我还没看到谁做大数据处理用到这两个东西的,当然你的精力很充足的话,可以学学Hibernate或Mybites的原理,不要只学API,这样可以增加你对Java操作数据库的理解,因为这两个技术的核心就是Java的反射加上JDBC的各种使用。

Linux因为大数据相关软件都是在Linux上运行的,所以Linux要学习的扎实一些,学好Linux对你快速掌握大数据相关技术会有很大的帮助,能让你更好的理解hadoophivehbasespark等大数据软件的运行环境和网络环境配置,能少踩很多坑,学会shell就能看懂脚本这样能更容易理解和配置大数据集群。

YARN是体现Hadoop平台概念的重要组件有了它大数据生态体系的其它软件就能在hadoop上运行了,这样就能更好的利用HDFS大存储的优势和节省更多的资源比如我们就不用再单独建一个spark的集群了,让它直接跑在现有的hadoop yarn上面就可以了。其实把Hadoop的这些组件学明白你就能做大数据的处理了,只不过你现在还可能对

也可以让你更快的了解未来新的大数据技术。说完了基础,再来说说还有哪些大数据技术需要学习。我们可以按照我写的顺序来学习。Hadoop是一个流行的大数据处理平台,几乎成了大数据的代名词,所以这是必须的。Hadoop包括几个组件HDFSMapReduce和YARN。HDFS是存储数据的地方,就像我们电脑的硬盘一样。MapReduce处理和计算数据。它有一个特点,就是不管数据有多大,只要给它时间就可以运行数据,但时间可能不会很快,所以叫数据批处理。


文章TAG:做大数据需要学哪些东西啊  入行  做大  学会  数据  东西  
下一篇