想成为大数据开发工程师有哪些要求？

Question

如题所述

Answer 1

分两个方面来讲，一方面是专业领域的硬实力，另一方面是在职场发展上的软实力：
专业技能实力，对于大数据开发工程师来讲，是非常关键的，这个决定了你在技术面试当中能够说服面试官，具备这个岗位所需要的能力。
1、熟练精通至少一门编程语言
掌握Java是必不可少的，要是能同时熟悉Python、Scala就更好了。
2、掌握Linux操作系统
百分之八十以上的企业使用Linux操作系统进行云计算、大数据平台的构建，所以做大数据开发，Linux必备。
3、掌握大数据主流框架及组件
主要是Hadoop、Spark、Storm、Flink等一系列框架，及其生态圈组件，这部分是重中之重。
软实力，就相对来说要虚一些了，逻辑思维能力、沟通能力、学习能力等等，通常在HR面试的时候，主要就是考察这些方面。

Answer 2

1、 掌握至少一种数据库开发技术：Oracle、Teradata、DB2、Mysql等，灵活运用SQL实现海量数据ETL加工处理；

2、 熟悉Linux系统常规shell处理命令，灵活运用shell做的文本处理和系统操作；

3、 有从事分布式数据存储与计算平台应用开发经验，熟悉Hadoop生态相关技术并有相关实践经验着优先，重点考察Hdfs、Mapreduce、Hive、Hbase；

4、 熟练掌握一门或多门编程语言，并有大型项目建设经验者优先，重点考察Java、Python、Perl；

5、 熟悉数据仓库领域知识和技能者优先，包括但不局限于：元数据管理、数据开发测试工具与方法、数据质量、主数据管理；

6、 掌握实时流计算技术，有storm开发经验者优先。

Answer 3

需要具备大专及以上文化程度、对数据挖掘、数据分析爱好者、软件开发公司技术人员，满足身体健康，有良好的思维和一定的综合素质。