成为大数据工程师要学习哪些知识?

1.大数据架构的工具与组件

数据工程师更关注分析基础架构，因此所需的大部分技能都是以架构为中心的。

2.深入了解SQL和其它数据库解决方案

数据工程师需要对数据库管理系统有比较熟悉的了解，而且深入了解SQL非常重要。同样其它数据库解决方案，例如Cassandra或BigTable也须熟悉，因为不是每个数据库都是由可识别的标准来构建。

3.数据仓库和ETL工具

数据仓库和ETL经验对于数据工程师至关重要。像Redshift或Panoply这样的数据仓库解决方案，以及ETL工具，比如StitchData或Segment都非常有用。另外，数据存储和数据检索经验同样重要，因为处理的数据量是个天文数字。

4.基于Hadoop的分析(HBase，Hive，MapReduce等)

对基于Apache Hadoop的分析有深刻理解是这个领域的一个非常必要的需求，一般情况下HBase，Hive和MapReduce的知识存储是必需的。

5.编码

说到解决方案，编码与开发能力是一个重要的优点(这也是许多职位的要求)，你要熟悉Python，C/C++，Java，Perl，Golang或其它语言，这会非常有价值。

6.机器学习

虽然数据工程师主要关注的是数据科学，但对数据处理技术的理解会加分，比如一些统计分析知识和基础数据建模。

数据库系统工程师的官方考试要求：1.考试要求（1）掌握计算机体系结构以及各主要部件的性能和基本工作原理；（2）掌握 *** 作系统、程序设计语言的基础知识，了解编译程序的基本知识；（3）熟练掌握常用数据结构和常用算法；（4）熟悉软件工程和软件开发项目管理的基础知识；（5）熟悉计算机网络的原理和技术；（6）掌握数据库原理及基本理论；（7）掌握常用的大型数据库管理系统的应用技术；（8）掌握数据库应用系统的设计方法和开发过程；（9）熟悉数据库系统的管理和维护方法，了解相关的安全技术；（10）了解数据库发展趋势与新技术；（11）掌握常用信息技术标准、安全性，以及有关法律、法规的基本知识；（12）了解信息化、计算机应用的基础知识；（13）正确阅读和理解计算机领域的英文资料。2. 通过本考试的合格人员能参与应用信息系统的规划、设计、构建、运行和管理，能按照用户需求，设计、建立、运行、维护高质量的数据库和数据仓库；作为数据管理员管理信息系统中的数据资源，作为数据库管理员建立和维护核心数据库；担任数据库系统有关的技术支持，同时具备一定的网络结构设计及组网能力；具有工程师的实际工作能力和业务水平，能指导计算机技术与软件专业助理工程师（或技术员）工作。3. 本考试设置的科目包括（1）信息系统知识，考试时间为150分钟，笔试；（2）数据库系统设计与管理，考试时间为150分钟，笔试。你还可以参考官方网站： http://www.rkb.gov.cn/

考过数据库工程师只要认真的看考试教材和辅导书就可以了。要想成为合格的工程师，实践很重要。各个数据库都会用到。比如学校科研的一般实验都会用SQL甚至是Access都不少。在外面公司用的SQL也比较多，但是大型系统的都是用oracle。虽然他们有差别（主要是在使用范围上面的差别），

但是对于程序员或者其他使用者来说，他们的用法是一样的。

学精通其中的SQLserver就可以了。然后在项目中了解其他的。

---