大数据工程师-经管专业就业指导与职业咨询

大数据工程师是什么？: 大数据的价值; 其实数据本身不是有用的，必须要经过一定的处理。例如你每天跑步带个手环收集的也是数据，网上这么多网页也是数据，数据本身没有什么用处，但是数据里面包含一个很重要的东西，叫做信息，数据十分杂乱，经过梳理和清洗，才能够称为信息。信息会包含很多规律，我们需要从信息中将规律总结出来，称为知识，知识改变命运。信息是很多的，但是有人就从信息中看到了电商的未来，有人看到了直播的未来，所以人家就牛了。有了知识，然后利用这些知识去应用于实战，有的人会做得非常好，这个东西叫做智慧。

大数据平台知识

包含了采集层、存储层、计算层和应用层，是一个复杂的IT系统，需要学会Hadoop等分布式系统的开发技能。计算层有不同的计算框架可以选择，常见的如MapReduce、Spark等，一般来讲，如果能使用计算框架的“原生语言”，运算效率会最高（MapReduce的原生支持Java，而Spark原生支持Scala）。最后数据的可视化、交互界面开发以及应用管理工具的开发等，更多的用到Java、Python等通用IT开发前端、后端的能力。

大数据分析知识

利用算法和模型提高数据处理效率、挖掘数据价值、实现从数据到知识的转换，统计模型：方差分析、线性回归、逻辑回归、列联分析、聚类分析、面板模型等，数据挖掘模型：决策树关联分析、SVM、神经网络贝叶斯网络等。

岗位名称: 大数据工程师
岗位介绍: 1. 负责公司大数据基础框架的整体架构设计，结合公司实际业务情况进行技术选型；
2. 负责数据存储、计算平台的整体评估、设计以及核心功能模块的开发；
3. 协助团队解决开发过程中的技术难题，负责新技术的调研，并能在团队内推广应用；

岗位薪资: 20K-60K
任职要求: 1. 计算机相关专业本科以上学历，有大数据相关工作经验优先； 2. 熟悉常用的数据结构、算法以及数据建模理论； 3. 了解数据仓库实施方法论、了解数据仓库体系，并支撑过实际业务场景； 4. 具备较强的编码能力，掌握 java/scala/python 开发语言之一，熟练使用 SQL 进行数据访问； 5. 精通 Hadoop 生态系统基础设施，包括Flume、Kafka、Hbase、Hive、Spark、Storm等； 6. 有团队管理经验者优先；

目前的招聘需求: 根据职友集网站统计，北京大数据平均工资是23970元/月。选择朝阳行业至关重要，先积累工作经验，职场发展空间会越来越大。现在互联网、金融、通信、电子商务、数据服务等行业日趋成熟，大数据相关工作薪酬逐年走高。

推荐的学习课程: CDA大数据符合企业用人需求，从大数据编程——数据库编程——大数据仓库——大数据分析方法——数据挖掘算法——大数据真实项目应用——大数据解决方案等，主要软件应用Hadoop、HDFS、MapReduce、Hbase、Hive、Sqoop等理论知识和大数据平台生态环境，重点学习数据分析基础和数据挖掘经典算法实现，Spark大数据分析工具和Python完美结合让你事半功倍。