大数据工程师

一、岗位职责：
1.参与大数据平台开发、大数据计算、数据清洗、数据分析；
2.参与大数据平台项目需求ETL开发、程序优化、应用与维护；
3.参与数据平台架构的设计、开发、流程优化及解决ETL相关技术问题；
4.负责项目中的关键模块开发、项目实施跟踪、相关文档编写等工作；
5.负责与项目组沟通及产品技术支持。

二、任职资格：
1.掌握数据仓库基础理论知识，了解数据仓库模型设计和ETL设计技术；
2.熟练掌握至少下列的一种编程语言：Java，Scala，Python，其中java必须非常熟练
3.具备apache hadoop，hive，spark，flume，kafka，sqoop等大数据组件的实际使用经验。
4.具备以上这些组件的集群安装与配置的实际经验
5.具有良好的SQL语言开发技能，熟悉Mysq、Oraclel数据库；
6.具备linux环境下常规运维的能力

工资面议