公司名称

山东五征集团

项目名称

大数据开发高级工程师-ETL方向

需求描述

职责描述：

1、 根据公司数据分析需求进行基于Hadoop 平台的项目开发；

2、 根据需求进行数据仓库模型设计，进行ETL程序的开发

3、 负责针对源系统进行数据抽取、处理、分析等相关工作，及项目中涉及到的数据库创建、维护及提供数据接口工作；

4、 负责设计并优化基于Hive 的数据仓库的建设；

5、 制定数据库备份和恢复策略及工作流程与规范。

任职要求：

1.熟悉Hadoop、Hive、impala等分布式计算平台开发，有大数据应用系统开发经验；

2.熟悉Kettle 等ETL 工具的使用、开发、开发流程；

3.精通SQL/HQL，有较好的SQL性能调优经验；

4.熟悉JAVA开发，有分布式开发经验，使用Hive进行过项目开发、或支撑过Hive/Hbase/Impala高并发项目的系统工程师优先；