公司名称

中科信息安全共性技术国家工程研究中心有限公司

项目名称

后端开发

需求描述

技能要求：

Hadoop

java

Linux

岗位职责

1、参与海量数据的ETL开发，根据需求抽取各种数据；

2、负责数据仓库ETL流程的开发和优化，并及时解决ETL相关技术问题；

3、负责ETL数据准确性验证及报表维护；

4、参与项目基础架构规划、ETL流程设计和相关规范制定。

岗位要求

1、3年以上相关工作经验；

2、熟悉Linux开发环境，具备Linux系统分析能力；

3、熟悉常用的数据建模理论，了解数据仓库层级的设计；

4、熟练使用Java/Python/Scala等语言进行开发，熟悉shell/perl等脚本语言，具有较强的开发能力；

5、熟悉Hadoop生态，精通hdfs、spark、HBase，Hive开发，熟悉MR、presto

6、了解yarn, Zookeeper、ELK等开源技术；

7、对设计和开发在线计算和离线计算系统，有实战经验；

8、对数据敏感，优秀的技术与业务结合能力；

9、思路清晰，善于思考，责任心强；

10、具备良好的工作态度及沟通表达能力，工作认真负责，具备较强的团队协作意识和能力。