公司名称

中远海运科技(北京)有限公司

项目名称

大数据

需求描述

岗位职责：

1. 负责与客户的需求沟通和需求分析。具备引导客户需求的能力； 具备良好的产品推介和交流沟通能力；

2. 负责大数据系统架构设计和核心模块设计；

3. 负责大数据系统架构服务器搭建与日常管理运维工作；、

4. 深入理解某些行业，具备结合数据和行业业务设计数据模型的能力；

5. 与内部团队紧密合作，完成大数据应用程序的编码工作。包括数据标准在内的项目相关的技术文档的输出；

6. 研究大数据相关新技术，并对团队成员进行技术支持和指导；

任职要求：

1. 计算机及相关专业本科以上学历，三年以上大数据经验；

2. 深入理解数据治理的方法，包括数据清洗、ETL、质量监控和评估等实施经验

3. 具有行业数据标准梳理的能力，对行业领域数据模型和标准有深入了解。 熟悉行业典型数仓的建设过程。

4. 具备建模能力，熟练使用UML等，准确表达需求和设计并对对数据的可视化展现有深入认识和理解。

5. 熟练掌握JAVA语言，熟悉Linux操作系统，精通shell脚本。

6. 掌握sqoop、Spark、hive、Hbase、zookeeper、mapreduce、HDFS、Yarn等大数据框架，并有过实际项目经验。

7. 精通Hadoop生态圈技术，有丰富的MapReduce/Hive开发经验，了解HBase、Storm、Spark、Impala、Hive、Sqoop等大数据相关技术。