公司名称

东风新能源汽车销售服务(北京)有限公司

项目名称

大数据

需求描述

岗位职责：

1、参与数据仓库整体设计及规划，参与数据仓库模型的设计、应用模型的设计；

2、负责核心数据处理程序的设计、编写和更新，负责相关文档的制定和编写；

3、能够带领技术人员基于hadoop平台进行海量数据应用系统开发；

4、负责结构化和非结构化数据的解析和清洗，海量数据查询和报表展现；

5、负责超大规模数据平台的搭建、维护和优化；

6、负责大数据采集、存储框架研究，参与在线或离线数据存储模型设计；

7、负责大数据平台新技术的开发使用和性能优化，测试。

任职要求：

1、数学、计算机相关专业优先，5年以上工作经验；

2、精通Hadoop大数据平台框架，精通HDFS系统原理，熟悉Spark、Hive、HBase、Impala、Storm、redis、kafka等组件的应用设计及开发；

3、熟悉Linux/Unix开发环境，精通Python/Java/Shell/Perl，具有扎实的数据结构功底和有良好的编码习惯；

4、熟练使用Map/Reduce、Hive、Spark等进行数据加工；熟悉Hive和Spark的编写和性能调优；

5、熟悉数据仓库建模理论、数据模型设计方法和原则，能对大规模非结构化数据业务进行模型构建、数据存储、数据库设计及优化；

6、熟悉整个大数据的完整处理流程，包括数据的采集、清洗、预处理、存储、分析挖掘和数据可视化；

7、精通SQL，熟悉关系型数据库（SQL Server\Oracle\Mysql\Postgresql）的优先；参与过中大型大数据项目的架构和设计，有大数据处理或数据仓库建设经验的优先；

8、有高度的责任感、上进心、主动性、团队合作和敬业精神；

9、有较强沟通能力，和文档编写能力，有较强的理解能力、执行能力；

10、优秀的学习能力，承受压力能力强。

11.有汽车行业工作经验优先。