公司名称

中电兴发

项目名称

开发

需求描述

岗位职责

1、负责大数据服务平台的开发、维护、应用和优化，不断提升可用性、性能、扩展性；

2、负责对接业务中的数据需求，包括数据接入、数据清洗、业务数据建模等工作，从业务流量中挖掘数据价值；

3、跨团队沟通、跨团队协作，为业务团队提供大数据处理类解决方案；

4、研究大数据技术发展动态，研究新型计算框架，并能够提出优化解决方案。

任职资格

1、本科及以上学历，计算机相关专业，5年以上相关经验；

2、熟练掌握java、python语言中的一种。

3、对于spring boot有实际项目或产品经验。

4、对于hadoop生态里主要组件的部署和调优有实际经验，包括但不限于CDH、HDP等。

5、熟练掌握Flume、sqoop、sprak、flink、hbase、hive、yarn、kafka等组件的使用和调优。

6、有使用hive构建数据仓库的实际项目或者产品经验。

7、熟悉一种大数据存储的相关原理，比如hbase。

8、解读过spark源码，有基于spark源码二次开发经验的优先考虑。

9、使用过mysql、oracle、redis、MongoDB、ElasticSearch、kudu中的一种或者多种。