公司名称

新奥集团股份有限公司

项目名称

大数据

需求描述

岗位职责：

1.负责通用大数据分析平台产品的核心功能研发、架构设计相关工作；

2.负责Hadoop/Spark大数据集群的性能调优、稳定性改进、系统调优工作；

3.负责海量数据实时处理与分析，实时服务系统设计与开发；

4.负责平台和大数据项目中关键技术问题解决及开发指导；

5.协调和指导团队内初中级大数据平台工程师的技术工作；

岗位要求：

1.计算机、软件工程、数学等相关专业毕业，本科及以上学历；

2.精通hadoop/Spark做过至少三年以上相关开发工作，有较强的问题定位和性能优化的能力，尤其是Spark的问题定位和性能调优；

3.熟练掌握Flink、Spark Streaming、Kafka等流式处理框架，熟悉Redis、HBase、Kudu、Mysql等存储原理及应用开发；

4.至少熟练运用Java、Scala、python语言中的1种，都熟悉优先，做过至少5年以上相关开发工作；

5.精通Linux操作系统、熟悉Shell，有一定解决系统问题的能力；

6.有很强的学习能力，逻辑思维清晰，具有很强的问题排查能力，有很强的责任心，有较强沟通能力，有较强的自我驱动动力和自我管理能力；