公司名称

北京人民在线网络有限公司

项目名称

大数据

需求描述

岗位描述

1. 参与人民在线众云大数据产品线相关大数据平台和大数据处理框架的架构规划设计；

2. 参与数据治理工作，提升数据易用性及数据质量；

3. 理解并合理抽象业务需求，发挥数据价值，主动思考不断优化，与业务团队紧密合作；

4. 管理、优化并维护Hadoop、Spark等集群，保证集群规模持续、稳定。

岗位要求

1. 两年以上相关工作经验；

2. 熟练掌握java语言，Scala和python至少掌握一种，熟练使用linux,强悍的编码和 troubleshooting能力；

3. 熟悉大数据开源栈spark/hadoop、Hive、Hbase、ElasticSearch、kafka、redis,strom/spark-streaming/flink，有至少TB以上级大数据处理经验；

4. 有SparkStreaming的实时统计或实时规则引擎整体架构开发经验优先；有SparkML开发经验优先；

5. 对数据敏感，认真细致，善于从数据中发现疑点；

6. 善于沟通，具备优秀的技术与业务结合能力；

7. 有风控研发经验者优先，对风控行业有自己思考的优先；

8. 学习能力强，喜欢研究开源新技术，有团队观念，具备独立解决问题的能力。