公司名称

北京斯普信信息技术有限公司

项目名称

大数据

需求描述

岗位职责

1、Hadoop平台及各服务组件的运维、变更、故障和异常问题迅速定位；

2、hadoop平台以及相关组件的规划、部署、扩容及搭建安装；

3、定期系统分析、性能调优，优化集群性能和资源利用率，提升集群性能，保证hadoop平台各核心服务运行的稳定、高效；

4、编写运维相关的shell脚本或者python脚本，hadoop平台运维相关文档撰写； 5、负责指导中低级工程师，为集群用户和开发人员提供支持；

任职要求

1、1年半及以上Hadoop生态系统运维经验。

2、熟练掌握Linux操作系统，熟悉linux文件系统，内核、网络等性能优化；

3、熟练掌握HDFS、YARN、Hive、HBase、Spark、Storm等hadoop生态组件的功能和原理；

4、熟悉一门以上脚本语言（shell、Python、perl），熟悉Java；

5、熟练掌握hadoop的安装部署及性能调优；

6、具有良好责任心，团队合作意识，具有良好的沟通能力和客户服务意识。