公司名称

大连智桥科技有限公司

项目名称

大数据

需求描述

岗位职责：

1、负责Hadoop 平台的搭建、集群的部署/升级/系统调优及突发情况的处理；

2、熟悉智能推荐算法，并参与统计分析系统平台建设和应用开发；

3、负责基于Spark技术的海量数据的处理、分析、统计、挖掘工作；

4、基于Spark框架的数据仓库的开发，维护

5、根据需求使用Spark Streaming和Spark SQL进行数据处理等。

任职要求：

1. 熟悉Spark相关技术，至少有1年的Spark开发经验；

2. 熟悉Spark Streaming和Spark SQL；

3. 有Trouble Shooting能力；

4. 有UDF, UADF开发经验者优先；

5. 熟悉主流NoSql数据库技术；

6. 熟悉Scala语言，对Spark原理、底层技术有深入研究者优先；

7.有良好的沟通交流能力；

8.学习能力强,拥有优秀的逻辑思维能力；

9.自我管理能力强，有良好的时间意识。