公司名称

北京创客网络科技有限公司

项目名称

大数据平台项目

需求描述

岗位职责：

1、负责大数据中心的部署、管理、运维工作；

2、负责数据库、数据仓库架构设计、模型设计及系统部署，数据集市规划、设计等；

3、负责爬虫架构设计、核心搜索算法设计与开发、软件优化以及采集规则编写；

4、负责离线系统业务调研、开发、部署等工作；

5、开发ETL过程，优化存储方案，设计并实现分布式计算任务，搭建数据处理流程；

6、针对数据进行统计、分析与挖掘，编制大数据分析报告。

任职要求：

1、计算机科学与技术、软件工程、大数据相关专业，全日制硕士以上，2年以上大数据开发或分析工作经验；

2、熟悉hadoop、hbase、hive的原理并具备管理、配置、运维经验；

3、至少精通python、shell、java中一种语言；

4、至少熟悉Oracle、DB2、Mysql、Sql Server中两种以上数据库，精通SQL、存储过程，有较好的SQL性能调优经验；

5、具有良好的逻辑思维能力，善于学习，与团队沟通无障碍。