公司名称

深圳市鼎盛动力发展有限公司

项目名称

大数据

需求描述

岗位职责：

1.为各餐饮零售O2o业务提供数学模型理论及编程支撑

2.对接沟通业务系统研发团队和产品部门,提供数据驱动方面的专业咨询方案,并对业务的大数据应用场景提出建设性意见

3.通过数据分析技术,挖掘有利于营销中各业务场景的变量或规则类标签以提升模型效果。

岗位要求：

1.具有大型数据仓库或大数据平台建设经验,可独立进行大中型数据平台架构设计和搭建、模型设计,ETL设计,支持离线定时任务及实时流处理

2.至少精通hive、mysql. mongodb.redis. crickhouse中的种主流数据库,熟悉数据库体系原理,精通SQL开发与调。

3.熟悉分布式系统的架构,有分布式实时和离线计算平台架构和开发相关经验,具备海量数据清洗、分析处理及存储的相关的实践经验

4.熟练使用并理解 Hadoop架构和生态(如YARN、HDFS、 MAPREDUCE、HIVE、 HBASE. IMPALAELASTICSEARCH、 SQOOP、 FLUME、 KAFKA等)

5.熟悉spark体系架构,掌握 Spark的算子或 SPARK SQL,理解 Spark Streaming更佳

6.熟.悉至少一种主流的软件开发语言,如java. Python或scala等

7.至少3年以上大数据开发经验