公司名称

北京首都在线科技股份有限公司

项目名称

大数据

需求描述

岗位职责：

1、运用大数据生态技术栈，构建大数据计算（流计算和批处理）平台，满足业务数据处理需求；

2、构建数据指标模型、业务指标模型，通过数据处理手段，满足业务侧数据要求；

3、使用分类、聚类、线性回归、逻辑回归等算法，构建业务数据匹配模型；

4、开发可靠、高效、准确的实时和准实时计算和分析代码,并形成整体框架和接口供调用；

5、建立和维护大数据基础设施，解决海量数据存储、计算的问题；

6、制定和开发相关技术规范，提升团队标准化工作流程水平；

任职要求：

1、5年以上软件开发经验，包含3年以上大数据开发经验,；

2、熟悉常用设计模式，掌握分布式服务、高扩展，高可用，高性能系统的设计与编码；

3、熟悉大数据生态包括不限于 HDFS/Hbase/Yarn/ClickHouse/ElasticSearch,并有相关项目开发、使用经验；

4、熟悉流计算编程，熟练掌握Flink、Kafka、Flume等开源工具或框架；

5、掌握常见的数据结构、算法，了解软件工程、敏捷开发等知识；

6、熟练使用Java/Python/SQL等编程语言，具备良好软件敏捷开发习惯；

7、熟悉云计算产品、网络流量分析，参与过运维体系建设者优先考虑；