公司名称

中科软(天津)信息技术有限公司

项目名称

数据仓库

需求描述

岗位职责

1.负责核心数据仓库建设，优化和完善数据基础设施建设

2.数据采集，数据入库，数据清洗

3.数仓建模

岗位要求：

1.熟悉常用的数据建模理论，熟练数据仓库各层级的设计；

2.熟练使用hive中的语法；

3.使用过kettle,streamsets等ETL工具；

4.熟练使用shell编写脚本；

5.使用过oozie,azkaban,easyscheduler至少一种调度工具

6.熟悉开源大数据平台生态圈，包括但不限于spark、presto、druid、flink、hive、hadoop、kafka等；

7.熟悉Linux平台，熟悉SQL/Python/Java/scala等一门及以上语言，扎实的编程功底；

8.能够搭建并运维CDH/HDP平台;

8.具备复杂业务需求梳理能力，较强的产品思维能力和问题分析能力，良好的沟通能力、组织能力及团队协作精神；