岗位职责
1. 数仓建设:对接数据应用需求进行数据采集、数据建模、库表设计,数据开发,
2. 负责 ETL 方案设计。负责业务数据采集方案设计、方案落地和数据开发,完成数据采集、数据存储、数据处理以及数据的ETL等工作;
3. 根据业务需求进行离线或实时的数据分析,应对需求的变化进行相关的优化和维护升级
4. 梳理数据开发问题,组织或参与问题讨论,提出解决方案,攥写技术文档
技能要求
1、熟练使用 Python/Sql/Shell 编程语言,熟悉 Linux 系统,可以独立完成复杂sql的开发。
2、熟悉数仓架构/维度建模理论,深度参与数据仓库建设。熟悉 ETL 数据开发流程,熟练使用SQL完成离线、实时数据开发。
3、熟练使用DolphinScheduler,Azkaban等大数据开发调度工具,熟悉kettle等etl工具,完成数据任务的开发。
4、熟悉BI产品,可以基于BI进行数据分析报表的制作。