岗位职责:
1、参与公司大数据相关项目,负责数据中台、数据仓库、数据产品开发等工作;
2、负责数据仓库基础平台的建设和维护,数据模型、ETL的设计、开发;
3、负责统一的异构数据源接入集成,数据离线、实时计算;
4、能够带领团队完成大数据平台开发与交付;
5、配合完成项目相关技术文档的编写。
任职要求:
1、计算机相关专业,本科学历,具备良好的计算机技术基础;
2、具有2年以上大数据、数据仓库、BI等方面的软件或项目开发经验;
3、熟练掌握SQL语言,精通SQL开发及优化,熟练掌握PostgreSQL、MySQL、SQL Server、Oracle等主流数据库;
4、熟练掌握hadoop、zookeeper、hbase、hive、spark、flume、kafka、clickhouse、flink、nifi等大数据技术
5、熟练使用至少一种etl工具,具备etl设计与开发、数据仓库、数据模型设计开发相关经验者;
6、熟悉Linux系统及常规shell处理命令;
7、具有高度的责任心和团队合作精神,具有良好的学习能力、分析能力、沟通表达能力。
8、要求能独立搭建大数据平台(必须),要求精通nifi使用
收起