职位详情

数据开发工程师(J12146)
20-40K·15薪
上海 杨浦区
3-5年
本科
职位详情
Scala
Python
SQL
工作职责: 1. 负责核心数据仓库和集市建设,数据ETL的设计、开发与性能优化,负责业务需求的需求理解、数据探查和分析; 2. 负责大数据平台的仓库模型设计,数据模型建模 ; 3. 建立实时和离线大数据处理流程,整合算法模型进行数据处理。 任职资格: 工作职责: 1. 负责核心数据仓库和集市建设,数据ETL的设计、开发与性能优化,通过数据支持业务发展,业务分析; 2. 负责大数据平台的仓库模型设计,数据模型建模 ; 3. 建立实时和离线大数据处理流程,整合算法模型进行数据处理。 任职资格: 1. 熟悉python或者Java其中一门开发语言,熟悉hive/hadoop等分布式计算技术,熟悉其运行机制和体系结构,有MR作业编写经验优化; 2. 灵活运用SQL实现海量数据ETL加工处理 ,能熟练使用Flink实时指标开发有其余的实时开发技术栈加分, 有较好的SQL性能调优经验; 3. 思路清晰,对数据敏感,有良好的沟通表达能力和跨团队协作能力 ; 4. 有一定的数据分析和挖掘能力,能从海量数据提炼核心结果,及时发现和分析其中隐含的变化和问题,有数据分析、挖掘、清洗、建模和BI分析的经验优先; 5. 熟悉数据湖仓一体开发者优先,熟悉数据仓库领域知识和技能者优先,包括但不局限于:数据集市设计、元数据管理、数据质量、主数据管理; 6. 三年以上数据开发相关经验 ; 7. 有业务数据标签,指标应用层搭建更佳,有海外数仓建设经验优先;
收起
上海夺畅网络技术有限公司
上海市 · []