数据开发工程师
职责描述:
1. 负责项目数据实时和批量ETL开发、相关数据提取;
2. 负责针对业务部门提出的需求进行报表开发;
3. 参与数据仓库的搭建、设计与开发;
4. 负责数据服务接口和相关组件的开发和维护;
5. 负责数据质量检验和监控;
任职要求:
1. 精通Hive,能够熟练写出性能良好的Hive SQL, 懂得如何根据实际数据和场景优化HiveSQL;
2. 熟悉Spark程序编写,懂得如何优化执行效率;
3. 熟悉Java/Scala/Python编程语言,熟练使用常用数据库如redis、mongo、mysql;
4. 了解hadoop关键组件核心原理,对分布式系统性能调优熟悉者优先;
5. 精通flink、presto、Impala、clickhouse优先;
6. 硕士及以上学历,计算机、统计学,数学等相关专业;
7. 热爱游戏,可实习至少六个月