1、负责⼤数据采集、存储、计算、分析等场景的通⽤架构设计和开发。
2、负责流式数据的实时传递、清洗、转换和计算(实时统计、分析等)的设计和开发。
3、负责数据仓库平台,实时计算平台,分布式作业调度平台,数据质量中⼼等平台的开发。
4、负责以上各种架构平台及相关基础技术组件的稳定性保障及源码级的BugFix。
岗位要求:
1、5年以上数仓⼯作经验,擅于沟通和解决问题,乐于总结分享,有想法,有冲劲,有团队精神 和主⼈翁意识和责任感。
2、解决问题思路清晰,擅⻓数据平台优化(不局限于sql、参数)
3、有参与构建海量数据存储、实时计算平台、数据仓库平台、BI平台的经验优先。
4、熟悉Flume、Hadoop、Hive、Flink、Spark、Kafka、Impala等⼤数据技术框架。
5、熟练掌握Python/Java/Scala中⼀⻔或多⻔编程语⾔。
6、熟悉基于Flink框架的实时计算技术,有平台开发经验的优先。
7、熟悉⽤户画像项⽬产品,⽤户推荐项⽬的实施和整体架构设计经验的优先。
收起