大数据平台开发工程师
岗位要求
1、5年以上大数据平台开发相关经验,计算机、通信、电子等相关专业;
2、熟悉数据仓库的维度设计理论和方法,熟悉数据仓库模型设计,有数据中台开发经验者优先;
3、熟悉大数据处理相关技术,包括但不限于Hadoop、Hive、Hbase、Impala、Spark、Kafka、Flume、Sqoop、Flink、Clickhouse、Kylin、Presto等,并且有实践经验,能解决应用中的复杂问题;
4、熟悉Python或者Java其中一种编程语言,熟悉Hadoop、Spark、MR等大规模分布式计算框架、并对其原理有较深的了解,能够在特定业务中进行定制改造者优先;;
5、熟练掌握Dolphinscheduler,阅读过源码,能够二次开发者优先;
6、datax、Atlas源码可以读懂调试修改源码者优先
7、有各类国产数据库使用经验的优先,尤其是优炫数据库
8、不具备平台开发能力,只具备数据开发能力的不要,最好两者都具备
岗位职责:
1、熟悉Hadoop、Spark、MR等大规模分布式计算框架、并对其原理有较深的了解,能够在特定业务中进行定制改造者优先;
2、沟通、提炼业务需求,负责业务数仓的建设,以及数据模型设计和研发,实现高质量的数据互通共享;
3、熟悉Hadoop、Spark、MR等大规模分布式计算框架、并对其原理有较深的了解,能够在特定业务中进行定制改造者优先;
收起