职位描述
1.打造业界领先的超大规模批流一体的实时数仓基础设施及架构,并支撑唯品会相关产品线;
2.基于Flink SQL打造高效、稳定、易用的实时数据开发平台,降低实时数据开发门槛;
3.基于数据湖技术构建批流一体的存储系统,同一种存储同时支持低延迟的实时数仓场景及高性能的离线分析场景;
职位要求:
1.精通Flink等流处理技术, 有实际项目经验
2.熟练使用java开发语言,有大数据量、高并发处理经验
3.熟悉Hudi、Iceberg、Delta lake等开源数据湖技术
4.了解kudu、Hbase、ClickHouse、Kafka等实时系统原理
5.有大型实时数仓架构落地经验者优先
6.向开源社区贡献过patch者优先