【岗位职责】
1、负责公司实时数据处理平台的设计、开发和维护,包括数据接入、实时计算、数据输出等功能;
2、使用Flink等实时计算框架,对海量实时数据进行流式处理,并确保数据处理效率、准确性和稳定性;
3、与数据分析师、产品经理等团队紧密合作,为产品提供可靠、高效、低延迟的数据处理能力;
4、参与数据治理、数据质量、数据安全等领域的建设和优化,为公司数据资产保驾护航;
5、关注最新的技术动态和行业趋势,将新技术应用到实际项目中。
【任职资格】
1、本科及以上学历,计算机或相关专业,有海外留学或国际知名企业工作经历者优先考虑;
2、有至少5年以上大数据实时数据处理项目经验,有Flink实时计算框架使用经验者优先;
3、熟练掌握Java/Scala编程语言,熟悉Linux操作系统,具备大规模分布式系统设计和开发经验;
4、熟悉Kafka、Hadoop、Hive等大数据技术栈,了解数据仓库、ETL流程等基本概念;
5、具备良好的英语阅读、写作和口语交流能力,能够独立阅读和沟通英文文献;
6、具备实现高可用性、可扩展性、容错性、高性能的经验,熟悉常见的性能优化方法;
7、有较强的团队合作精神、沟通协调能力和项目管理经验;
8、具有出色的学习能力、创新意识和自我驱动精神,关注行业前沿技术,能够独立思考并快速掌握新技术。