工作职责:
设计、开发和维护大规模分布式系统和大数据处理解决方案。
负责数据中台架构设计,包括对大规模数据存储、数据处理、数据计算框架等方面的规划和实施。
与团队合作,确保数据平台的可靠性、扩展性和高性能。
确定最佳实践,并提供技术指导以支持业务需求。
职位要求:
熟悉Java语言,具备丰富的后端开发经验。
熟悉springboot,mysql,redis,kafka。
理解和熟悉Hadoop生态系统,包括Hive,HDFS,yarn等。
熟悉Spark框架和其在大数据处理中的应用。
具备数据中台建设经验,了解数据仓库、数据湖等相关技术。
能够独立设计并实施可扩展的数据中台架构,并解决相关挑战。
加分项:
拥有大数据平台架构设计经验,尤其是在海量数据处理和分析方面的实际项目经验。
熟悉流式处理技术,具有Flink等流式处理框架的设计和实际应用经验。
优秀的沟通能力和团队合作精神,能够有效与不同背景和技能的团队成员合作。
收起