1、熟悉Flink、Iceberg等组件,并至少有1个项目的实施经验。
2、熟悉Hadoop生态圈的相关组件,深度了解HDFS、Hive、Impala、HBase、Yarn等组件的工作原理和使用,具备2年以上Hadoop调优经验。
3、了解大数据平台虚拟化、存储计算分离、基础架构服务化等构建方法,熟悉Hadoop集群安全管控方案,并能熟练使用Kerberos、Sentry等构建集群的安全管控体系。
4、熟练掌握Java语言、Python语言或Scala语言之一,具备3年以上使用经验。
5、熟练掌握Linux操作系统,并能熟练使用Shell编程。
6、有较大规模集群规划、监控与运维工作经验者优先。
7、良好的自我学习能力、自我管理能力、沟通能力和团队协作能力。
8、3年以上大数据平台架构领域工作经验。