职位详情

职位描述 1.负责网络安全业务系统复杂分布式计算规则业务、实时数仓和离线数仓的建设 2.架构设计、平台扩容方案设计等 3.实时流分析引擎设计、平台性能优化等 任职要求： 1.掌握java/scala，了解jvm的调优方式，能够快速定位问题 2.掌握Flink、Spark等其中一种实时流处理框架，有五年以上开发、性能调优经验 3.熟悉Hadoop生态体系下相关技术，如hdfs、hive、hbase等 4.熟练使用ClickHouse数据库、并能够性能优化和部署, 掌握ElasticSearch,了解HDP或者CDH大数据套件优先。 5.有大数据平台架构设计部署经验，有k8s、docker使用优先 6.具有网络安全行业大数据流量分析经验优先 7.有网络安全行业数据挖掘算子设计经验优先