职位详情

岗位职责： 1.负责离线数仓的数据开发；负责离线数据表的脚本开发 2.负责实时数仓的架构设计及开发；负责Flink开发实时的数据应用 3.负责上级交办的其他相关工作 任职条件 专业知识 1.熟悉大数据架构，具有离线和实时数据研发能力 2.熟悉Hadoop生态，如：Hdfs分布式文件系统、Yarn分布式资源调度框架、MapReduce和Spark分布式计算框架等； 3.熟练掌握SQL语法，能够使用Spark Sql、Hive Sql等进行开发，并对SQL进行性能优化 4.丰富的数仓研发经验，熟悉数据仓库、数据体系项目的建设和应用 5.熟练掌握Java、Scala之中至少一种开发语言 6.了解常用的关系型数据库mysql，oracle等 7.了解linux操作系统以及常用命令，能开发简单的SHELL脚本 8.了解调度系统的基本原理 9.具有海量数据处理经验者经验者优先 能力素质 1.具有清晰的逻辑思维，良好的沟通和表达能力 2.具有良好的团队合作精神，能够和同事共同解决复杂的技术及业务问题