岗位职责:
1、参与项目的需求分析和设计工作,并完成相关技术文档的编写;
2、和产品经理沟通产品需求,深入理解业务,为业务部门提供有质量的数据支持;
3、熟练使用MySQL、Orcale数据库、传统Oltp和Olap数据库、Mpp和Hive等分布式数据库。
4、对实时数据处理、scala spark 、spark streaming代码熟练;
5、熟悉大数据采集ETL, 大数据存储,大数据分析挖掘技术,有CDH、Hortonworks或星环;
6、熟练使用FineBI、FineReport或其他报表开发工具;
7、负责核心业务流程的数据分析模型建模,数据仓库架构设计等。
任职要求:
1、大专以上学历,计算机相关专业,2年以上大数据从业经验;
2、熟悉分布式编程,精通JAVA语言程序设计,有良好的架构规划能力;
3、熟悉Hadoop和spark生态体系,熟练掌握HDFS,MapReduce,Kafka,Hbase等常用组件,并深入理解底层原理,能根据业务场景选择合适的组件 。
收起