岗位职责:
1、基于Hadoop&Spark大数据平台,进行数据仓库的设计,ETL工具的开发;
2、配合建模人员对数据进行清洗和预处理,参与数学模型的产品化;
3、为各个产品线提供基于大数据的存储和服务方案;
4、后台管理页面的开发(监控、日志、告警);
任职要求:
1、计算机相关专业本科及以上学历,3-5年及以上开发经验;
2、精通java及J2EE,有3年以上开发经验,熟悉Spring、Spring MVC、myBatis等框架;
3、精通Hadoop、Spark,有2年及以上实际开发经验,有海量数据场景下的调优经验者优先考虑,了解架构原理者优先考虑;
4、熟悉Oracle或MySql数据库,能写效率较高的SQL;
5、熟悉至少一种nosql数据库,比如mongodb、Redis、HBase等;
6、熟练Linux操作命令,能编写常用Shell脚本;
7、对数据挖掘、机器学习有浓厚兴趣,有一定了解者优先;
8、熟悉前端开发,熟悉js、html、jquery、tomcat,能写后台管理页面;
9、踏实的工作作风,对新技术保持着旺盛的热情,具有较强的学习能力;
10、良好的沟通技能、逻辑思考能力和和团队合作精神、抗压能力强;
11、对于资质不错的Java程序员,对大数据方面可以不做硬性要求,可以内部培养。
收起