大数据开发工程师(知识图谱方向)
岗位职责:
1. 参与大数据平台、知识图谱等项目落地过程中的数据治理、数据清洗、数据准备、提升数据质量等开发工作,包括参与数据链路架构、数据存储、数据计算、数据工具的完善和优化工作,解决计算中性能和功能等多方面的各种挑战(例如ETL的性能优化);以及负责海量数据接入采集、数据质量、数据规范、数据监控、数据降本增效等工作。
2. 负责知识图谱构建中实体和关系的识别、抽取、对齐等开发工作,将业务数据转化为易用的数据资产。
3、为项目提供大数据分析任务的方案设计及文档编写的工作。
4、与建模人员及应用开发人员协作,支撑数据分析、挖掘工作对于基础数据的加工。将数据分析及开发结果应用到相关业务场景。
5、为团队分享相关技术知识,帮助团队提升整体技术水平。
任职要求:
1. 计算机相关专业,全日制大学本科及以上学历,6年以上工作经验,至少参与过5个金融项目的实施。
2. 有大型项目的经验,精通Spark(Spark SQL、Spark GraphX),熟练掌握Hadoop、Hive、Hbase等开源技术;熟悉NoSQL数据库;熟悉Scala、Java等语言,
3. 对数据挖掘、关系网络分析、图表示学习和推理有深入研究或者丰富的项目经验;
4. 熟练Neo4j图数据库,有知识图谱产品或项目经验;有银行零售或对公业务图谱项目经验适当加分;
5. 学习能力强、善于沟通、对技术创新充满激情,善于分析和解决问题,良好的团队合作精神。