中/高级爬虫工程师

20-30K

北京

3-5年

本科

全职

职位描述

工作职责：
1、根据公司各个业务需求，爬取国内外不同来源站点的数据，完成数据抽取、清洗及转换等工作
2、参与组内重大爬虫项目，攻关并解决项目中遇到的各种问题
3、对解决某一类反爬问题进行深入研究，形成组件化或工具化成果，提升爬虫团队反爬能力

职位要求：
1、熟悉爬虫工作原理，熟练使用至少一种爬虫框架如 Scrapy进行爬虫任务开发
2、三年以上爬虫工作经验，有大规模数据爬取经验
3、技术扎实，熟练掌握java语言。有python开发经验更佳
4、具有一定编程能力和项目开发能力
5、自我驱动，执行力强，有攻坚精神；对学习有热情，追求技术进步
6、对某些类别反爬问题（如账号/IP封禁、验证码、js混淆加密、滑块验证、数据混淆等）有一定解决经验
7、有app逆向经验者优先

公司介绍

医药魔方，专注于对药品基础数据进行深度加工、标准化重构和深度挖掘，致力于打造医药行业大数据平台，以数据连接行业，促进医药行业生态的高效、透明和公平。希望医药魔方的数据和产品，成为医药行业的水和空气，给行业从业者和机构提供便利，同时促进医药行业的进化。

北京朝阳区宝能中心1308

面试经验