【爬虫工程师】
【岗位描述】
- 负责设计和开发分布式网络爬虫系统,进行多平台的信息抓取和分析以及清洗入库等工作;
- 参与爬虫算法和策略优化,提升数据抓取效率;
【岗位要求】
- 熟练掌握至少一门爬虫框架,熟练 Scrapy 优先;
- 熟练掌握基于正则表达式、XPath、CSS等网页信息抽取技术;
- 熟悉常见反爬机制,验证码识别,IP代理池;
- 熟悉应用Selenium+PhantomJS实施动态HTML抓取;
- 熟悉应用Ip池、headers认证和cookie等;
- 熟练使用http代理工具charles、fiddler等;
- 数据结构与经典算法等计算机基础扎实,逻辑思维较强;
- 热爱编程,喜欢折腾各类工具,热衷于探寻技术背后的原理;
- 责任心较强,做事细致耐心,具有良好的团队合作意识;
【公司福利】
- 年终奖
- 五险一金
- 全勤奖
- 零食下午茶
- 股票期权
- 弹性工作时间
【关于我们】
整数科技有限责任公司于2019年成立于西子湖畔。依托浙江大学计算机学院先进技术,通过自主开发的Molardata(麻辣数据)众包标注平台,致力于提供专业的AI领域大数据定制服务,为人工智能产品的落地提供支持与助力。团队核心成员均为国内TOP3高校的博士、硕士研究生,是一群有梦想、积极向上、朝气蓬勃的年轻人。目前公司正处于蓬勃发展期,项目已受《新锐杭商》、《中国蓝新闻》、《香港文汇报》等多家新闻媒体报道。我们期待有理想、有实力的你,和我们一起成就人工智能时代的辉煌! 想要了解我们,请登录公司官网:www.molardata.com,或关注微信公众号:麻辣数据 MolarData。
我们期待与您多种多样的合作形式,您可以考虑全职,亦可以考虑兼职帮助我们完成爬虫的外包订单,我们均会给予您高额的提成。如果您感兴趣的话,请添加hr微信:dataforces 并发送您的简历,我们期待与您相遇