河南安飞信息技术有限公司

郑州 ·计算机软件

高级爬虫工程师

9-14K

郑州

5-10年

大专

全职

职位描述
一)岗位描述:
1、负责设计和开发分布式网络爬虫系统,进行多平台信息的抓取和分析
2、负责信息抽取、数据清洗等研发和优化工作
3、负责抓取数据的深度提取和挖掘
4、参与爬虫核心算法的策略优化研究,提升网页抓取的效率和质量。
(二)任职要求:
1、熟悉linux平台开发,精通Python/Java两种编程语言中的至少一种
2、精通网页抓取原理及技术,精通正则表达式,从结构化的和非结构化的数据中获取信息
3、熟悉Mysql,有过数据库调优和海量数据存储经验优先
4、具有阿卡迈爬虫相关技术爬虫经验者优先
5、学习能力强,有较好的沟通能力,能迅速融入团队
6、有分布式网络爬虫开发经验,熟悉Scrapy\PySpider等采集框架,掌握简单的验证码识别技术、Ajax网页采集技术以及爬虫高并发技术,流式处理经验者优先
公司介绍
北京总公司成立于2008年3月4日,是高新技术企业;由于业务发展在2014年4月份成立了孟州分公司,2016年8月份成立了郑州分公司;2022年11月份成立了洛阳分公司
北京总公司作为企业龙头带动分公司不断的拓展新的业务领域并敦促各项业务向前推进。在北京和郑州我们组建了一支精湛的产品团队,以客户满意为宗旨来设计产品输出我们的数据资源;同时,我们拥有一支强大的技术团队,来支撑数据处理并驱动业务发展。在郑州分公司我们的市场部作为先锋部队,为企业的发展提供给了数据来源并完成了数据推广工作。为了让客户有更好的消费体验,提高我们的服务质量,在孟州和洛阳分公司成立了专业客服团队
郑州中原区河南省电子商务产业园6号楼6楼602室
相似职位