杭州灰豚科技有限公司
杭州 ·互联网 ·20-99人
高级爬虫工程师
30-60K·13薪
杭州
1-3年
大专
全职
职位描述
职位描述：
1.负责分布式网络爬虫系统的设计与开发
2.负责海量数据的爬取、清洗、解析、入库；
3.针对需要的数据，寻找网站或app内可用的接口
4.研究主流网站和app反爬机制，寻找应对方案；
5.不断的学习研究行业新技术，提升业务能力，并作团队分享
6.负责js、Android、IOS应用的逆向工作，能正向还原关键算法（* 高阶）
职位要求：
1.大专及以上学历，计算机相关专业；
2.熟悉linux开发环境，熟练掌握java或python编程语言，熟悉js语言；
3.熟练掌握http协议，xpath、csspath、正则表达式，有使用scrapy经验优先；
4.有rmysql、mongodb、redis、rabbitmq、kafka使用经验；
5.熟悉selenium或Puppeteerr，appium或airtest；
6.熟悉常用反爬手段及其对应方法、技巧；
7.有良好的责任心、沟通能力、学习能力、团队协作精神；
8.熟悉常用js防护手段及其对应的分析、调试技巧优先；
9.熟悉Android或IOS逆向技术优先；
1.负责分布式网络爬虫系统的设计与开发
2.负责海量数据的爬取、清洗、解析、入库；
3.针对需要的数据，寻找网站或app内可用的接口
4.研究主流网站和app反爬机制，寻找应对方案；
5.不断的学习研究行业新技术，提升业务能力，并作团队分享
6.负责js、Android、IOS应用的逆向工作，能正向还原关键算法（* 高阶）
职位要求：
1.大专及以上学历，计算机相关专业；
2.熟悉linux开发环境，熟练掌握java或python编程语言，熟悉js语言；
3.熟练掌握http协议，xpath、csspath、正则表达式，有使用scrapy经验优先；
4.有rmysql、mongodb、redis、rabbitmq、kafka使用经验；
5.熟悉selenium或Puppeteerr，appium或airtest；
6.熟悉常用反爬手段及其对应方法、技巧；
7.有良好的责任心、沟通能力、学习能力、团队协作精神；
8.熟悉常用js防护手段及其对应的分析、调试技巧优先；
9.熟悉Android或IOS逆向技术优先；
公司介绍
“杭州灰豚科技有限公司”是一家数据公司。成立于2017年5月。2018年12月获得ProA轮3000万人民币投资。
旗下业务：灰豚数据（huitun.com）。品牌们都知道的全域媒体数据分析平台。合作伙伴包括东方甄选、小仙炖、如涵、李佳琦、谦寻、阿迪达斯等品牌和mcn公司。
旗下业务：店透视数据分析工具。是一款货架电商数据分析软件，服务于淘宝、京东、拼多多等传统电商平台百万商家，目前4个商家就有3个商家在用。国内知名企业海信、小米、斯凯奇、周大福、TCL、顾家、VIVO、INXX、意尔康、阿芙、百草味等均在合作。
旗下业务：MCN。签约主播、达人超过100人，其中全约优质艺人超20人，拥有众多金牌主播、超级大V和全网现象级红人，全平台粉丝总量超4000万粉丝。
公司创业团队来自阿里、网易、字节、滴滴等，具有清华大学、浙江大学、四川大学等计算机背景。
本公司不卷、没人管！老板看起来像程序员！公司做不好全是老板的锅（老板自己说的）！有趣的灵魂你就来，包起飞～
旗下业务：灰豚数据（huitun.com）。品牌们都知道的全域媒体数据分析平台。合作伙伴包括东方甄选、小仙炖、如涵、李佳琦、谦寻、阿迪达斯等品牌和mcn公司。
旗下业务：店透视数据分析工具。是一款货架电商数据分析软件，服务于淘宝、京东、拼多多等传统电商平台百万商家，目前4个商家就有3个商家在用。国内知名企业海信、小米、斯凯奇、周大福、TCL、顾家、VIVO、INXX、意尔康、阿芙、百草味等均在合作。
旗下业务：MCN。签约主播、达人超过100人，其中全约优质艺人超20人，拥有众多金牌主播、超级大V和全网现象级红人，全平台粉丝总量超4000万粉丝。
公司创业团队来自阿里、网易、字节、滴滴等，具有清华大学、浙江大学、四川大学等计算机背景。
本公司不卷、没人管！老板看起来像程序员！公司做不好全是老板的锅（老板自己说的）！有趣的灵魂你就来，包起飞～
杭州西溪创智中心一号楼B2座7楼
面试经验
匿名用户
面试杭州灰豚科技的Java·杭州
感觉没戏
一面应该是同事面的，问了一些基础的技术点，就感觉特别基础的那种，对我来说很简单
二面是他们主管吧，看着很年轻（但是感觉他的行为很奇怪），然后问了一些框架上的问题，问了一下简历上项目相关的问题
这家公司环境中等，也有做电商带货的其他业务，自家的研发产品就是面向抖音快手这一类用户做的数据分析的系统，用户量估计也不大，整体的技术架构给我的感觉也挺简单的，后期可能会涉及到python的工作内容
应该是没有通过，估计是我要的薪资他们给不到
...查看全文
查看更多面经(1)
相似职位
