职位详情

岗位职责： 1、负责设计、开发和维护高效的爬虫系统，以满足公司数据的采集和分析需求。 2、分析和优化爬虫策略，提高数据采集的效率和质量，减少对目标网站的影响。 3、负责爬虫系统的性能监控、问题诊断和故障排除，确保数据采集的稳定性。 4、跟踪最新的爬虫技术发展，引入新技术和工具以提升整个系统性能。 5、愿意学习并深刻理解不动产行业相关业务。 任职要求： 1、统招本科及以上学历，计算机软件或相关专业。 2、两年及以上爬虫开发经验，精通Python，熟悉Scrapy等爬虫框架。 3、熟练掌握Web技术（HTML/CSS/JavaScript），能够处理复杂的网页结构和动态内容。 4、熟悉数据库技术（MySQL, Oracle）和NoSQL技术（如Redis, MongoDB），具备良好的数据处理能力。 5、了解Linux操作系统，有服务器运维管理方面的经验优先。 6、对代码质量有高标准，具备良好的问题解决能力，乐于学习新技术，能够独立完成任务。 7、优秀的团队合作精神，能够在多个项目中有效沟通和协作。 8、热爱编写程序，喜欢学习，愿意挑战各种不确定性问题。