深圳招聘

工作职责：

1、负责爬虫系统的开发和维护；

2、参与数据中心架构设计；

3、负责网页信息数据抽取、清洗、消重等工作，提升平台的抓取效率；

4、负责爬虫核心算法和策略优化；

5、实时监控爬虫的进度和警报反馈；

任职要求：

1、本科以上学历，计算机相关专业优先，3年以上python专职开发经验；

2、有良好的代码编写习惯，熟悉使用git等代码管理工具；

3、精通HTTP协议, 熟悉爬虫开发，了解常用爬虫框架如Scrapy、Requests、XPath等, 掌握常见的反爬手段及其应对措施；

4、熟悉常用数据库，包括MySQL 、Redis、MongoDB等；

5、熟悉PHP或者Node.js等其它语言者优先。

6、自我驱动，有较强学习能力，对技术有持续的热情

微信分享