深圳招聘

岗位职责

1、分布式爬虫系统的架构设计与开发；

2、负责多平台信息的抽取、去重、分类、解析、增量；

3、设计爬虫策略和防屏蔽规则，提升网页抓取的效率和质量；

4、能独立解决实际开发过程碰到的各类问题； 

岗位要求

1、2年以上相关工作经验，熟悉linux平台开发；

2、扎实的Python基础，熟悉抓包软件，掌握反爬虫技术；

3、掌握常见爬虫库和框架，如urlib、requests、Scrapy、Selenium（appnium）等，有实际项目经验；

4、熟悉基于正则表达式、Xpath，CSS选择器等网页信息抽取技术，和动态页面JS解密；

5、熟悉Flask、Django、Tornado等至少一种web框架；

6、熟练使用redis、mongodb、mysql等流行数据库技术;

7、有单日百万级数据量抓取，复杂验证码破解和自然语言处理等经验者优先

8、有良好的学习和理解能力，编码规范和习惯，以及设计、开发和文档编写能力；

深圳京天地电子商务有限公司成立于2018年，是一家新兴的电子商务公司。公司主要通过网络销售3C电子&衣服鞋帽包产品。公司创始人通过近几年的摸索，逐步形成精准选品，广告渠道投放，产品销售及物流包装于一体的业务模式。未来公司将拓展更多产品，更多渠道进行网络销售，欢迎有识之士的加入！