爬虫开发工程师
上海同界数据科技股份有限公司
- 公司规模:150-500人
- 公司性质:民营公司
- 公司行业:互联网/电子商务
职位信息
- 发布日期:2020-11-28
- 工作地点:上海-静安区
- 招聘人数:1人
- 工作经验:2年经验
- 学历要求:大专
- 职位月薪:1-1.5万/月
- 职位类别:爬虫开发工程师
职位描述
岗位职责:
1.负责开发维护已有的网络爬虫项目,进行指定网站信息的抓取和入库。
2.熟悉常用的爬虫策略和反爬虫策略,提升网页抓取的效率和质量;
3.负责网页数据抽取、数据清洗。
任职要求:
1.熟练使用Python编程语言、Linux开发环境,1年经验以上;
2.掌握HTTP协议,熟练使用selenium、正则表达式,XPATH,JSON等数据提取的常用技能;
3.熟练使用http代理工具和抓包工具,如fiddler等;
4.熟悉常用的数据库mysql;
5.熟悉常用爬虫框架scrapy;
6.拥有良好的代码习惯,结构清晰,逻辑性强,有丰富的面向对象设计及编程能力;
7.工作积极、主动性强,具备强烈的责任心及团队精神。
加分项:
(1)有大型项目开发
(2)会js逆向
公司介绍
上海同界数据科技股份有限公司是一家专注于为客户提供数据营销相关服务的专业公司。
我们专注于零售终端问题解决,多维度监控竞品动态,精确监控终端陈列,系统化管理业务模式,提升促销执行管理等细分领域。为客户提供******面 人员和数据管理解决方案。
我们专注于零售终端问题解决,多维度监控竞品动态,精确监控终端陈列,系统化管理业务模式,提升促销执行管理等细分领域。为客户提供******面 人员和数据管理解决方案。
联系方式
- 公司地址:地址:span光复路1号