爬虫开发工程师
挚享科技(上海)有限公司
- 公司规模:1000-5000人
- 公司性质:民营公司
- 公司行业:互联网/电子商务
职位信息
- 发布日期:2017-08-09
- 工作地点:上海-长宁区
- 招聘人数:1人
- 学历要求:本科
- 职位月薪:1.5-2.5万/月
- 职位类别:技术支持/维护工程师
职位描述
职位描述:
岗位职责:
1.负责大规模文本、数据的抓取、抽取、去重、分类、过滤、存储等工作;
2.负责爬虫例行数据分析,爬虫日常运行维护;
3.设计、实现并优化后台服务(爬虫等)组件
任职要求:
1.本科或以上学历,3年以上工作经验;
2.熟练掌握Python语言,熟悉linux环境,熟练掌握http/tcp相关实践知识,有过前端或后端(接口)开发经验;
3.熟悉各种消息队列、数据库、服务器如redis, rabbitMQ, mysql, mongodb,熟悉爬虫相关库如requests, lxml, pyquery等;
4.有爬虫、信息抽取、文本分析等相关经验,熟悉爬虫的架构与流程,熟悉第三方爬虫库如scrapy, pyspider等,或者自己实现过;
5.了解爬虫的架构分层和模块化、服务化;
6.对于新模块和新架构有不错的学习能力,并有良好的沟通协作能力。
7.规模分布式爬虫系统经验,开放式爬虫系统经验,有Java语言相关开发经验。
举报
分享
岗位职责:
1.负责大规模文本、数据的抓取、抽取、去重、分类、过滤、存储等工作;
2.负责爬虫例行数据分析,爬虫日常运行维护;
3.设计、实现并优化后台服务(爬虫等)组件
任职要求:
1.本科或以上学历,3年以上工作经验;
2.熟练掌握Python语言,熟悉linux环境,熟练掌握http/tcp相关实践知识,有过前端或后端(接口)开发经验;
3.熟悉各种消息队列、数据库、服务器如redis, rabbitMQ, mysql, mongodb,熟悉爬虫相关库如requests, lxml, pyquery等;
4.有爬虫、信息抽取、文本分析等相关经验,熟悉爬虫的架构与流程,熟悉第三方爬虫库如scrapy, pyspider等,或者自己实现过;
5.了解爬虫的架构分层和模块化、服务化;
6.对于新模块和新架构有不错的学习能力,并有良好的沟通协作能力。
7.规模分布式爬虫系统经验,开放式爬虫系统经验,有Java语言相关开发经验。
职能类别: 技术支持/维护工程师
公司介绍
智能共享充电宝公司“怪兽充电”宣布获得数千万元天使轮融资,由顺为资本、小米科技、紫米科技、清流资本、高瓴联合投资。据悉,怪兽充电下一轮融资已经确定。
怪兽充电的产品是带有大容量电池的手机充电设备,并采用桌面型单台充电宝形式。怪兽充电的创始人蔡光渊此前曾任优步上海的总经理兼全国市场总监,创始团队来自美团、优步、阿里巴巴、百度等公司。
怪兽充电将在产品上与中国最优秀的充电宝产品设计方紫米科技合作,紫米具有全中国最优秀的电源类产品的设计研发能力和生产供应链能力。作为本次怪兽充电的投资方之一,紫米科技研发并生产的小米及自有品牌移动电源销量在全国遥遥领先。
怪兽充电创始人蔡光渊表示,希望让所有中国人在任何场景下都可以续电,可以维持生活的运转及与外界的沟通——让每个人,随时随地充到电,美好生活永远在线!本轮融资完成后,怪兽充电计划年内铺设千万数量级充电宝。
联系方式
- Email:sales@enmonster.com
- 公司地址:地址:span天山西路799号