杭州 [切换城市] 杭州招聘

爬虫工程师

杭州生猛信息技术有限公司

  • 公司规模:少于50人
  • 公司性质:民营公司
  • 公司行业:计算机软件  互联网/电子商务

职位信息

  • 发布日期:2017-02-17
  • 工作地点:杭州
  • 招聘人数:1人
  • 学历要求:大专
  • 职位月薪:4-6千/月
  • 职位类别:其他  

职位描述

职位描述:
岗位职责:
1、负责互联网站、网页、链接的特征挖掘,对指定的多个网站的网页进行网页抓取、数据提取、清洗、入库;
2、参与分布式爬虫和数据采集系统的架构设计和开发;
3、参与抓取数据的处理分析;

任职要求:
1、本科以上学历,1年以上Python开发经验;
2、掌握网络爬虫原理,有网页抓取、网页解析、网页信息抽取、网页结构分析工作经验;
3、精通正则表达式语法、掌握XPath或其他匹配方法,从结构化的和非结构化的数据中获取信息;
4、精通HTTP/HTTPS Post/Get请求原理,精通Python的urllib包;
5、熟悉web开发、掌握Scrapy爬虫框架、HTTP协议,了解Socket编程、熟悉JS,ajax,网页消重等;
6、熟悉大规模网页爬取,深度网页爬取、能够总结分析不同网站,网页的结构特点及规律;
7、有分布式爬虫开发经验者优先;

职能类别: 其他

举报 分享

公司介绍

猛科技是国内聚焦WiFi的物联网产业综合服务平台,是中国WiFi产业联盟的发起单位。前身是国内的移动互联网俱乐部MTC,也是国内开展移动互联网创业研究和传播的组织机构,2013年底开始定向关注智慧产业,聚焦物联网,通过三年的发展已经成为我国物联网,是WiFi领域的媒体平台和综合服务平台。
旗下拥有猛科技媒体平台、WiFi圈行业大数据交易平台、行业咨询品牌hotlabs,以及全国极具影响力的活动品牌:中国商用WiFi峰会暨项目对接会、白马湖峰会(行业领袖峰会)、中国智会城市巡展沙龙等。目前已经拿到新的一轮投资,并开始在杭州布局产业园区,位于滨江的中国WiFi产业基地已经落成。
1、中国WiFi产业联盟发起单位
2、荣获2014年微时代创新媒体
3、CWSM中国商用WiFi峰会以及“白马湖峰会”发起和执行单位
4、“WiFi圈”的产业数据库
5、中国WiFi产业基地发起和运营单位
福利:五险一金+带薪年假+免费年度体检+团建活动+饭补+交通补贴+通讯补贴+节日福利。
欢迎热爱物联网、大数据、智慧城市领域的同学们加入到猛科技的大家庭,帮助中国的传统行业实现互联网转型,迎接物联网时代的到来。

联系电话:0571-87679386
猛科技网址:http://www.mengkeji.com/
猛科技微信公众号:WOAIMKJ

联系方式

  • 公司地址:上班地址:滨江区地铁一号线西兴站旁聚业路26号金秀国际科技中心A-801