爬虫工程师
上海葵观信息技术有限公司
- 公司规模:少于50人
- 公司性质:民营公司
- 公司行业:互联网/电子商务 计算机软件
职位信息
- 发布日期:2016-09-19
- 工作地点:上海-杨浦区
- 招聘人数:若干人
- 职位月薪:4000-18000/月
- 职位类别:互联网软件开发工程师 高级软件工程师
职位描述
职位描述:
负责产品中爬虫的设计、开发及维护工作,满足产品中数据抓取的要求;
参与开发爬虫功能模块 如(解析,下载 调度,通信 等核心模块),能够熟练配置解析模板;
负责采集数据的清洗、整理和入库工作;
爬虫调度的日常维护,以及采集数据的质量监控;
对结构化的定向爬取有一定经验的优先;
欢迎51job直接投递,或联系人事经理:hr@kuiguan.net
任职要求:
有扎实的c++,java或python开发基础和良好的编码习惯;会使用git进行源码版本控制;
拥有互联网或企业级爬虫1年以上开发经验,熟悉html,javascript,ajax;
对正则表达式、io、集合、多线程、Httpclient熟练应用、熟悉http协议;
熟悉Nutch/Heritrix/larbin/HtmlParser/scrapy/xpath/Jsoup等爬虫工具开发的优先;
举报
分享
负责产品中爬虫的设计、开发及维护工作,满足产品中数据抓取的要求;
参与开发爬虫功能模块 如(解析,下载 调度,通信 等核心模块),能够熟练配置解析模板;
负责采集数据的清洗、整理和入库工作;
爬虫调度的日常维护,以及采集数据的质量监控;
对结构化的定向爬取有一定经验的优先;
欢迎51job直接投递,或联系人事经理:hr@kuiguan.net
任职要求:
有扎实的c++,java或python开发基础和良好的编码习惯;会使用git进行源码版本控制;
拥有互联网或企业级爬虫1年以上开发经验,熟悉html,javascript,ajax;
对正则表达式、io、集合、多线程、Httpclient熟练应用、熟悉http协议;
熟悉Nutch/Heritrix/larbin/HtmlParser/scrapy/xpath/Jsoup等爬虫工具开发的优先;
职能类别: 互联网软件开发工程师 高级软件工程师
关键字: 数据获取 爬虫 linux 数据采集 数据筛选 GPU技算 数据质量 多线程 网络代理程序
公司介绍
上海葵观信息技术有限公司,是一家面向未来的“电脑”公司;
公司立足于开放互联网信息服务站网平台,采用大规模并行概率计算技术,探索发掘决策支持写稿机器人、收集资料机器人及文字,声音翻译的信息服务模式;
公司正式成立于2015年12月,地址位于上海市杨浦区大学科技园,办公环境绿色环保,装修简约宽敞;
国际化业务模式先进,高效,成熟;具有挑战的薪水待遇,实验级电信带宽,配备cuda GPU工作站;
欢迎51job直接投递,或邮件投递 hr@neurta.com
公司立足于开放互联网信息服务站网平台,采用大规模并行概率计算技术,探索发掘决策支持写稿机器人、收集资料机器人及文字,声音翻译的信息服务模式;
公司正式成立于2015年12月,地址位于上海市杨浦区大学科技园,办公环境绿色环保,装修简约宽敞;
国际化业务模式先进,高效,成熟;具有挑战的薪水待遇,实验级电信带宽,配备cuda GPU工作站;
欢迎51job直接投递,或邮件投递 hr@neurta.com
联系方式
- Email:hr@neurta.com
- 公司地址:上班地址:上海市杨浦区密云路1018号*