爬虫工程师
杭州链加科技有限公司
- 公司规模:少于50人
- 公司性质:外资(欧美)
- 公司行业:互联网/电子商务 贸易/进出口
职位信息
- 发布日期:2014-07-17
- 工作地点:杭州-下城区
- 招聘人数:1
- 职位月薪:面议
- 职位类别:互联网软件开发工程师 软件工程师
职位描述
岗位职责:
负责美国及相关发达国家电子商务网站、Trade show以及知名品牌和一般品牌商家信息的抓取;
负责网页爬虫架构设计与核心技术研发;
设计策略和算法,提升网页抓取的效率和质量,进一步解决系统的网页排重、垃圾控制、资源划分等问题;
解决爬虫开发和反爬技术的关键技术难点。
职位要求:
大学本科及以上学历,计算机相关专业毕业;
从事过网络爬虫研究开发工作1年以上,精通网页抓取原理及技术的实现细节,从结构化的和非结构化的数据中获取信息;
熟悉Python或JAVA,或者熟悉.NET网络编程;熟悉MySQL,Sql Server数据库,SQL语句;
精通http底层协议;精通深度抓取、动态网页技术抓取、浏览器模拟抓取技术等;熟悉XML、JSON、SOAP协议;
有大规模数据处理、分布式计算、数据仓库经验者优先;
为人正直、开朗,积极上进,乐于接收新鲜事物,学习能力强,具有强烈的团队合作意识及执行力。
负责美国及相关发达国家电子商务网站、Trade show以及知名品牌和一般品牌商家信息的抓取;
负责网页爬虫架构设计与核心技术研发;
设计策略和算法,提升网页抓取的效率和质量,进一步解决系统的网页排重、垃圾控制、资源划分等问题;
解决爬虫开发和反爬技术的关键技术难点。
职位要求:
大学本科及以上学历,计算机相关专业毕业;
从事过网络爬虫研究开发工作1年以上,精通网页抓取原理及技术的实现细节,从结构化的和非结构化的数据中获取信息;
熟悉Python或JAVA,或者熟悉.NET网络编程;熟悉MySQL,Sql Server数据库,SQL语句;
精通http底层协议;精通深度抓取、动态网页技术抓取、浏览器模拟抓取技术等;熟悉XML、JSON、SOAP协议;
有大规模数据处理、分布式计算、数据仓库经验者优先;
为人正直、开朗,积极上进,乐于接收新鲜事物,学习能力强,具有强烈的团队合作意识及执行力。
公司介绍
Internet e-commerce company with offices in Los Angles California U.S.A and CHINA/Hangzhou are developing an innovative way to assist in business growth. We are seeking professionals dealing with all aspects of technology and business.
Join us now!
Join us now!
联系方式
- Email:sales.gle@gmail.com
- 公司地址:杭州市滨江区滨盛路1870号柏悦轩1805
- 邮政编码:310000