爬虫算法工程师
上海载和网络科技有限公司
- 公司规模:150-500人
- 公司性质:外资(非欧美)
- 公司行业:互联网/电子商务
职位信息
- 发布日期:2019-01-02
- 工作地点:上海-浦东新区
- 招聘人数:若干人
- 工作经验:2年经验
- 学历要求:招若干人
- 语言要求:不限
- 职位月薪:1.5-2.5万/月
- 职位类别:高级软件工程师
职位描述
爬虫算法工程师
工作职责:
1. 基于电商的爬虫数据,分析市场热销商品;
2. 基于算法和人工编辑,对商品数据做精准的属性匹配;
3. 通过数据分析建立模型,对市场做销售预测;
4. 数据爬虫系统爬虫平台建设和优化、多平台信息的抓取和分析工作,数据抽取、清洗、计算等工作,提升平台的抓取效率;
5. 爬虫核心算法及调度策略的研发及优化;
6. 实时监控爬虫的进度和警报反馈。
任职资格:
1. 计算机、数学、统计、模式识别或相关专业硕士及以上学历;
2. 至少精通一门编程语言(JAVA/Python等),精通linux系统,熟悉mysql、hadoop及相关编程;
3. 精通抓包工具至少一种,熟悉使用正则表达式;精通网络通信编程,网页抓取原理及技术,熟悉HTTP传输协议,能模拟各类操作爬虫;熟悉爬虫实现原理机制;对分布式和多线程技术有一定了解;
4. 熟悉常见机器学习算法(如逻辑回归、SVM、神经网络、决策树等),对其中一个或几个模型的原理、数学表示、优化方法、模型改进策略比较了解,有实际建模经验;
5. 在文本信息挖掘、内容推荐系统等一个或多个领域有实际项目经验;
6. 能熟练阅读中/英文机器学习领域的相关文献
7. 具有海量数据处理,高性能计算,大规模分布式系统开发等方面经验优先;
8. 熟悉爬虫框架,有爬虫经验者优先。
职能类别: 高级软件工程师
公司介绍
Gshopper是领先的跨境电商公司
为全球消费者、商家、品牌商服务
在多轮成功融资的基础上,Gshopper逐渐建成了为全球消费者、卖家、品牌商服务的跨境电商公司
专业的本土化团队所具备的全球各个市场的当地采购、销售能力
品牌业务的独特的、能够盈利的市场推广模式
多年积累的科技研发实力和大数据分析能力
优秀的多渠道物流仓储解决方案
让我们在众多跨境公司中脱颖而出
为全球消费者、商家、品牌商服务
在多轮成功融资的基础上,Gshopper逐渐建成了为全球消费者、卖家、品牌商服务的跨境电商公司
专业的本土化团队所具备的全球各个市场的当地采购、销售能力
品牌业务的独特的、能够盈利的市场推广模式
多年积累的科技研发实力和大数据分析能力
优秀的多渠道物流仓储解决方案
让我们在众多跨境公司中脱颖而出
联系方式
- 公司地址:地址:span金田路2030号-卓越世纪4号楼501