重庆招聘

职位描述：
软件工程师
职位描述：
1、参与项目整体方案解决，为其提供足量的易于分析的数据
2、负责整理/调研互联网数据的可采集性及其可采数据范围
3、负责设计/调优分布式爬虫系统架构及其采集源数据库，含分布式爬虫/数据导出导入/数据传输接收等模块
4、负责开发/维护Python爬虫和配置/维护采集脚本，进行数据的抓取/识别/解析/提取/分类/去重/清洗/关联/整合/分析/入库
5、负责设计/调优策略和算法（如下载策略/调度算法/防屏蔽规则等），提升网页抓取的效率和质量
6、负责日常跟踪数据抓取和传输，监控爬虫系统状态，保证数据抓取/传输的及时准确
7、负责制定数据采集标准，编写修订相关文档，推进组内软件开发标准的建立及执行
任职要求
1、熟练掌握一种开发语言（java、python），并且对其他语言有一定的理解能力，和简单的编写能力，熟悉Java语言者优先；
2、熟悉Html,XML网页标记语言，熟悉基于Cookie的网站登录原理，熟悉基于正则表达式、Xpath、CSS等网页信息抽取技术，熟悉JS，ajax，网页消重；
3、熟悉Sql、oracle、mysql中一种数据库，了解或使用Redis、Mongodb、HBase、HIVE等NoSQL数据库；
4、熟悉多线程、网络通信编程相关知识
5、2-3年以上爬虫开发经验，有垂直主题爬虫或者分布式爬虫架构经验优先；
6、有数据文本推荐、语义分析经验优先。 举报 分享

食联购——一家专门为餐饮酒店提供服务的B2B食材采购平台，重庆大运河物流产业投资集团股东单位，重庆陶然居集团合作单位。食联购采购平台拥有重庆餐饮商会50强采购用户30余家。服务品类涵盖生鲜蔬菜、肉类冻货、粮油米面、水货鱼类、干货、酒水饮料、水果。
作为专业的餐饮酒店业B2B采购平台，借助行业资源和技术优势，整合行业上游品牌供应商及下游餐饮酒店采购商，解决行业内全产业链上下游长久以来存在的信息不对称问题，同时它还致力于对交易过程中产生的大数据进行分析，帮助实现行业内资源的合理配置，推动实现行业大数据追溯促进餐饮酒店业健康有序的发展，并通过物流、资金流、信息流的整合，开展平台授信等供应链金融服务，为综合性餐饮酒店等各业态类型的行业企业提供一站式采购解决方案。