爬虫中级研发工程师
广州翼博慧互联网信息服务有限公司
- 公司规模:50-150人
- 公司性质:民营公司
- 公司行业:计算机软件 互联网/电子商务
职位信息
- 发布日期:2017-05-25
- 工作地点:广州-天河区
- 招聘人数:2人
- 学历要求:大专
- 职位月薪:1.5-2万/月
- 职位类别:高级软件工程师
职位描述
职位描述:
【岗位名称】
爬虫中级研发工程师
【岗位要求】
1、熟练掌握一种开发语言,并且对其他语言有一定的理解能力,和简单的编写能力,精通java语言者优先;
2、熟悉Html,XML网页标记语言,熟悉基于Cookie的网站登录原理,熟悉基于正则表达式、Xpath、CSS等网页信息抽取技术,熟悉JS,ajax,网页消重;
3、熟悉Mysql数据库,了解Redis、Mongodb、HBase、HIVE等NoSQL数据库优先;
4、2-3年以上爬虫开发经验,有分布式爬虫架构经验优先;
5、熟悉多线程、网络通信编程相关知识 ;
【岗位职责】
1、对爬虫感兴趣,能独立爬取数据;
2、能够利用爬虫爬取各大网站的数据。
3、对爬取的内容进行提取、处理、优化、过滤,审核,入库等操作;
4、针对不同网站,编写及维护网页抽取配置;
5、有实际案例数据采集经验者优先;
【办公地点】
广州市天河区天源路401号盛大国际交易中心4楼37室
【福利待遇】
a、购买五险一金;b、双休;c、按国家节假日放假;d、弹性工作时间;e、年终奖; f、不定时举行部门活动;g、年度体检;h、年度旅游。
【联系方式】
联系人:陈小姐
座机:020-87598512
邮 箱:hr@navi-data.com(来信请注明应聘者姓名-岗位名称)
举报
分享
【岗位名称】
爬虫中级研发工程师
【岗位要求】
1、熟练掌握一种开发语言,并且对其他语言有一定的理解能力,和简单的编写能力,精通java语言者优先;
2、熟悉Html,XML网页标记语言,熟悉基于Cookie的网站登录原理,熟悉基于正则表达式、Xpath、CSS等网页信息抽取技术,熟悉JS,ajax,网页消重;
3、熟悉Mysql数据库,了解Redis、Mongodb、HBase、HIVE等NoSQL数据库优先;
4、2-3年以上爬虫开发经验,有分布式爬虫架构经验优先;
5、熟悉多线程、网络通信编程相关知识 ;
【岗位职责】
1、对爬虫感兴趣,能独立爬取数据;
2、能够利用爬虫爬取各大网站的数据。
3、对爬取的内容进行提取、处理、优化、过滤,审核,入库等操作;
4、针对不同网站,编写及维护网页抽取配置;
5、有实际案例数据采集经验者优先;
【办公地点】
广州市天河区天源路401号盛大国际交易中心4楼37室
【福利待遇】
a、购买五险一金;b、双休;c、按国家节假日放假;d、弹性工作时间;e、年终奖; f、不定时举行部门活动;g、年度体检;h、年度旅游。
【联系方式】
联系人:陈小姐
座机:020-87598512
邮 箱:hr@navi-data.com(来信请注明应聘者姓名-岗位名称)
职能类别: 高级软件工程师
关键字: 爬虫 JAVA
公司介绍
广州翼博慧互联网信息服务有限公司 (以下简称NAVIDATA) 是一家专注为金融、汽车、农业、医疗健康等行业提供大数据解决方案服务的高科技公司。
信息技术与经济社会的交汇融合引发了数据迅猛增长,数据已成为国家基础性战略资源,大数据正日益对全球生产、流通、分配、消费活动以及经济运行机制、社会生活方式和国家治理能力产生重要影响。
顺应国家移动互联网和大数据的发展战略,NAVIDATA致力于打造“大数据云平台+大数据应用产品”的全方位解决方案,为客户提供专业、便捷、安全、可靠的大数据闭环服务。
信息技术与经济社会的交汇融合引发了数据迅猛增长,数据已成为国家基础性战略资源,大数据正日益对全球生产、流通、分配、消费活动以及经济运行机制、社会生活方式和国家治理能力产生重要影响。
顺应国家移动互联网和大数据的发展战略,NAVIDATA致力于打造“大数据云平台+大数据应用产品”的全方位解决方案,为客户提供专业、便捷、安全、可靠的大数据闭环服务。
联系方式
- Email:hr@navi-data.com
- 公司地址:上班地址:广州市天河区天源路401号盛大国际交易中心4楼37室