爬虫框架工程师(职位编号:000019)
北京艾漫智汇科技有限公司
- 公司规模:少于50人
- 公司性质:民营公司
- 公司行业:计算机软件 互联网/电子商务
职位信息
- 发布日期:2012-08-29
- 工作地点:北京-朝阳区
- 招聘人数:1
- 工作经验:三年以上
- 学历要求:本科
- 职位类别:互联网软件开发工程师 高级软件工程师
职位描述
职位描述:
1、编写大规模分布式网络爬虫框架(多线程、分布式调度、协议处理);
2、系统解决动态网页内容抓取、深度网页内容抓取的关键技术;
3、解决爬虫开发和反爬技术的关键技术难点。
资格要求:
1、大学本科及以上学历,计算机相关专业毕业;具有三年以上软件研发经验,具备出色的系统分析能力和技术攻关能力;
2、精通分布式系统;多线程;
3、精通爬虫和反爬技术,精通http底层协议;精通深度抓取、动态网页技术抓取、浏览器模拟抓取技术等。
4、精通linux环境;
5、精通Java,能编写高效鲁棒代码;有调度算法编写经验。
6、有大型的搜索引擎技术开发经验者优先考虑;
7、责任心强、学习能力强,优秀的沟通能力和强烈探索精神。
1、编写大规模分布式网络爬虫框架(多线程、分布式调度、协议处理);
2、系统解决动态网页内容抓取、深度网页内容抓取的关键技术;
3、解决爬虫开发和反爬技术的关键技术难点。
资格要求:
1、大学本科及以上学历,计算机相关专业毕业;具有三年以上软件研发经验,具备出色的系统分析能力和技术攻关能力;
2、精通分布式系统;多线程;
3、精通爬虫和反爬技术,精通http底层协议;精通深度抓取、动态网页技术抓取、浏览器模拟抓取技术等。
4、精通linux环境;
5、精通Java,能编写高效鲁棒代码;有调度算法编写经验。
6、有大型的搜索引擎技术开发经验者优先考虑;
7、责任心强、学习能力强,优秀的沟通能力和强烈探索精神。
公司介绍
北京艾漫智汇科技有限公司(iMiner.com)是一家专注在互联网信息智能挖掘领域的高科技公司,致力于将数据转化为智慧,提供公正精准的数据分析服务和随需应变的商业智能服务。
我们相信智慧源于数据,我们的使命是智慧改变生活 。
“想你所需”——通过构建海量信息智能挖掘的开放云平台,对互联网信息进行抓取、分析和聚合,智能挖掘各种潜在的信息对象和关系,进行基于海量数据的全局分析、关联分析和趋势预测,为用户提供随时随地的接入服务,满足用户个性化的信息需求,为企业提升商业智能。
艾漫拥有雄厚的技术实力和背景,核心技术团队来自清华大学,在人工智能、自然语言处理、数据挖掘等领域有长期积累,以及在算法设计、大规模数据处理、互联网运营等方面具备丰富经验。
我们将努力成为互联网信息智能挖掘领域的领先品牌 !
我们相信智慧源于数据,我们的使命是智慧改变生活 。
“想你所需”——通过构建海量信息智能挖掘的开放云平台,对互联网信息进行抓取、分析和聚合,智能挖掘各种潜在的信息对象和关系,进行基于海量数据的全局分析、关联分析和趋势预测,为用户提供随时随地的接入服务,满足用户个性化的信息需求,为企业提升商业智能。
艾漫拥有雄厚的技术实力和背景,核心技术团队来自清华大学,在人工智能、自然语言处理、数据挖掘等领域有长期积累,以及在算法设计、大规模数据处理、互联网运营等方面具备丰富经验。
我们将努力成为互联网信息智能挖掘领域的领先品牌 !