scala数据挖掘工程师
北京麦达数字技术服务有限公司
- 公司规模:50-150人
- 公司性质:上市公司
- 公司行业:互联网/电子商务
职位信息
- 发布日期:2019-03-01
- 工作地点:北京-朝阳区
- 招聘人数:1人
- 工作经验:无工作经验
- 学历要求:招1人
- 语言要求:不限
- 职位月薪:2-3.5万/月
- 职位类别:高级软件工程师
职位描述
职位描述:
一、岗位职责:
1、负责多个垂直频道的数据抓取工作、研究各种网站、网页、链接的形态,发现它们的特点和规律;
2、对抓取的数据进行除重,匹配,过滤等处理;
3、网络爬虫工具的设计、开发及优化;
4、网页信息抽取等核心算法的研究和优化;
5、熟悉网络爬虫原理,设计,实现
二、任职条件:
1、计算机相关专业,一本院校本科及以上学历;
2、3年以上工作经验,其中至少2年爬虫技术领域的工作经验;
3、精通scala,有go、java等其他语言开发经验者优先,有扎实的数据结构和算法功底;
4、理解http,熟悉html, DOM, xpath, scrapy等,精通网页抓取原理及技术、正则表达式,能从结构化的和非结构化的数据中获取信息;
5、熟悉爬虫、种子、去重、提取、过滤、分发、DNS cache、异步处理等概念和过程;
6、熟悉linux开发环境,熟练使用Mysql,熟悉Nosql数据库如mongoDB,Redis等;
7、了解Hadoop、Spark等大数据框架和流处理技术者优先。
公司介绍
北京麦达数字
麦达数字(股票代码:002137)A股上市企业,主营业务涵盖高端制造和企业服务,是国内电子制造服务(EMS)行业首家上市公司,全球最大的EMS产品制造商之一,是GE、飞利浦等世界500强企业的优秀伙伴级供应商。
2014年始,集团公司将围绕数字营销和软件即服务(SaaS)的企业服务列为公司战略重点发展方向。公司以旗下全案类4A广告公司顺为互动、创意策略类数字营销公司奇思国际、社媒数字营销公司利宣广告为核心,并参股移动数字营销公司广州奇异果互动,顺利搭建全产业链、全媒体一站式数字营销解决方案能力,长期服务于Jeep、克莱斯勒,亚马逊,等众多优秀企业客户,并以此为基础向企业级SaaS服务领域延伸,成为A股首家提出SaaS战略的上市公司。
2016年集团先后投资了跨行业通用,社交型客户关系管理(SCRM)细分领域的龙头企业六度人和以及垂直领域,消费品行业的优秀SaaS服务企业赢销通。 公司密切跟踪行业发展,大股东参与建立SaaS产业投资基金。公司根据战略规划,持续关注 SaaS 创新产品,适时开展投资布局。公司相继推出了“麦达SaaS指数”、麦达公开课”等SaaS相关服务, 正迅速建立围绕优秀SaaS产品的投资、运营、连接综合赋能能力。
集团公司旗下北京麦达数字技术服务有限公司(以下简称“北京麦达”)致力于打造SaaS新渠道能力,其核心业务是围绕优选的企业级SaaS产品提供包括数字营销、销售成交和咨询服务在内的客户全生命周期服务。在互联网和新的移动社交环境中,北京麦达利用数据技术建立了完整的企业数据库; 向SaaS企业提供专业的品牌营销,效果营销、集客营销和社群营销技术和服务,高效获取和识别销售线索; 依托高效的社交化客户关系管理系统(EC SCRM)和专业的销售和服务网络最终实现高效率的销售成交和售后客户成功服务。
麦达数字(股票代码:002137)A股上市企业,主营业务涵盖高端制造和企业服务,是国内电子制造服务(EMS)行业首家上市公司,全球最大的EMS产品制造商之一,是GE、飞利浦等世界500强企业的优秀伙伴级供应商。
2014年始,集团公司将围绕数字营销和软件即服务(SaaS)的企业服务列为公司战略重点发展方向。公司以旗下全案类4A广告公司顺为互动、创意策略类数字营销公司奇思国际、社媒数字营销公司利宣广告为核心,并参股移动数字营销公司广州奇异果互动,顺利搭建全产业链、全媒体一站式数字营销解决方案能力,长期服务于Jeep、克莱斯勒,亚马逊,等众多优秀企业客户,并以此为基础向企业级SaaS服务领域延伸,成为A股首家提出SaaS战略的上市公司。
2016年集团先后投资了跨行业通用,社交型客户关系管理(SCRM)细分领域的龙头企业六度人和以及垂直领域,消费品行业的优秀SaaS服务企业赢销通。 公司密切跟踪行业发展,大股东参与建立SaaS产业投资基金。公司根据战略规划,持续关注 SaaS 创新产品,适时开展投资布局。公司相继推出了“麦达SaaS指数”、麦达公开课”等SaaS相关服务, 正迅速建立围绕优秀SaaS产品的投资、运营、连接综合赋能能力。
集团公司旗下北京麦达数字技术服务有限公司(以下简称“北京麦达”)致力于打造SaaS新渠道能力,其核心业务是围绕优选的企业级SaaS产品提供包括数字营销、销售成交和咨询服务在内的客户全生命周期服务。在互联网和新的移动社交环境中,北京麦达利用数据技术建立了完整的企业数据库; 向SaaS企业提供专业的品牌营销,效果营销、集客营销和社群营销技术和服务,高效获取和识别销售线索; 依托高效的社交化客户关系管理系统(EC SCRM)和专业的销售和服务网络最终实现高效率的销售成交和售后客户成功服务。