开发工程师
北京天下秀广告有限公司
- 公司规模:1000-5000人
- 公司性质:上市公司
- 公司行业:广告
职位信息
- 发布日期:2021-01-10
- 工作地点:北京-朝阳区
- 招聘人数:若干人
- 工作经验:3-4年经验
- 学历要求:本科
- 职位月薪:1.5-2万/月
- 职位类别:爬虫开发工程师
职位描述
岗位职责:
负责开发和维护高并发分布式爬虫平台,根据需求爬取指定App或网站的数据
针对爬取的数据进行基本的清洗,编写ETL策略
协助数据分析人员进行数据分析工作
负责设计爬虫策略和防屏蔽规则,提升抓取效率和质量。
负责数据信息抽取,数据清洗,数据入库等研发和优化工作。
负责编写数据分析脚本。
岗位要求:
熟悉 Python 语言,熟悉 Scrapy等爬虫框架,有分布式爬虫系统的开发经验。
熟悉常见的爬虫与反爬虫策略,如:验证码识别、IP池等。
熟悉正则表达式和Xpath。
对 Linux 操作系统,各类关系型数据库有基本的使用经验。
基本熟悉 ETL 等数据清洗和归一化手段,基本掌握 pandas、jupyternotebook 等常用数据科学工具的使用方法。
有基本的统计学常识,了解 方差、抽样等基本概念
有榜单数据行业或海量数据爬取及处理经验加分。
有逆向工程、反编译、破解app经验加分。
公司介绍
IMS(天下秀)新媒体商业集团(以下简称“IMS天下秀”)是一家基于新媒体大数据技术驱动的新经济公司,其toB端业务将致力于为广告主提供智能化的新媒体营销解决方案,实现产品与消费者的精准匹配,帮助广告主低成本获取客户以及带动产品销售和口碑转化,同时帮助海量文化创意产业、数字内容产业的新媒体从业者实现高效便捷的价值变现。作为国内***家以社会化营销为业务核心的公司,天下秀发展至今已有10年的历程,它见证了中国社会化营销一步步的崛起,在2017年完成了6亿元人民币C轮与C+轮融资后,跻身独角兽行列,成为国内新媒体商业领域为数不多的独角兽企业。目前已累计为国内外数百家品牌企业广告主、数万家中小企业、广告主提供新媒体营销服务,并积累了数百万家新媒体资源,覆盖新浪微博、微信、抖音、小红书等多个主流新媒体传播平台;IMS天下秀凭借多年来在品牌咨询、广告策划、平台资源、自媒体资源、大数据技术等多方面的综合竞争优势,获得众多知名品牌客户的认可。
IMS天下秀在toB业务方面拥有WEIQ、SMART、克劳锐、IMSOCIAL红人加速器,四大品牌矩阵。 四大品牌涵盖了自媒体广告交易、社会化创意营销、自媒体版权及价值排行以及自媒体价值赋能,致力于打造完整的新媒体行业全生态。公司目前已有员工800余人,总部位于三里屯西五街,上海、广州、深圳、北海等地均有分公司和办事处。
IMS天下秀在toB业务方面拥有WEIQ、SMART、克劳锐、IMSOCIAL红人加速器,四大品牌矩阵。 四大品牌涵盖了自媒体广告交易、社会化创意营销、自媒体版权及价值排行以及自媒体价值赋能,致力于打造完整的新媒体行业全生态。公司目前已有员工800余人,总部位于三里屯西五街,上海、广州、深圳、北海等地均有分公司和办事处。
联系方式
- 公司地址:地址:span马当路388号复兴SOHO广场A座20层