广州招聘

岗位职责：
1、专注于垂直领域数据爬取，进行多平台信息的抓取和分析；
2、参与爬虫系统的架构设计与开发；
3、研究优化爬虫算法，提升爬虫系统的稳定性、可扩展性；
4、设计爬虫策略和防屏蔽规则，提升网页抓取的效率和质量；
5、能独立解决实际开发过程中碰到的各类问题。

岗位要求：
1、熟悉TCP/IP、HTTP、HTTPS等网络协议，熟悉web前端，可读懂js/css/html等代码；
2、熟练使用Python语言，熟练掌握爬虫框架Scrapy，熟悉 asyncio 技术。熟悉反爬虫技术及破解方法；
3、熟练使用selenium，lxml, bs4, 等网页解析工具。使用xpath与正则对文本进行抓取解析清理；
4、熟悉常见的数据结构，具备自主开发小规模爬虫的能力，同时具有良好的合作意识，能参与较大规模项目研发；
5、熟悉MySql/PostgreSQL/MongoDB/Redis等常用数据库或缓存的一种，掌握Java,scala语言优先考虑；
6、熟悉高并发、高性能的分布式系统的设计及应用。
7、熟悉app的数据爬取方式，对app有反编译经验的优先考虑。

公司简介：

阜博集团于2005年成立于美国硅谷，是世界领先的网络音视频内容保护技术服务商，在线视频版权保护市场全球占有率名列***。公司致力于打造影视传媒在线发行产业链的核心业务平台，主要客户囊括了好莱坞六大电影集团、美国四大电视网、日本多家大型影视内容制作公司，以及全球众多知名视频网站和电视频道。凭借核心的视频识别专利技术在影视内容版权保护领域的成功应用，公司荣获美国电视艺术与科学院颁发的第69届艾美奖 ( Emmy Award）。阜博集团在2019年通过收购成为YouTube和Facebook最主要的内容运营合作伙伴。广州阜博科技有限公司成立于2019年，是阜博集团在中国华南地区的分公司。

浙江大学华南工业技术研究院是浙江大学与广州市人民政府、广州开发区管委会合作共建的开放式、国际化科技创新引擎与高端服务平台，是浙江大学在华南地区设立的独立事业法人单位。 浙江大学华南工业技术研究院作为浙江大学在广东省及珠三角地区的科技创新与产业化总部，将发展成为集科技研发、咨询服务、教育培训、成果转化与技术孵化、产业培育等为一体的协同创新平台，为广州市乃至珠三角地区的产业转型升级与战略性新兴产业发展提供科技与人才支撑。