上海招聘

职位描述：
[ 岗位描述 ]
1、 参与网络信息搜集方向的研究与开发；
2、 与其他技术人员一起攻克海量网页抓取、信息精准抽取等搜索核心技术难题；
3、 负责爬虫系统架构的维护、优化，以及数据存储的相关设计；
4、 负责不同类型定向网站页面的爬取及信息抽取。
 
[ 职位要求 ]
1、 精通PHP程序设计，有至少3年以上PHP相关项目的开发经验。
2、 熟悉HTTP/HTTPS通讯协议，熟悉主流的HTML页面元素构成及JSON接口。
3、 熟悉MySQL、Memcache。
4、 有至少2年以上爬虫领域的项目开发经验，熟悉主流的爬虫技术，了解常见的爬虫封锁机制及应对方案。
5、 具有大型分布式系统的架构设计和性能优化经验。
6、 喜欢专研技术，对代码完美有执着的追求，乐于接受技术上的各种挑战。
7、 能够承受一定的工作压力，具有团队精神。 举报 分享

SPD（Surpassdata）大数据应用产品平台是由几位资深的出身于互联网研究领域、咨询顾问领域、数据科学领域内的专业人士共同打造。依靠核心成员在各自行业内的丰富经验、不同的专业视角及领先的技术手段，历时两年共同打造了SPD这一行业领先的大数据应用平台。
相较于大多数其他大数据应用平台，SPD的最独到之处是在于不拘泥于纯粹的数据分析。而是从一个个切实的商业需求出发，通过对数据的分析应用来寻求解决商业课题的依据和突破点。在大数据的应用过程中，往往会出现以数据为主导的情况，这样的应用方法缺乏方向与目标，大量的浪费了企业资源。
SPD与多家行业巨头级企业进行了大数据相关项目合作，以解决企业最迫切的商业课题为目标，有针对性的制定了前期的数据应用方法、中期的数据抓取及挖掘分析应用、后期的结论报告给出策略建议。以全新的方式给出更客观更准确地商业课题解决方案，颠覆了行业的传统认知。通过长期的项目成果积累，我们将一个个项目的应用方法扩展到能智能输出的大数据应用解决方案模块，单个模块可以覆盖多行业的同类商业课题，并在应用过程中不断优化修正。
SPD致力于打造一个实际应用价值高、行业覆盖面广、结果输出快速准确的大数据应用产品平台。