上海招聘

职位描述：
职位描述：
1）建立、维护及持续改进的通用网络爬虫系统。
2）精通DOM模型、模式识别、页面清洗技术；熟练大数据存储。
3）开发分布式制向源爬虫。
4）爬虫相关调度、运维、管理和API开发。
任职资格:
1）3年以上开发工作经验，计算机相关专业。
2）熟练使用C#, .net framework和ASP.NET。
3）熟悉NoSQL，Redis和关系型数据库技术。
4）了解HTTP通讯协议，熟悉多线程编程。
加分项：
1）有爬虫开发经验及Web API开发经验优先。
2）有Redis, ElasticSearch开发经验优先。
3）有Storm, Spark等流式框架开发经验优先。
4）有个人技术博客或开源项目优先。
5）沟通能力好，有团队协作精神。
6）善于发现和解决问题，思路清晰。 举报 分享

General Intelligence（通用智能）致力于NLP自然语言智能处理、传播预测、文本因子投资以及大规模分布式爬虫等的研究和开发。我们是一家具有12年NLP和大数据分析工业级产品经验的AI公司，在非结构化数据挖掘领域积累了成熟的技术及产品，并为金融、政务、消费、情报等行业提供专业的技术服务。公司目前在上海和香港皆设有分部，此招聘针对的是玑脉（上海）数据技术有限公司。若您对香港分公司有兴趣，亦可联系我们人事。
公司主要团队为技术研发人员，在技术方面追求卓越，并在多个文本处理领域处于国内领先地位，积累了高质量的语料库和算法资源，拥有国内***的数据研发条件。
我们为国内少数几家承担过***的重点科研项目、成立过国内领先的科研实验室、发表过多领域国内首发的论文(书)的机构；然而，最重要的，在过去的十余年中，我们创造的产品可以切实地帮助到用户。
在未来的AI浪潮中，业界需要一批数据工程师，而不是数据科学家。因此我们的定位在于垂直领域的工程化实现，以期获得该领域的生产力提升，进而与合作伙伴分享该红利。因此我们需要一群聪明、谦虚、学习能力强的伙伴，来共同推进事业。