上海 [切换城市] 上海招聘上海计算机软件招聘上海高级软件工程师招聘

大数据开发

上海洞识信息科技有限公司

  • 公司规模:少于50人
  • 公司性质:创业公司
  • 公司行业:计算机软件

职位信息

  • 发布日期:2017-10-30
  • 工作地点:北京-海淀区
  • 工作经验:3-4年经验
  • 职位月薪:1.5-2万/月
  • 职位类别:高级软件工程师  

职位描述

职位描述:
大数据开发 招聘人数:1人 工作地点:北京

【工作职责:】

1. 负责公司大数据处理平台的相关技术工作,包括需求分析、架构设计、研发、以及性能分析工作;
2. 负责设计、构建和优化基于hadoop/Hbase的存储平台架构;
3. 负责整体提升hadoop/Hbase/Storm/Spark集群的高可用性、高性能、高扩展特性;
4. 根据业务需求,提出最优的技术解决方案;分解详细的开发任务,能配合其他项目制定开发计划、开发文档、开发流程图;
5. 负责配合技术团队完成数据规则的定义、数据模型的建立、数据清洗、数据迁移等工作。
6. 负责数据架构的规划,并制定实施标准和规范,确保得到有效的执行,同时保障数据以及文档的质量达到预定的标准;

【任职资格:】
1. 2年以上软件开发经验,精通Java开发,3年以上Hadoop相关开发经验;
2. 具备数据库系统基本理论知识,至少掌握一种主流商业数据库产品如Oralce的管理和应用,精通SQL语言,精通存储过程;
3. 对hadoop的Map/Reduce原理有深入研究,有相关项目的实际开发经验;
4. 熟悉Hadoop、Hive和hbase、storm等开源项目;
5. 对基于hadoop的大数据处理体系有深入认识,具备相关产品(hadoop/storm /hive/hbase)项目应用研发经验,熟悉分布式系统、分布式计算系统的工作机制,能熟练掌握相关核心技术的工作机理;具有大规模数据平台,高并发大型系统,大数据等架构设计和开发经验;
6. 熟悉全文检索技术,如solr、lucene等使用;
7. 具备数据管理和存储相关项目和系统的开发经验,具有丰富的数据分析、挖掘和数据仓库建模的项目实践经验;
8. 具有良好的沟通、组织能力,优秀的分析问题和解决问题的能力,对解决具有挑战性问题充满激情,具备强烈的进取心和优秀团队合作精神;

职能类别: 高级软件工程师

公司介绍

大数据,云服务

联系方式

  • 公司地址:地址:span四川省,湖北省,湖南省