上海 [切换城市] 上海招聘上海计算机软件招聘上海数据库工程师/管理员招聘

Hadoop 高级工程师

上海百林通信网络科技服务股份有限公司

  • 公司规模:50-150人
  • 公司性质:民营公司
  • 公司行业:通信/电信/网络设备

职位信息

  • 发布日期:2017-06-27
  • 工作地点:上海-浦东新区
  • 招聘人数:1人
  • 工作经验:3-4年经验
  • 学历要求:大专
  • 职位月薪:2-3万/月
  • 职位类别:数据库工程师/管理员  

职位描述

职位描述:
岗位描述
1、参与大数据平台架构的整体规划和设计;
2、负责平台的整体数据架构设计,完成从业务模型到数据模型的设计工作 ;
3、负责根据业务功能、业务模型,进行数据库建模设计对调度系统,元数据系统有非常深刻的认识和理解,能解决高并发系统中的关键问题;
4、对数据挖掘及业务开发团队提供技术支持,协助方案规划;
5、负责技术攻关和创新技术引用,开发具有数据分析、数据挖掘能力的创新型产品;

岗位要求
1、精通java,熟练掌握spring、mybatis、dubbo,有丰富j2ee经验。对框架的实现原理、使用限制、应用场合等有深入了解。有python和scala实际使用经验更佳。
2、有hadoop和spark实际开发经验。了解大数据组件的使用限制和应用场景,如hdfs,yarn,hbase,hive,flume,kafka,zk,impala,kylin,kudu,ES等。读过spark源码更佳。
3、熟悉mysql、ElasticSearch、Redis等关系型或NoSQL,了解应用场景和使用限制。有实际调优经验者更佳。
4、熟悉linux常用命令,有实际CDH或HDP或apache版本的hadoop部署经验者优先。
5、英文文档阅读无障碍。
6、熟练掌握常用设计模式。
7、熟练使用maven、git
8、熟悉JVM运行时区域及各GC算法的使用场景,有使用相应工具进行JVM及集群调优经验。
9、有实际建模经验,熟悉数据仓库建模。
10、开源项目committer,请提交对应issue 链接。
11、追求devops者更佳。
我们的挑战:
1、近实时 窗口 处理100T + 5T /day的数据。
2、通过Restful服务暴露统计的或原始的数据。追求秒级响应。

职能类别: 数据库工程师/管理员

关键字: Hadoop Android

举报 分享

公司介绍

        上海百林通信网络科技服务股份有限公司(简称:百林通信)是中国唯一一家自主研发全系列无线网络系统仿真、网络规划优化工具,并提供工程和咨询服务的高科技公司。公司产品与服务涵盖gsm/(e)gprs、td-scdma、 cdma2000 1x/ev-do、 wcdma、hspa、wimax、lte、scdma和数字集群等无线网络通信标准。
    工程与咨询服务,综合利用仿真、预测、路测、omc、scanner、mmr(移动测量报告)和信令等数据,使用自主研发的规划优化软件平台,同时关注点、线(主干道、公路和铁路)和面(居民区、cbd和热点区域等)网络,确保高效发现网络潜在问题并输出***规划优化方案,强调了规划与优化的系统性和连贯性,实现全面改善网络质量和提升用户感知。
    百林通信是国内通信软件的***,致力于移动通信网络规划、网络优化、高端工程服务。产品线覆盖2g/3g/4g各个标准,客户群涵盖了移动、电信、联通三大运营商,以及华为、中兴等一线设备供应商。百林通信在2010年被评为中国通信产业榜50强,被誉为全国aaaa级质量示范单位。作为一个技术型企业,一直致力于自主创新技术,积累了深厚的技术基础,具有浓厚的技术氛围。在通信、软件、算法、gis、测试、项目管理等领域都有资深专家团队,具有完善的人才梯队。为新进人才提供了发挥的舞台。
    百林通信欢迎您的加入,在这个广阔的平台上,愿与您携手共展通信人的风姿,创造精彩美好的未来!

联系方式

  • 公司地址:地址:span郭守敬路498号15号楼105室