广州 [切换城市] 广州招聘

Spark开发工程师

北理新源(佛山)信息科技有限公司

  • 公司规模:50-150人
  • 公司性质:民营公司
  • 公司行业:计算机软件

职位信息

  • 发布日期:2021-06-04
  • 工作地点:佛山-南海区
  • 招聘人数:1人
  • 工作经验:2年经验
  • 学历要求:本科
  • 职位月薪:1.5-2.1万/月
  • 职位类别:大数据开发工程师

职位描述

职位描述:

1、 参与大数据平台的建设和维护。

2、 参与设计数据仓库模型、构建分层体系、元数据管理及核心应用开发。

3、 参数据服务的开发,为其他部门提供数据服务。

4、 参与CDH大数据平台的搭建,熟练使用spark进行数仓的搭建及分层设计,使用spark进行离线计算。

岗位要求:

1、本科或以上学历,计算机相关专业。

2、熟悉数据仓库模型设计和ETL开发经验,该领域2年以上的工作经验。

3、掌握Java/Python/Scala一种或者多种语言。

4、熟练使用 SQL,至少熟悉一种关系型数据库。

5、对CDH-Hadoop的大数据体系有深入认识,具备相关产品(Hadoop、Hive、HBase、Spark、Storm、Flume、sqoop、Kafka、ES等)项目应用研发经验。

6、具有spark计算引擎的实际应用经验和原理理解,有引擎优化经验。
7、 思路清晰,具备良好的沟通能力和理解能力,较强的学习能力以及快速解决问题的能力。
8、具有高度的责任心和团队合作精神。

公司介绍

北理新源(佛山)信息科技有限公司成立于2019年10月,是北京理工新源信息科技有限公司在佛山市南海区成立的全资子公司:与佛山市南海区政府签订合作协议,设立新能源汽车大数据服务与管理华南中心,实现与国家平台主站数据同步备份,并开展车辆运行大数据分析及业务推广,定位为新能源汽车华南大数据中心运营主体;
开展氢产业链一体化监控管理平台、动力电池评估交易平台、二手新能源车交易平台的研发,及智能终端产品研发、生产和销售,未来延伸工业互联网交易及应用。

联系方式

  • 公司地址:南海区桂城街道地铁金融城西塔写字楼高区第19、20层 (邮编:528000)