大数据工程师
上海派兰数据科技有限公司
- 公司规模:少于50人
- 公司性质:民营公司
- 公司行业:计算机软件
职位信息
- 发布日期:2017-04-20
- 工作地点:上海-长宁区
- 招聘人数:1人
- 工作经验:2年经验
- 学历要求:本科
- 职位月薪:1-1.5万/月
- 职位类别:数据库工程师/管理员 技术支持/维护工程师
职位描述
职位描述:
参与大数据平台的研发,包括数据抓取系统的使用和研发,在Hadoop、Spark,Sqoop, SparkML上进行算法开发
负责大数据开发平台的维护和优化工作
负责算法模型的设计和开发工作
负责数据结果的展现及报表开发工作
职位要求:
本科以上学历,计算机科学、MIS、EE等相关专业
经验要求:
2年左右Java/J2EE或者 Python 开发的项目经验;
掌握至少一种数据库开发技术:Mysql,MS-SQL, DB2,Oracle等,灵活运用SQL实现海量数据ETL加工处理;
熟悉Linux系统常规shell处理命令,灵活运用shell做的文本处理和系统操作;
有从事分布式数据存储与计算平台应用开发经验,熟悉Hadoop生态相关技术并有相关实践经验着优先,重点考察Hdfs、Mapreduce、Hive、Hbase;
熟练掌握一门或多门编程语言,并有大型项目建设经验者优先,重点考察Java、Python、Scala;
熟悉数据仓库领域知识和技能者优先,包括但不局限于:元数据管理、数据开发测试工具与方法、数据质量。
举报
分享
参与大数据平台的研发,包括数据抓取系统的使用和研发,在Hadoop、Spark,Sqoop, SparkML上进行算法开发
负责大数据开发平台的维护和优化工作
负责算法模型的设计和开发工作
负责数据结果的展现及报表开发工作
职位要求:
本科以上学历,计算机科学、MIS、EE等相关专业
经验要求:
2年左右Java/J2EE或者 Python 开发的项目经验;
掌握至少一种数据库开发技术:Mysql,MS-SQL, DB2,Oracle等,灵活运用SQL实现海量数据ETL加工处理;
熟悉Linux系统常规shell处理命令,灵活运用shell做的文本处理和系统操作;
有从事分布式数据存储与计算平台应用开发经验,熟悉Hadoop生态相关技术并有相关实践经验着优先,重点考察Hdfs、Mapreduce、Hive、Hbase;
熟练掌握一门或多门编程语言,并有大型项目建设经验者优先,重点考察Java、Python、Scala;
熟悉数据仓库领域知识和技能者优先,包括但不局限于:元数据管理、数据开发测试工具与方法、数据质量。
职能类别: 数据库工程师/管理员 技术支持/维护工程师
关键字: 大数据 运维 数据库 Hadoop Python Scala
公司介绍
派兰数据科技(Palan DataRx)跨学科的团队在医疗信息化和医疗大数据领域拥有超过20年的丰富经验,是国内一流的临床真实世界研究和成果转化的高科技公司。集合了当前主流的云计算、大数据处理、大数据分析、深度学习和人工智能等前沿技术,在医疗大数据真实世界研究、医疗大数据分析智能平台、医疗人工智能等核心领域深度发展成果累累,拥有多项自主创新技术并发表四十余篇高等级论文。数据 与国内多个区域性医疗集团、多家医疗机构合作,利用先进的大数据技术和AI技术为客户提供医疗真实世界研究和临床决策支持服务,实现海量数据价值提升和临床证据转化。
联系方式
- 公司地址:地址:span天津武清麒麟商业中心