北京 [切换城市] 北京招聘北京计算机软件招聘北京系统工程师招聘

大数据ETL开发工程师

北京通付盾数据科技有限公司

  • 公司规模:150-500人
  • 公司性质:民营公司
  • 公司行业:计算机软件  计算机服务(系统、数据服务、维修)

职位信息

  • 发布日期:2017-12-05
  • 工作地点:北京-西城区
  • 工作经验:无工作经验
  • 职位月薪:1.2-2万/月
  • 职位类别:系统工程师  

职位描述

职位描述:
岗位职责:
1.负责复杂数据源的整合。
2.负责数据ETL流式处理。
3.负责大数据ETL优化和解决ETL相关技术问题。
4.参与数据存储逻辑设计。
5.参与数据质量管理。

任职要求:
1.本科及以上学历,计算机、软件工程、通信等相关专业。
2.理解实时计算框架。
3.熟悉hadoop生态圈,熟悉HDFS、Hive、Hbase。
4.熟练掌握sql,能写出高质量的sql语句;熟练掌握mysql,了解mongodb。
5.熟练掌握spark、基本掌握kafka。
6.了解python、java并熟练掌握其中之一。
7.有3年以上ETL相关工作经验,有spark streaming开发经验优先。
8.熟悉linux环境优先。

职能类别: 系统工程师

公司介绍

通付盾是一家专业金融科技安全公司,聚焦网络安全、金融科技以及区块链产业,为金融、政企、军队等行业用户,提供综合信息安全解决方案。目前通付盾具有全国最大的APP样本库,为全国公安及网监机构提供实时的APP检测与监测预警服务。并构建了全国最大的ID库,是中国信息安全领域的领军企业。通付盾连续三年入选“中国网络安全企业50强”,并获得 “2017毕马威金融科技50强” 、“2017区块链专利全球十强“ 、“2017德勤高科技高成长中国50强”等荣誉。公司核心团队来自VISA、Microsoft、IBM、HP、Oracle、监管部门、太平洋人寿保险等知名机构及企业。

联系方式

  • 公司地址:上班地址:北京市西城区北三环中路27号商房大厦410室