北京招聘

职位描述：
岗位职责：
1.负责复杂数据源的整合。
2.负责数据ETL流式处理。
3.负责大数据ETL优化和解决ETL相关技术问题。
4.参与数据存储逻辑设计。
5.参与数据质量管理。
任职要求：
1.本科及以上学历，计算机、软件工程、通信等相关专业。
2.理解实时计算框架。
3.熟悉hadoop生态圈，熟悉HDFS、Hive、Hbase。
4.熟练掌握sql，能写出高质量的sql语句；熟练掌握mysql，了解mongodb。
5.熟练掌握spark、基本掌握kafka。
6.了解python、java并熟练掌握其中之一。
7.有3年以上ETL相关工作经验，有spark streaming开发经验优先。
8.熟悉linux环境优先。 举报 分享

通付盾是一家专业金融科技安全公司，聚焦网络安全、金融科技以及区块链产业，为金融、政企、军队等行业用户，提供综合信息安全解决方案。目前通付盾具有全国最大的APP样本库，为全国公安及网监机构提供实时的APP检测与监测预警服务。并构建了全国最大的ID库，是中国信息安全领域的领军企业。通付盾连续三年入选“中国网络安全企业50强”，并获得 “2017毕马威金融科技50强” 、“2017区块链专利全球十强“ 、“2017德勤高科技高成长中国50强”等荣誉。公司核心团队来自VISA、Microsoft、IBM、HP、Oracle、监管部门、太平洋人寿保险等知名机构及企业。