上海 [切换城市] 上海招聘上海计算机软件招聘上海高级软件工程师招聘

高级大数据开发工程师

虎扑

  • 公司规模:500-1000人
  • 公司性质:合资
  • 公司行业:互联网/电子商务

职位信息

  • 发布日期:2019-11-19
  • 工作地点:上海
  • 招聘人数:2人
  • 工作经验:3-4年经验
  • 学历要求:本科
  • 职位月薪:2.5-3.5万/月
  • 职位类别:高级软件工程师

职位描述

主要工作职责

1、 从事Hadoop、Spark等分布式大数据平台产品的设计和开发;

2、 针对部门大数据业务进行大数据分析、挖掘等产品应用的开发;

3、 大数据平台各类数据业务抽象及模型化;

4、 参与大数据管理平台的开发及维护;

5、 参与大数据平台数据产品ETL设计、开发及自动化工作;

6、 负责大数据平台数据及相关的应用开发,调优及维护;

7、 为项目开发人员提供大数据技术指导及解决大数据平台应用中遇到的技术难题。

任职要求

1、 4年以上大数据应用开发经验,本科及以上学历;

2、 掌握Java开发,有Spark、Python语言开发经验优先;

3、 有以下大数据平台子系统开发经验优先(元数据管理平台、取数即席查询平台、OLAP平台、SDK自助埋点上报平台、实时防水墙系统...)

4、 熟悉Hadoop大数据生态圈技术,对分布式存储Hdfs,Hive,Hbase等 资源调度Yarn,Kubernetes,Azkaban等,计算框架 Spark,Prosto,Hive,Impala等 有相关源码研究优先。

5、 熟悉并掌握离线和实时数据处理流程,熟练使用Spark,Flink处理TB级数据优先。

6、 熟悉阿里DataWorks,并能通过阿里EMR+OSS搭建数据湖泊优先。

7、 熟悉Linux环境,熟悉Mysql、MongoDB等常用关系数据库,熟练编写SQL语句;

8、 对大数据技术有强烈兴趣,有志于往大数据处理方向发展;工作认真踏实,动手和学习新技术能力强。

  

职能类别:高级软件工程师

公司介绍

虎扑(上海)文化传播股份有限公司,是国内领先的体育互联网平台和互联网文化领域的独角兽企业。秉持由用户创造、传播并消费内容的核心原则,绕“互联网趋势下的新竞技娱乐方式”和“消费升级下的新生活方式”两个版块,虎扑在整合营销、电子商务、体育经纪、海外资源拓展和自有IP培育等领域有较为完整的布局。自2004年建站以来,虎扑共吸引了7000万+JRs加入,多年陪伴,共同成长,共同构筑了认真而有趣的社区,涵盖泛体育多个领域和业务维度。致力于为每一位认为“世界是一个竞技场”的用户传递前进的力量。

上海总部地址:上海市虹口区中山北一路121号花园坊A2号3楼
北京分公司地址:北京东城区四十条甲22号1号楼A1115
广州办事处地址:广州市天河区华夏路30号富力盈通大厦3209室

联系方式

  • 公司地址:地址:上海市虹口区中山北一路121号花园坊A2号3楼