上海 [切换城市] 上海招聘

大数据开发工程师

上海有大信息科技有限公司

  • 公司规模:50-150人
  • 公司性质:民营公司
  • 公司行业:计算机软件

职位信息

  • 发布日期:2020-08-22
  • 工作地点:上海
  • 招聘人数:3人
  • 工作经验:3-4年经验
  • 学历要求:大专
  • 职位月薪:1.5-2万/月
  • 职位类别:数据仓库工程师

职位描述

岗位职责:

1.开发基于CDH与ELK的大数据平台离线与实时处理程序;

2.开发各种自动化开发、运维工具,提升大数据平台和数据仓库的成熟度;

3.支持与维护大数据平台的技术组件与应用,确保平台运转正常;

4.参与大数据平台的建设与优化工作,提升数据产品的质量和响应速度;

5.参与大数据技术路线的规划和相关文档的编写;

任职要求: 

1.全日制大专及以上学历,本科优先,理工类专业毕业;

2.至少2年以上大数据开发经验,有证券行业项目经验优先;

3.具有Flink实时大数据项目开发经验,具有Hive/Impala离线大数据项目开发经验;

4.理解Hadoop生态圈技术,掌握Kafka, Hdfs, MapReduce, Yarn, Hbase, Flume等常用技术;

5.熟悉Linux,具备shell/perl/python脚本开发能力;

6.具有Java开发经验,对SpringBoot, Mybatis等常见框架有初级开发能力;

7.了解ElasticSearch, Logstash, Kibana技术;

8.工作积极主动,认真负责,有高度的责任心;

9.有良好沟通能力和团队协作精神;

职能类别:数据仓库工程师

公司介绍

创立于2005年,作为一家TMT公司,我们为客户提供基于互联网技术IT系统构建、IT外协服务、项目运营等,帮助客户产品创新、渠道创新、服务创新,。

有大公司拥有500多名涵盖互联网技术、媒体整合、项目运营的精英人士,为上海信托、国泰君安、上海清算所、固金所、东航金融、顶新集团、蒙牛集团、魅力惠、旺旺集团等多家大型企业提供专业服务。

联系方式

  • 公司地址:地址:span世纪汇26楼