大数据开发工程师
上海有大信息科技有限公司
- 公司规模:50-150人
- 公司性质:民营公司
- 公司行业:计算机软件
职位信息
- 发布日期:2020-08-22
- 工作地点:上海
- 招聘人数:3人
- 工作经验:3-4年经验
- 学历要求:大专
- 职位月薪:1.5-2万/月
- 职位类别:数据仓库工程师
职位描述
岗位职责:
1.开发基于CDH与ELK的大数据平台离线与实时处理程序;
2.开发各种自动化开发、运维工具,提升大数据平台和数据仓库的成熟度;
3.支持与维护大数据平台的技术组件与应用,确保平台运转正常;
4.参与大数据平台的建设与优化工作,提升数据产品的质量和响应速度;
5.参与大数据技术路线的规划和相关文档的编写;
任职要求:
1.全日制大专及以上学历,本科优先,理工类专业毕业;
2.至少2年以上大数据开发经验,有证券行业项目经验优先;
3.具有Flink实时大数据项目开发经验,具有Hive/Impala离线大数据项目开发经验;
4.理解Hadoop生态圈技术,掌握Kafka, Hdfs, MapReduce, Yarn, Hbase, Flume等常用技术;
5.熟悉Linux,具备shell/perl/python脚本开发能力;
6.具有Java开发经验,对SpringBoot, Mybatis等常见框架有初级开发能力;
7.了解ElasticSearch, Logstash, Kibana技术;
8.工作积极主动,认真负责,有高度的责任心;
9.有良好沟通能力和团队协作精神;
职能类别:数据仓库工程师
公司介绍
创立于2005年,作为一家TMT公司,我们为客户提供基于互联网技术IT系统构建、IT外协服务、项目运营等,帮助客户产品创新、渠道创新、服务创新,。
有大公司拥有500多名涵盖互联网技术、媒体整合、项目运营的精英人士,为上海信托、国泰君安、上海清算所、固金所、东航金融、顶新集团、蒙牛集团、魅力惠、旺旺集团等多家大型企业提供专业服务。
有大公司拥有500多名涵盖互联网技术、媒体整合、项目运营的精英人士,为上海信托、国泰君安、上海清算所、固金所、东航金融、顶新集团、蒙牛集团、魅力惠、旺旺集团等多家大型企业提供专业服务。
联系方式
- 公司地址:地址:span世纪汇26楼