大数据开发工程师
北京聚胜万合科技有限公司
- 公司规模:50-150人
- 公司性质:民营公司
- 公司行业:计算机服务(系统、数据服务、维修) 通信/电信运营、增值服务
职位信息
- 发布日期:2018-03-26
- 工作地点:北京-朝阳区
- 工作经验:3-4年经验
- 学历要求:本科
- 职位月薪:2.5-3万/月
- 职位类别:高级软件工程师 数据库工程师/管理员
职位描述
1、负责海量数据处理分布式平台以及大数据分析系统的研发;
2、根据业务和产品情况对数据模型进行设计和开发,对数据模型进行优化;
3、负责业务需求的需求理解、数据开发,提供面向业务的数据服务;
4、应用大数据技术完成离线分析和实时数据分析工作;
5、对集群进行优化及数据处理的调优。
任职要求:
1、计算机相关专业本科以上学历,最少3年工作经验,2年以上大数据研发经验;
2、有扎实的Java基础,熟悉一种以上数据库并熟练运用SQL,熟悉scala、python等计算机语言尤佳;
3、具备良好的J2EE、SOA、Database、nosql等广泛的知识体系;
4、熟悉主流Web应用服务器,如Tomcat、Nginx、weblogic等;
5、熟悉Linux开发环境,了解常用工具使用,掌握linux常用命令,能使用shell脚本实现相关功能;
6、深刻理解Hadoop大数据平台架构原理,熟悉HDFS/MapReduce,能熟练运用MapReduce程序处理数据;
7、熟悉 Storm / Spark / Kafka 等实时计算技术栈,有过实际项目经验;
8、熟悉hadoop生态圈相关工具 flume/ ELK / azkaban或者Oozie
9、熟悉Hive / Pig / Hbase / ZooKeeper,对Hadoop、Hive源码有研究更佳;
10、有Hadoop集群的搭建、维护和优化经验;
11、热爱技术,对技术有不懈的追求,喜欢研究开源代码;
12、做事积极主动,具有高度的责任感与团队合作精神,主动学习新技术,有良好的沟通能力。
职能类别: 高级软件工程师 数据库工程师/管理员
公司介绍
联系方式
- 公司地址:上班地址:亮马桥路27号宝成大厦(国际珠宝古玩城)4层430室