Hadoop开发工程师
北京东大正保科技有限公司
- 公司规模:1000-5000人
- 公司性质:民营公司
- 公司行业:互联网/电子商务
职位信息
- 发布日期:2016-11-16
- 工作地点:北京-海淀区
- 招聘人数:若干人
- 工作经验:5-7年经验
- 学历要求:本科
- 职位月薪:15000-30000/月
- 职位类别:高级软件工程师
职位描述
职位描述:
岗位职责:
1.研究、开发、测试hdfs/mapreduce/hive/hbase的功能、性能和扩展;
2.对有助于提升集群处理能力/高可用性/高扩展性的各种解决方案进行跟踪和落地;
3.解决海量数据不断增长面临的挑战,解决业务需求。
4.基于 hadoop 进行开发分布式计算业务
5.基于 hbase 进行开发分布式存储和分析业务。
6.管理 Hadoop 集群日常运行,稳定提供服务
7.设计与开发基于Hadoop平台的海量安全日志的分布式存储架构
8.设计与开发基于Hadoop平台的海量安全日志的自动化分析和数据挖掘架构
9.搭建、升级维护Hadoop集群
职位要求:
1.计算机或相关专业,本科3年以上或硕士1年以上工作经验。
2.3年以上数据仓库设计和开发经验,经历过大的数据仓库架构,并推动应用。
对数据敏感,有一定技术研究能力,有海量数据处理相关经验
3.对hadoop、hive、PIG、hbase、MapReduce、flume-ng、kafka、spark一种或者几种有一定的理解,实时关注大数据的技术动态,想要不断的去尝试未曾尝试过的新技术。
4.有较强的对手实现能力及学习能力,精通java,python的优先。
5.拥有海量数据处理和并行计算开发以上经验优先。
6.有过hadoop、storm、spark、kafka、flume经验的优先。
举报
分享
岗位职责:
1.研究、开发、测试hdfs/mapreduce/hive/hbase的功能、性能和扩展;
2.对有助于提升集群处理能力/高可用性/高扩展性的各种解决方案进行跟踪和落地;
3.解决海量数据不断增长面临的挑战,解决业务需求。
4.基于 hadoop 进行开发分布式计算业务
5.基于 hbase 进行开发分布式存储和分析业务。
6.管理 Hadoop 集群日常运行,稳定提供服务
7.设计与开发基于Hadoop平台的海量安全日志的分布式存储架构
8.设计与开发基于Hadoop平台的海量安全日志的自动化分析和数据挖掘架构
9.搭建、升级维护Hadoop集群
职位要求:
1.计算机或相关专业,本科3年以上或硕士1年以上工作经验。
2.3年以上数据仓库设计和开发经验,经历过大的数据仓库架构,并推动应用。
对数据敏感,有一定技术研究能力,有海量数据处理相关经验
3.对hadoop、hive、PIG、hbase、MapReduce、flume-ng、kafka、spark一种或者几种有一定的理解,实时关注大数据的技术动态,想要不断的去尝试未曾尝试过的新技术。
4.有较强的对手实现能力及学习能力,精通java,python的优先。
5.拥有海量数据处理和并行计算开发以上经验优先。
6.有过hadoop、storm、spark、kafka、flume经验的优先。
职能类别: 高级软件工程师
公司介绍
正保远程教育(China Distance Educat ion Holdings Ltd., CDEL) 成立于2000年,2008年在美国纽约证券交易所上市(股票代码: DL)。集团自成立以来,专注于职业教育和服务,以构建完善的“终身教育体系”和“完全教育体系”为发展战略,牢固树立“学员利益至上,一切为学员服务”的理念,高度重视教学质量,应用先进的网站和课件技术,全力做好网站内容建设,切实提升辅导效果,助力中国远程教育的大发展!
联系方式
- 公司地址:地址:span北京市海淀区知春路1号学院国际大厦一层正保教育接待大厅