Spark/hadoop开发工程师(Java)
北京动力在线通信服务有限公司
- 公司规模:少于50人
- 公司性质:民营公司
- 公司行业:计算机软件 计算机服务(系统、数据服务、维修)
职位信息
- 发布日期:2016-09-23
- 工作地点:北京-海淀区
- 招聘人数:3人
- 工作经验:2年经验
- 职位月薪:6000-7999/月
- 职位类别:软件工程师
职位描述
职位描述:
岗位职责:
1、负责Java模块编写,包括Spark/Hadoop模块编码;
2、负责基于Spark技术的海量数据的处理、分析、统计、挖掘工作;
3、根据需求使用Spark Streaming和Spark SQL进行数据处理/查询/统计。
4、研究Spark/Hadoop集群技术,持续优化集群架构,发现并解决重大故障及性能瓶颈
5、熟悉Java多线程编程,常用设计模式,常用中间件,以及常用海量数据分析挖掘方法
职位要求:
1、大学大专以上学历,计算机相关专业。
2、熟练掌握Spark相关技术,至少有1年以上Spark开发经验;
3、熟练掌握Java语言后端开发,有丰富的分布式编程经验,如多线程、网络等;
4、熟悉Spark 生态系统组件,如:Hadoop、Flume、Kafka、HBase、Hive、Pig、ZooKeeper;
5、熟悉Hive,并有优化经验,理解 HDFS/Hbase 体系架构,并有相当开发经验;
6、熟悉Linux开发环境
7、具备较强的故障排查能力,有很好的技术敏感度和风险识别能力;
举报
分享
岗位职责:
1、负责Java模块编写,包括Spark/Hadoop模块编码;
2、负责基于Spark技术的海量数据的处理、分析、统计、挖掘工作;
3、根据需求使用Spark Streaming和Spark SQL进行数据处理/查询/统计。
4、研究Spark/Hadoop集群技术,持续优化集群架构,发现并解决重大故障及性能瓶颈
5、熟悉Java多线程编程,常用设计模式,常用中间件,以及常用海量数据分析挖掘方法
职位要求:
1、大学大专以上学历,计算机相关专业。
2、熟练掌握Spark相关技术,至少有1年以上Spark开发经验;
3、熟练掌握Java语言后端开发,有丰富的分布式编程经验,如多线程、网络等;
4、熟悉Spark 生态系统组件,如:Hadoop、Flume、Kafka、HBase、Hive、Pig、ZooKeeper;
5、熟悉Hive,并有优化经验,理解 HDFS/Hbase 体系架构,并有相当开发经验;
6、熟悉Linux开发环境
7、具备较强的故障排查能力,有很好的技术敏感度和风险识别能力;
职能类别: 软件工程师
关键字: 下午茶
公司介绍
北京动力在线通信服务有限公司,是一家致力于提供安全IT基础服务及互联网解决方案的创新型企业,拥有集管理、研发、运维于一体的优秀团队。公司旗下拥有自主知识产权的产品包括PowerCDN、广域网负载均衡、云计算、容灾系统、预警系统、统计分析系统、畅谈通等多款产品和服务。
公司主营业务包括互联网加速服务(CDN)、数据中心服务(IDC)、云计算服务、不间断网络服务(PowerUNS)以及全方位的增值服务和解决方案,且产品和服务均跃居行业前列,快速持续的占领着CDN加速、IDC托管、互联网增值业务市场。
动力在线秉承“专注于安全的IT基础服务商”的理念,以技术驱动服务水平的提升,做客户信赖的长期合作伙伴,实现"竞合共赢"。
公司主营业务包括互联网加速服务(CDN)、数据中心服务(IDC)、云计算服务、不间断网络服务(PowerUNS)以及全方位的增值服务和解决方案,且产品和服务均跃居行业前列,快速持续的占领着CDN加速、IDC托管、互联网增值业务市场。
动力在线秉承“专注于安全的IT基础服务商”的理念,以技术驱动服务水平的提升,做客户信赖的长期合作伙伴,实现"竞合共赢"。
联系方式
- 公司地址:上班地址:花园北路14号环星大厦A座5层