大数据开发工程师
北京直真信息科技有限公司
- 公司规模:500-1000人
- 公司性质:民营公司
- 公司行业:计算机软件
职位信息
- 发布日期:2017-04-21
- 工作地点:成都-锦江区
- 招聘人数:1人
- 工作经验:3-4年经验
- 职位月薪:1-1.5万/月
- 职位类别:软件工程师 高级软件工程师
职位描述
职位描述:
1、负责搭建hadoop/spark集群,并维护与管理;
2、负责hadoop平台上的数据存储,数据维护和优化;
3、利用hadoop,spark平台、Nosql数据库、redis内存数据库、实时分析平台,进行数据统计、分析、挖掘,处理等工作;
4、负责大数据应用平台核心模块的详细设计和开发工作;
5、负责或参与相关大数据服务产品的设计及开发;
任职要求:
1、计算机相关专业本科及以上学历;
2、精通关系型数据库(mysql,oracle)和非关系型数据库;
3、熟练使用至少一种ETL工具,具备1年以上实际工作经验,具备ETL优化能力;
4、熟悉敏捷开发理论,熟悉数据仓库理论,熟悉维度建模,至少具有1年大型数据仓库开发经验,有分析源数据数据结构和业务逻辑经验优先;
5、具备较强的逻辑思维能力,能快速分析并解决出现的问题,具有较强的沟通能力;
6、熟悉面向对象的设计和开发过程,能熟练使用 Scala 、java 、 Python等开发语言;
7、熟悉Hadoop、HBase、Zookeeper 、Storm 、Spark等分布式框架,对hadoop源码有深入研究和工作经验者优先;
8、精通hadoop,spark的基本原理,并能够熟练编写spark程序;
9、具有hadoop cluster部署、优化、排错的能力;
10、熟练使用hive,并能够编写hiveQL,及sparksql;
举报
分享
1、负责搭建hadoop/spark集群,并维护与管理;
2、负责hadoop平台上的数据存储,数据维护和优化;
3、利用hadoop,spark平台、Nosql数据库、redis内存数据库、实时分析平台,进行数据统计、分析、挖掘,处理等工作;
4、负责大数据应用平台核心模块的详细设计和开发工作;
5、负责或参与相关大数据服务产品的设计及开发;
任职要求:
1、计算机相关专业本科及以上学历;
2、精通关系型数据库(mysql,oracle)和非关系型数据库;
3、熟练使用至少一种ETL工具,具备1年以上实际工作经验,具备ETL优化能力;
4、熟悉敏捷开发理论,熟悉数据仓库理论,熟悉维度建模,至少具有1年大型数据仓库开发经验,有分析源数据数据结构和业务逻辑经验优先;
5、具备较强的逻辑思维能力,能快速分析并解决出现的问题,具有较强的沟通能力;
6、熟悉面向对象的设计和开发过程,能熟练使用 Scala 、java 、 Python等开发语言;
7、熟悉Hadoop、HBase、Zookeeper 、Storm 、Spark等分布式框架,对hadoop源码有深入研究和工作经验者优先;
8、精通hadoop,spark的基本原理,并能够熟练编写spark程序;
9、具有hadoop cluster部署、优化、排错的能力;
10、熟练使用hive,并能够编写hiveQL,及sparksql;
职能类别: 软件工程师 高级软件工程师
公司介绍
北京直真科技股份有限公司成立于1999年10月15日,是一家总部位于北京中关村科技园区的高新技术软件企业。公司自成立以来专注于从事电信领域的高技术产品开发、系统集成及相关的服务。公司的近期目标是三年内成为国内一流的OSS系统提供商和国际上著名的OSS产品提供商及增值服务提供商。网址:www.zznode.com
联系方式
- 公司地址:上班地址:东御街57号人保大厦16B1