大数据开发工程师
青岛鲁诺实业集团有限公司
- 公司规模:500-1000人
- 公司性质:民营公司
- 公司行业:多元化业务集团公司
职位信息
- 发布日期:2016-11-29
- 工作地点:青岛-城阳区
- 招聘人数:4人
- 职位月薪:8000-12000/月
- 职位类别:数据库工程师/管理员 互联网软件开发工程师
职位描述
职位描述:
岗位职责:
1、负责公司大数据处理平台的总体技术工作,包括需求分析、架构设计、研发、以及性能分析工作;
2、负责设计、构建和优化基于hadoop/Hbase的存储平台架构;
3、负责整体提升hadoop/Hbase/Storm/Spark集群的高可用性、高性能、高扩展特性;
4、根据业务需求,提出最优的技术解决方案;分解详细的开发任务,能配合其他项目制定开发计划、开发文档、开发流程图;
5、负责带领项目及培训团队,指导技术团队完成数据规则的定义、数据模型的建立、数据清洗、数据迁移等工作;
6、负责数据架构的规划,并制定实施标准和规范,确保得到有效的执行,同时保障数据以及文档的质量达到预定的标准。
任职要求:
1、3年以上软件开发经验,精通Java开发,3年以上Hadoop相关开发经验;
2、具备数据库系统基本理论知识,掌握Oralce、sqlserver、mysql等主流数据库产品的管理和应用,精通SQL语言,精通存储过程;
3、对hadoop的Map/Reduce原理有深入研究,有相关项目的实际开发经验;
4、熟悉主流大数据处理架构和相关技术,熟练应用Hadoop、Spark、Impala等平台,Hive、hbase、Pig、Storm、Impala、Oozie、Kafka、Sqoop、Flume、Zookeeper相关组件和开源系统,并具有相关项目应用研发经验;
5、熟悉分布式系统、分布式计算系统的工作机制,能熟练掌握相关核心技术的工作机理;具有大规模数据平台,高并发大型系统,大数据等架构设计和开发经验;
6、熟悉Lucene、ElasticSearch、Solr、Nutch等检索技术,熟悉 Kafka/rabbitmq/zeromq等消息中间件;
7、具备数据管理和存储相关项目和系统的开发经验,具有丰富的数据分析、挖掘和数据仓库建模的项目实践经验;
8、具有良好的沟通、组织和领导能力,优秀的分析问题和解决问题的能力,具有实时数据采集系统项目经验者优先。
举报
分享
岗位职责:
1、负责公司大数据处理平台的总体技术工作,包括需求分析、架构设计、研发、以及性能分析工作;
2、负责设计、构建和优化基于hadoop/Hbase的存储平台架构;
3、负责整体提升hadoop/Hbase/Storm/Spark集群的高可用性、高性能、高扩展特性;
4、根据业务需求,提出最优的技术解决方案;分解详细的开发任务,能配合其他项目制定开发计划、开发文档、开发流程图;
5、负责带领项目及培训团队,指导技术团队完成数据规则的定义、数据模型的建立、数据清洗、数据迁移等工作;
6、负责数据架构的规划,并制定实施标准和规范,确保得到有效的执行,同时保障数据以及文档的质量达到预定的标准。
任职要求:
1、3年以上软件开发经验,精通Java开发,3年以上Hadoop相关开发经验;
2、具备数据库系统基本理论知识,掌握Oralce、sqlserver、mysql等主流数据库产品的管理和应用,精通SQL语言,精通存储过程;
3、对hadoop的Map/Reduce原理有深入研究,有相关项目的实际开发经验;
4、熟悉主流大数据处理架构和相关技术,熟练应用Hadoop、Spark、Impala等平台,Hive、hbase、Pig、Storm、Impala、Oozie、Kafka、Sqoop、Flume、Zookeeper相关组件和开源系统,并具有相关项目应用研发经验;
5、熟悉分布式系统、分布式计算系统的工作机制,能熟练掌握相关核心技术的工作机理;具有大规模数据平台,高并发大型系统,大数据等架构设计和开发经验;
6、熟悉Lucene、ElasticSearch、Solr、Nutch等检索技术,熟悉 Kafka/rabbitmq/zeromq等消息中间件;
7、具备数据管理和存储相关项目和系统的开发经验,具有丰富的数据分析、挖掘和数据仓库建模的项目实践经验;
8、具有良好的沟通、组织和领导能力,优秀的分析问题和解决问题的能力,具有实时数据采集系统项目经验者优先。
职能类别: 数据库工程师/管理员 互联网软件开发工程师
关键字: 大数据 开发工程师 软件开发
公司介绍
“大道鲁商,千金一诺”,青岛鲁诺实业集团成立于2005年,总部位于山东·青岛,14载凝心聚力,砥砺前行,事业版图遍布全国30个省(自治区、直辖市),300多个城市,2600个县级行政单位。作为中国人保(PICC)汽车安全管理、风险管控业务的总对总战略合作伙伴,同时又是国内将金融产品与电子类产品相结合的企业,青岛鲁诺实业集团已成为国内众多银行、金融公司、融资租赁公司指定的风控产品提供方,主机厂、汽车销售集团、4S店、部队、大型企事业单位指定的车辆安全管理设备提供方。青岛鲁诺实业集团致力于为汽车金融行业客户提供更专业、更实用、更安全的风控解决方案,累计合作渠道超60000家,其中18000多家4S店,43000多家二级网点,形成具有资产、资金保全优势的综合性、链条式风险管理服务体系,成为了行业内独树一帜的汽车风险管理企业。
青岛鲁诺实业集团旗下拥有鲁诺电子科技有限公司、鲁诺金融电子技术有限公司、鲁诺信息科技有限公司、鲁诺医疗服务有限公司、鲁诺酒店管理有限公司、鲁诺教育科技有限公司、青岛吃土时代网络科技有限公司等众多家全资子公司,以及融邦天下投资集团,投资集团项下169家参股、控股公司。
青岛鲁诺实业集团旗下拥有鲁诺电子科技有限公司、鲁诺金融电子技术有限公司、鲁诺信息科技有限公司、鲁诺医疗服务有限公司、鲁诺酒店管理有限公司、鲁诺教育科技有限公司、青岛吃土时代网络科技有限公司等众多家全资子公司,以及融邦天下投资集团,投资集团项下169家参股、控股公司。
联系方式
- Email:sunxiaoliang@runoqd.com
- 公司地址:地址:span金渝大道85号汉国中心