大数据平台运维工程师(Hadoop方向)
上海罗盘信息科技有限公司
- 公司规模:150-500人
- 公司性质:民营公司
- 公司行业:计算机软件
职位信息
- 发布日期:2021-01-12
- 工作地点:西安-雁塔区
- 招聘人数:2人
- 工作经验:2年经验
- 学历要求:本科
- 职位月薪:1-1.5万/月
- 职位类别:数据库工程师(DBA) 软件工程师
职位描述
1、负责大数据平台的搭建、发布部署及相关维护工作;
2、负责系统的运维和主动预防,搭建监控机制以及及时发现集群问题,持续提升系统可用性与稳定性;
3、跟进并处理系统事件,对系统问题及故障解决跟踪优化,负责服务状况与服务质量报告,不断提升集群服务质量;
4、梳理优化业务使用集群的流程和规范,使集群使用在资源利用、质量等方面均达到较高水平;
5、日常跟踪业界技术发展动态,并结合业务发展需求,研究引入合适的技术。
任职要求:
1、3年以上中等规模集群环境下的Hadoop/Impala/Hive/Spark集群相关运维经验;
2、对各种HDFS/Yarn/Hive/Impala/Spark/Hbase等相关参数调优, 性能优化等有实际经验;
3、有实际踩坑经历, 对于相关组件的版本跟进, 补丁跟踪, bug追踪等有相关经验;
4、熟悉Kerberos安全认证系统,实施过集群权限管理, 资源隔离方面的方案规划或二次开发工作;
5、实际处理过各种集群在线版本升级, 数据迁移, 集群扩容, 稳定性监控等工作;
6、了解计算机网络,熟悉linux,熟悉shell、perl或python等语言;
7、熟悉Oracle数据库技术,熟悉Data Stage等ETL工具优先;
8、熟悉中间件技术,如KafKa、weblogic、MQ等技术;
9、积极主动、学习能力强、沟通能力强、肯吃苦耐劳。
备注:1-2年内可接受北京,上海,深圳,广州等地出差
职能类别:数据库工程师(DBA)软件工程师
公司介绍
罗盘是一家至今已有17年历史,专注于数据领域服务的专业型公司。目前全国设有四个分公司,总部位于上海,其他分别位于:西安、武汉、深圳。公司员工规模超230人,其中95%为技术人员。客户群体超100家,含金融、企业、政府、运营商等,单个客户平均合作超过5年,核心客户合作超10年以上,稳定输出技术、人力服务。
公司在数据领域专业服务能力涵盖:
1、数据治理咨询、数据治理产品及数据治理实施服务;
2、数据分析挖掘及可视化展现;
3、数据仓库、模型、架构
4、基于微信、小程序的业务应用系统定制化开发服务;
公司在数据领域专业服务能力涵盖:
1、数据治理咨询、数据治理产品及数据治理实施服务;
2、数据分析挖掘及可视化展现;
3、数据仓库、模型、架构
4、基于微信、小程序的业务应用系统定制化开发服务;
联系方式
- 公司地址:德成国贸中心B座13楼1309