大数据平台运维工程师(Hadoop方向)
NTT DATA(中国)有限公司
- 公司规模:500-1000人
- 公司性质:外资(非欧美)
- 公司行业:计算机软件
职位信息
- 发布日期:2019-01-04
- 工作地点:上海-徐汇区
- 招聘人数:若干人
- 工作经验:3-4年经验
- 学历要求:本科
- 职位月薪:1.5-2万/月
- 职位类别:大数据开发/分析
职位描述
Responsibilities:
岗位职责:
1. Responsible for the construction, release and maintenance of the big data platform and related maintenance work;
负责大数据平台的搭建、发布部署及相关维护工作;
2. Responsible for system operation and maintenance and active prevention, build monitoring mechanism and timely discover cluster problems, and continuously improve system availability and stability;
负责系统的运维和主动预防,搭建监控机制以及及时发现集群问题,持续提升系统可用性与稳定性
3. Follow up and process system events, optimize system problems and fault resolution tracking, be responsible for service status and service quality reports, and continuously improve the quality of cluster services;
跟进并处理系统事件,对系统问题及故障解决跟踪优化,负责服务状况与服务质量报告,不断提升集群服务质量;
4. Streamlining and optimizing business processes and standardize the use of clusters, the clusters in terms of resource utilization and quality have reached a higher level;
梳理优化业务使用集群的流程和规范,使集群使用在资源利用、质量等方面均达到较高水
5. Daily tracking of industry technology development trends, and combined with business development needs, research and introduction of appropriate technology.
日常跟踪业界技术发展动态,并结合业务发展需求,研究引入合适的技术。
General Requirement for Big Data Operation enginner (Hadoop)
大数据平台运维工程师(Hadoop方向)基本需求
1. 1 or 3 years of experience in Hadoop/Impala/Hive/Spark cluster operation in a medium-sized cluster environment; 3年以上中等规模集群环境下的Hadoop/Impala/Hive/Spark集群相关运维经验;
2. A variety of HDFS / Yarn / Hive / Impala / Spark / Hbase related tuning parameters, etc., performance optimization practical experience; 对各种HDFS/Yarn/Hive/Impala/Spark/Hbase等相关参数调优, 性能优化等有实际经验;
3. There is actual experience of stepping pits, relevant experience for version follow-up of related components, patch tracking, bug tracking, etc.; 有实际踩坑经历, 对于相关组件的版本跟进, 补丁跟踪, bug追踪等有相关经验;
4. Familiar with the Kerberos security authentication system, implemented through clusters rights management, program planning or isolation secondary development of resources; 熟悉Kerberos安全认证系统,实施过集群权限管理, 资源隔离方面的方案规划或二次开发工作;
5. The actual processing of various cluster online version upgrades, data migration, cluster expansion, stability monitoring, etc.; 实际处理过各种集群在线版本升级, 数据迁移, 集群扩容, 稳定性监控等工作;
6. Understand the computer network, familiar with linux, familiar with the shell, perl or python language; 了解计算机网络,熟悉linux,熟悉shell、perl或python等语言;
7. Familiar with Oracle database technology, familiar with ETL tools such as Data Stage; 熟悉Oracle数据库技术,熟悉Data Stage等ETL工具优先;
8. Familiar with middleware technology, such as KafKa, weblogic, MQ and other technologies; 熟悉中间件技术,如KafKa、weblogic、MQ等技术;
9. Be proactive, have strong learning ability, strong communication skills, and willing to work hard. 积极主动、学习能力强、沟通能力强、肯吃苦耐劳。
职能类别: 大数据开发/分析
公司介绍
NTT DATA集团是日本的信息系统集成商,是世界500强日本NTT集团的核心企业,是提供IT服务并从事IT系统集成的专业公司。随着业务全球化进程的推进,NTT DATA集团在全球建立了200多家子公司及分支机构,拥有约7万6千名员工,规模和实力位于全球IT行业前10名。在银行、证券、保险等众多领域中都有卓越的业绩,销售额一直保持在日本国内八强之首,高达其余七强之和。
NTT DATA自成立以来,通过IT服务,特别是大型和关键的IT系统,为日本基础设施的建立和推进发挥了重要作用。在继续支持日本基础设施系统的同时,我们将以全球化的视野和规模,力求成为利用信息技术帮助客户实现变革的真正的全球合作伙伴。
注:对应聘人员提供的简历信息我公司仅用于人才招聘使用,不会提供给第三方,并对提供的信息进行妥善保护。
邮箱联系方式 louise.liu@nttdata.com
联系方式
- Email:louise.liu@nttdata.com
- 公司地址:北京市朝阳区广顺南大街8号院望京利星行中心3号楼G6层 (邮编:100102)