大数据技术经理
世纪怡嘉软件科技有限公司
- 公司规模:50-150人
- 公司性质:民营公司
- 公司行业:计算机服务(系统、数据服务、维修)
职位信息
- 发布日期:2019-06-13
- 工作地点:上海-浦东新区
- 招聘人数:1人
- 工作经验:无工作经验
- 学历要求:本科
- 职位月薪:2-2.5万/月
- 职位类别:高级软件工程师 技术总监/经理
职位描述
主要职责
1、负责Cloudera Hadoop平台的安装,配置和管理。帮助维护Hadoop基础架构和操作。与基础架构团队合作设置新的Hadoop集群。
2、支持Cloudera CDH等大数据系统环境。
3、设置Kerberos主体并执行测试。负责管理Key Trustee服务器。
4、负责通过移动设备启用BI工具仪表板。
5、管理与Active Directory的集成,并为用户和组管理提供支持。
6、与数据工程师合作设置数据访问安全组。与交付团队合作,将用户配置到Hadoop中。
7、自动化监控和服务器作业流程。
8、使用TLS / SSL在静止和运动时启用数据加密,以满足安全标准。
9、根据安全策略,为RBAC启用Sentry(基于角色的访问控制),以便对HDFS中的数据进行权限级别访问。
10、使用Cloudera Manager Enterprise等工具执行集群维护以及节点的创建和删除。监控Hadoop集群连接和安全性。对Hadoop集群和Hadoop MapReduce例程进行性能调整。
任职要求
1、拥有5年以上IT经验,本科及以上学历,计算机等相关专业优先
2、3年以上Cloudera Hadoop管理经验和2年BI工具管理与Tableau管理或任何BI工具管理
3、熟悉Hadoop架构(HDFS),Hadoop集群安装,配置,监控,集群安全性,集群资源管理,维护和性能调优。
4、Cloudera Hadoop组件的专家级知识,如HDFS,Sentry,Kafka,Impala,Hue,Spark,Hive,YARN,ZooKeeper和Postgres
5、熟悉关键脚本和编程语言,如Python,Scala和Bash。
6、对Hadoop Stack的深刻理解和体验,包括HDFS,Hive,HBase,Yarn,Flume,Scoop,Oozie,Impala,Spark。
7、了解关系数据库,行业惯例,技术,标准和敏感的数据处理。
8、精通系统升级,补丁,维护合规性和支持审核。
9、熟悉完全集成的AD / Kerberos身份验证
公司介绍
公司自成立以来始终本着“诚信、责任、创新、和谐”的宗旨,依托“客户至上”的经营理念,以专业的技术、优质的资源和高品质的服务致力于成为业界领先的金融科技企业、IT综合服务提供商;凭借高效的交付能力为客户成功保驾护航、为客户创造***价值并实现双赢。世纪怡嘉凭借自身专业在以往的服务中已经在金融行业中得到了广大客户的信任与认可,赢得了良好的商业信誉,并在行业中树立了优秀的口碑。
通过全公司成员不断潜心努力、充实完善,公司一直处于高速发展的阶段,并先后获得了一下业界领先的质量与安全认证包括:
ISO9001、ISO20000、ISO27001、CMMlevel3、
信息系统集成及服务3级资质、
高新技术企业认定证书、
软件产品登记证书、
软件企业认定证书、
世纪怡嘉的合作伙伴包括IBM、华为、微软、ORACLE、EMC、AVAYA、艾默生、兆维等国内外多家知名企业均与达成了战略合作,借助各自的优势,高效稳定地为客户提供***IT服务。
联系方式
- 公司地址:地址:span烟草兴业大厦