大数据运维工程师
上海北溟数据科技有限公司
- 公司规模:150-500人
- 公司性质:民营公司
- 公司行业:金融/投资/证券
职位信息
- 发布日期:2019-05-20
- 工作地点:上海
- 招聘人数:1人
- 工作经验:3-4年经验
- 学历要求:大专
- 职位月薪:1-1.5万/月
- 职位类别:技术支持/维护工程师
职位描述
工作地点:浦东张江中区人工智能岛浦东新区川和路55弄
面试地址:浦东东方路3539号东方尚博园
岗位职责:
1. 负责公司核心集群的运维工作, 任务调度、监控预警,持续完善大数据平台,保证稳定性、安全性;
2. 负责集群容量规划、扩容及集群性能优化;
3. 基于大数据应用需求,持续优化Hadoop框架及组件的配置,提升性能;
任职资格:
1.大专以上计算机,通信和网络相关专业;
2.3年以上中等规模集群环境下的Hadoop/Impala/Hive/Spark集群相关运维经验;
3.对各种HDFS/Yarn/Hive/Impala/Spark/Hbase等相关参数调优, 性能优化等有实际经验;
4.有实际踩坑经历, 对于相关组件的版本跟进, 补丁跟踪, bug追踪等有相关经验;
5.实际处理过各种集群在线版本升级, 数据迁移, 集群扩容, 稳定性监控等工作;
6.熟悉Kerberos安全认证系统,实施过集群权限管理, 资源隔离方面的方案规划或二次开发工作;
7.能维护Hadoop源码,有Hadoop 源代码BUG修复或者源代码优化经验者优先;
8.有Cloudera的CM使用经验尤佳。
工作地点:浦东张江中区人工智能岛浦东新区川和路55弄
面试地址:浦东东方路3539号东方尚博园
福利待遇:周末双休+五险一金+带薪年假+餐饮补贴+节日福利+年终奖金+年终分红+专业培训+晋升机会
职能类别: 技术支持/维护工程师
公司介绍
上海北溟数据科技有限公司是作为国内领先的大数据技术与服务提供商,整合了身份、消费、行为、偏好、轨迹等全方位信息,致力于为用户提供安全、高效、可靠的专业服务。经过不断努力,建立了完善的数据采集、数据合作、数据处理、模型构建、产品输出等的大数据全产业链,是国内具备综合大数据服务能力的领先企业。
北溟数据积极响应国家政策,推动大数据战略,互联网金融战略发展,旗下布局了专业从事大数据研究、信息核查、信息认证、信用评估等信用信息应用研发与服务的多家大数据业务企业,北溟数据及旗下企业所提供的相关大数据服务,目前已广泛应用于各行业风险管理、风险防范、个人信息保护、反欺诈、精准营销等相关领域。
经过多年发展,集团及旗下企业已与公安系统,银联系统,电信系统,工商系统,民航系统,海关系统等企事业单位建立了全面战略合作伙伴关系,整合了包含身份信息,工商企业信息,消费信息,通讯信息,航旅信息等认证服务,全力为各行业用户提供安全、高效、可靠的风控大数据服务。
北溟及旗下企业正在为全国近俩千家金融企业、事业及机构提供了多种大数据服务,为社会经济发展发挥了积极作用。支持构建诚信社会,我们正在不懈努力。
北溟数据积极响应国家政策,推动大数据战略,互联网金融战略发展,旗下布局了专业从事大数据研究、信息核查、信息认证、信用评估等信用信息应用研发与服务的多家大数据业务企业,北溟数据及旗下企业所提供的相关大数据服务,目前已广泛应用于各行业风险管理、风险防范、个人信息保护、反欺诈、精准营销等相关领域。
经过多年发展,集团及旗下企业已与公安系统,银联系统,电信系统,工商系统,民航系统,海关系统等企事业单位建立了全面战略合作伙伴关系,整合了包含身份信息,工商企业信息,消费信息,通讯信息,航旅信息等认证服务,全力为各行业用户提供安全、高效、可靠的风控大数据服务。
北溟及旗下企业正在为全国近俩千家金融企业、事业及机构提供了多种大数据服务,为社会经济发展发挥了积极作用。支持构建诚信社会,我们正在不懈努力。
联系方式
- 公司地址:地址:span浦东新区张江中区人工智能岛浦东新区川和路55弄