00453-资深运维工程师-上海
云从科技
- 公司规模:1000-5000人
- 公司性质:民营公司
- 公司行业:计算机软件
职位信息
- 发布日期:2019-02-21
- 工作地点:上海-浦东新区
- 招聘人数:1人
- 工作经验:3-4年经验
- 学历要求:本科
- 职位月薪:1.5-3万/月
- 职位类别:软件工程师
职位描述
岗位职责:
1、负责平台的业务监控、持续交付、应急响应、容量规划、性能优化;
2、负责Cloudera Manage平台各大数据组件(例如:Hdfs、Yarn、Hbase、Hive、Hue、Impala、Spark、Sqoop、ZK等)安装调试与支持;
3、深入研究大数据相关运维技术,持续优化集群服务架构,探索新的Hadoop运维技术及发展方向;
4、负责Hadoop平台的用户管理、权限分配、资源分配。
任职资格:
1、熟悉Apache Hadoop、Spark、Kafka、HBase、Hive等大数据组件的安装部署、故障处理、性能调优,具有CDH等组件实际使用经验;
2、具有Cloudera Manage平台搭建维护经验;熟悉linux,有cloudera使用经验优先;
3、具备一定的开发能力,熟练掌握Python脚本开发;
4、有一定的hql/sql性能调优工作;
5、熟悉Airflow工作流组件优先。
6、熟悉包括不限于Yarn、Kafka、Hadoop、Hive、Hbase、Spark等大数据生态的平台搭建,监控和调优;
1、负责平台的业务监控、持续交付、应急响应、容量规划、性能优化;
2、负责Cloudera Manage平台各大数据组件(例如:Hdfs、Yarn、Hbase、Hive、Hue、Impala、Spark、Sqoop、ZK等)安装调试与支持;
3、深入研究大数据相关运维技术,持续优化集群服务架构,探索新的Hadoop运维技术及发展方向;
4、负责Hadoop平台的用户管理、权限分配、资源分配。
任职资格:
1、熟悉Apache Hadoop、Spark、Kafka、HBase、Hive等大数据组件的安装部署、故障处理、性能调优,具有CDH等组件实际使用经验;
2、具有Cloudera Manage平台搭建维护经验;熟悉linux,有cloudera使用经验优先;
3、具备一定的开发能力,熟练掌握Python脚本开发;
4、有一定的hql/sql性能调优工作;
5、熟悉Airflow工作流组件优先。
6、熟悉包括不限于Yarn、Kafka、Hadoop、Hive、Hbase、Spark等大数据生态的平台搭建,监控和调优;
职能类别: 软件工程师
公司介绍
云从科技孵化自中科院重庆研究院,公司受托参与了人工智能国标、行标制定,并同时承担国家发改委人工智能基础平台、应用平台,工信部芯片平台等国家重大项目建设任务的人工智能科技企业。
同时,云从科技吸引并拥有全球的优秀人才,核心技术先后10次斩获国际智能感知领域桂冠及158次行业POC冠军、胜率达到78.4%;
运用先进的三级研发架构,云从科技取得3项重大技术突破——国内“3D结构光人脸识别技术”,打破技术垄断;商用跨镜追踪(ReID)技术,纪录保持至今;人体3D重建技术加快算法速度20倍,并将准确率大幅提升30%。
云从科技业务涵盖金融、安防、民航、零售等领域,通过行业领先的人工智能、认知计算与大数据技术形成的整合解决方案,已服务400家银行8.8万网点、31个省级行政区公安、60余家机场,实现银行日均比对2.16亿次、公安战果超3万起、机场日均服务旅客200万人次。
同时,云从科技吸引并拥有全球的优秀人才,核心技术先后10次斩获国际智能感知领域桂冠及158次行业POC冠军、胜率达到78.4%;
运用先进的三级研发架构,云从科技取得3项重大技术突破——国内“3D结构光人脸识别技术”,打破技术垄断;商用跨镜追踪(ReID)技术,纪录保持至今;人体3D重建技术加快算法速度20倍,并将准确率大幅提升30%。
云从科技业务涵盖金融、安防、民航、零售等领域,通过行业领先的人工智能、认知计算与大数据技术形成的整合解决方案,已服务400家银行8.8万网点、31个省级行政区公安、60余家机场,实现银行日均比对2.16亿次、公安战果超3万起、机场日均服务旅客200万人次。
联系方式
- 公司地址:地址:span重庆市渝北区卉竹路2号互联网产业园2期11栋