数据平台架构师(产互子公司)
中国联合网络通信有限公司上海市分公司
- 公司规模:1000-5000人
- 公司性质:国企
- 公司行业:通信/电信运营、增值服务
职位信息
- 发布日期:2020-10-19
- 工作地点:上海-长宁区
- 招聘人数:1人
- 工作经验:3-4年经验
- 学历要求:本科
- 职位月薪:40-60万/年
- 职位类别:系统架构设计师
职位描述
岗位职责:
1、带领团队构建基于大数据的数据平台产品开发。
2、熟悉各种架构的数据库和开源技术框架,包含但不限于Oracle、MySQL、SQL Server等主流数据库以及hadoop、storm、spark、kafka、flinc、ES等开源数据系统架构设计,。
3、熟悉数据治理相关的数据质量控制、数据生命周期管理以及数据血缘回溯的相关系统架构和开发。
4、熟悉各种基于大数据平台的数据仓库搭建架构,能够带领团队基于自主研发的数据平台完成数据仓库的建设。
岗位要求:
1. 理工类相关专业,熟悉大数据技术栈:HDFS、YARN、Hive、Spark、Presto,kafka、Flink、ES、Cassandra、HBase
2. 熟悉大数据平台的数据治理组件:元数据管理,跨集群数据管理,数据生命周期管理,数据质量管理,离线任务调度平台,实时任务管理平台,资源监控报警,实时数据流管理等
3. 技术视野的广度。熟悉开源和工业界的发展方向,业界成功案例,合理的技术选型,制定评估测试方案,开发 POC。
4. 熟悉大规模数据处理需求下,保持核心组件的性能与稳定性。
5. 具备扎实的编程能力,能管理复杂项目的实施,也能独立承担核心组件的开发交付
6. 有千台集群的运维,和系统平台开发经验, 熟悉云端部署,和 IDC 部署环境。
职能类别:系统架构设计师
公司介绍
上海联通作为中国联通在上海的重要分支机构,经过多年的快速发展和战略布局,业务转型已经迈出坚实步伐,逐步实现从传统运营商向智慧应用、物联网、ICT等创新业务提供商转变;混合所有制改革取得历史性突破,深入落实聚焦、创新、合作战略,坚持新发展理念,培育强健互联网新基因,探索完善公司混改新治理,全力加快互联网化新运营,着力增强创新发展新动能,积极构建外联内通新生态,砥砺奋进开创新时代、新局面。
联系方式
- 公司地址:地址:span长宁路1033号联通大厦