上海招聘

岗位职责:
1、公司集团大数据平台的建设：数据平台规划、架构设计、组件封装以及疑难技术问题解决
2、负责大数据平台相关工具的选型、设计与开发;
3、根据业务需求，代领团队进行Hadoop、Hbase、Spark等核心平台组件的优化;
4、参与AI相关产品落地过程中的数据接入、存储、分析查询等支撑方案
5、对平台特殊场景化的数据应用制定相关实践方案。

任职资格:
1、统招本科以上学历，计算机等相关专业，8年以上工作经验，5年以上大数据工作经验;
2、精通Java\Scala\Python其中至少两种开发语言；
3、具有大规模集群管理经验、海量(PB)数据处理经验;
4、精通MR/spark/Hive等分布式计算框架的原理机制;
5、精通HDFS/Redis/Kafka/HBase等分布式存储系统机制;
6、有kudu/impala等使用经验者优先；
7、主动性强，具有良好的沟通、协调和组织能力，富有团队精神，有较强的文档编写能力；

加分项：
1、 有过视频图像等非结构化数据接入和存储经验
2、 有过ML/AI pipeline 建设经验

微信分享