上海招聘

职位描述：
岗位职责
1.负责大数据存储，计算，传输，调度，分析等平台的架构设计；
2. 为数据开发和业务部门提供可靠的大数据基础架构和平台；
3.. 带头进行核心技术的攻关，指导工程师解决开发中的技术难题；
4. 确定大数据架构的整体技术路线和架构走向，新技术的调研和落地。
任职要求
1.计算机专业基础牢固，熟练掌握服务端开发技巧和软件工程设计方法，5年以上大数据相关研发和架构经验；
2.掌握分布式系统原理，对存储、计算、消息队列、集群管理有深刻的理解和实战经验；
3. 精通大数据计算生态体系，对HadoopSpark等批量计算框架和StormFlink等流式计算框架有丰富的使用和开发经验；
4. 熟悉日志采集传输、消息队列相关技术，对Kafka、Flume、Fluentd等开源组件有深入研究；
5.对于Mysql, HBase，Cassandra，ElasticSearch，Redis等各种数据库有深入的理解和使用经验；
6. 有Druid，Kylin等OLAP系统者优先
7.具有以上开源组件二次开发经验优先；
8.有PB级以上的大数据处理实战经验，对于大数据业务有深刻的理解，熟悉大数据处理的各个环节，能进行合理的规划和设计。

微信分享