上海招聘

职位描述：
岗位描述
1、参与平台的整体数据架构设计，完成从业务模型到数据模型的设计工作 ；
2、对数据挖掘及业务开发团队提供技术支持，协助方案规划；
3、负责技术攻关和创新技术引用，开发具有数据分析、数据挖掘能力的创新型产品；
4、负责公司的大数据平台的研发工作（包扩日志采集，离线计算，数据仓库存储和处理等）；
5、负责提升基于Hbase、kudu数据存储集群的高可用性、高性能、高扩展特性；
6、负责设计和建立基于Storm或Spark或flink的实时数据处理框架；
7、研究Hadoop/Spark/Hbase/Hive/flink等开源项目，对线上任务进行调优，并开发通用组件；
8、维持线上服务高效稳定，支撑业务和数据量的快速扩张。

岗位要求
1、扎实的Java、Scala语言基础，对JVM运行机制有深入了解；
2、熟悉Hadoop、Spark并有丰富的开发经验；
3、熟练使用java语言，并掌握spring、mybatis等开源J2EE框架。使用java、scala、python等开发语言中的一种，有python和scala实际使用经验更佳；
4、有hadoop和spark实际开发经验。了解大数据组件的使用限制和应用场景，如hdfs,yarn,hbase,hive,flume,kafka,zk,impala,kylin,kudu,ES,Storm、MongoDB等。读过spark源码更佳；
5、熟悉mysql、ElasticSearch、Redis等关系型或NoSQL数据库，了解应用场景和使用限制。有实际调优经验者更佳。
6、熟悉linux常用命令，有实际CDH或HDP或apache版本的hadoop部署经验者优先；
7、熟悉并行计算或者分布式计算，熟悉Spark框架,熟练掌握RDD，SQL, Streaming, MLLIB，SparkR编程；
8、英文文档阅读无障碍、熟练掌握常用设计模式、熟练使用maven、git；
9、有深入研究过Hadoop/Spark源码者优先；
10、深入理解MapReduce工作原理，HDFS分布式文件系统架构；熟练掌握Hadoop/Hive/HBASE的运维和调优方法；
11、掌握或使用过Storm、Spark、flume、kafka等工具；
12、1年以上大数据相关工作经验，最好参与并成功部署过1个日均TB级的集群项目。 举报 分享

    上海挚极信息科技有限公司由环球车享汽车租赁有限公司、与上海宝信软件股份有限公司共同投资成立的车联网信息服务解决方案专业化IT公司。公司总部位于上海市嘉定区安亭镇墨玉南路888号（上海国际汽车城大厦）16F。
    公司成员主要由国际汽车城分时租赁的行业专家和技术专家，以及宝信软件原车联网业务团队技术骨干组成，在新能源汽车行业有较高的知名度。挚极是中国***的新能源汽车分时租赁品牌“EVCARD”的整体技术解决方案提供商。并承担了上海市新能源汽车地标平台的建设、维护，并为诸多车企量身定做新能源汽车监控平台。
    凭借10多年的经验和技术积累，公司正致力于车联网、智能车载终端、智能地锁、智能充电桩等关键技术研发与应用，提供SaaS、BOO等IT行业新兴服务模式，持续为用户提供增值服务，与用户共同成长。