上海招聘

工作职责

1. 参与大数据平台与外围数据源之间的接口开发（离线及实时数据注入）；

2. 参与数据仓库ETL开发、流程优化及性能改进；

3. 参与数据仓库模型构建、多维统计分析及BI展现；

4. 参与公司大数据相关产品的持续优化、改进等迭代开发。

职位要求

1. 3年以上大数据项目开发经验，本科或以上学历；

2. 熟练掌握Java，Scala（或Python）编程语言；

3. 熟悉Hadoop生态（Flume、Kafka、Spark、Hive、Kylin等）相关组件的架构及原理；

4. 熟练掌握Spark（Core、SQL/DataFrame、Spark Streaming）或Map/Reduce编程；

5. 熟悉Hadoop存储、压缩、作业调度等相关原理及应用。

微信分享