上海招聘

岗位职责：

1、从事Hadoop、Spark、Hbase、hive等分布式大数据产品的设计和开发；

2、针对部门大数据业务进行大数据分析、挖掘等产品应用的开发；

3、大数据平台各类数据业务抽象及模型化；

4、参与大数据管理平台的开发及维护；

5、负责大数据平台数据及相关的应用开发，调优及维护；

6、为项目相关开发人员提供大数据技术指导及解决大数据平台应用中遇到的技术难题；

7、良好的团队合作与沟通能力。

任职要求：

1、本科及以上学历，2年以上大数据应用开发经验；

2、具备Java、Python、Scala其中两种语言的开发经验；

3、了解泛Hadoop大数据生态圈，熟悉HDFS/Hive/Flink/Hbase/Spark/Kafka其中两种以上技术，并有实际的项目开发经验，有相关源码研究者优先；

4、具备ETL开发与运维能力，有Flume、kettle经验优先；

5、熟悉大数据平台的搭建过程，熟悉数据处理流程，有TB级以上数据处理经验优先，有实时数据处理经验者优先；

6、熟悉离线和实时数据处理流程，熟练使用Spark，Flink处理TB级数据优先；

7、熟悉Linux系统环境，有shell等脚本编写经验，熟悉Mysql、PostgreSql、Oracle等常用关系数据库，熟练编写SQL语句；

8、熟悉Yarn,Kubernetes,Azkaban等资源调度框架者优先；

9、熟悉Datax的二次开发，并有实际开发经验优先。

工作地点：浦东新区东方路3539号东方尚博创意产业园（地铁6、7号线高科西路站1号口）

福利待遇：周末双休+五险一金+带薪年假+餐饮补贴+全勤奖+节日福利+年终奖金+年终分红+专业培训+晋升机会

本公司是一家专业从事身份信息认证、信用评估、大数据分析等信用信息应用研发与服务的企业。目前广泛应用于各行业风险管理、风险防范、个人信息保护、防欺诈等相关领域。我们与全国公民身份证号码查询服务中心建立了多年稳定的合作关系，提供身份认证信息准确且迅速且并在金融小额贷款等行业方面有多年的身份验证经验和深厚积累。管理团队全部为从事IT技术服务行业多年的资深业内人士，具备深厚的行业从业背景，对风险模型管理、风控规则制定等企业核心问题有深刻认识及丰富的经验。公司立志于构建诚信社会，降低企业运维风险，全力为用户提供专业、高效、便捷的公民身份认证及相关增值服务。