上海招聘

1、 从事Hadoop、Spark、Hbase、hive等分布式大数据平台产品的设计和开发；

2、 针对部门大数据业务进行大数据分析、挖掘等产品应用的开发；

3、 大数据平台各类数据业务抽象及模型化；

4、 参与大数据管理平台的开发及维护；

5、 负责大数据平台数据实时计算算法和流处理；

6、 负责大数据平台数据及相关的应用开发，调优及维护；

7、 为项目相关开发人员提供大数据技术指导及解决大数据平台应用中遇到的技术难题。

任职要求：

1、3年以上大数据应用开发经验，本科及以上学历；

2、掌握Java开发，有Spark、Python语言开发经验优先；

3、有以下大数据平台子系统开发经验优先（元数据管理平台、取数即席查询平台、OLAP平台、实时计算）

4、熟悉Hadoop大数据生态圈技术，对分布式存储Hdfs,Hive,Hbase等 资源调度Yarn,Kubernetes,Azkaban等，计算框架 Spark,Prosto,Hive,Impala等 有相关源码研究优先。

5、熟悉并掌握离线和实时数据处理流程，熟练使用Spark，Flink处理TB级数据优先。

6、熟悉Linux环境，熟悉Mysql、Postgre、MongoDB等常用关系数据库，熟练编写SQL语句；

7、熟悉Datax的二次开发，并有实际开发经验优先。

工作地点：浦东新区东方路3539号东方尚博创意产业园（地铁6、7号线高科西路站1号口）

福利待遇：周末双休+五险一金+带薪年假+餐饮补贴+全勤奖+节日福利+年终奖金+年终分红+专业培训+晋升机会

上海北溟数据科技有限公司是作为国内领先的大数据技术与服务提供商，整合了身份、消费、行为、偏好、轨迹等全方位信息，致力于为用户提供安全、高效、可靠的专业服务。经过不断努力，建立了完善的数据采集、数据合作、数据处理、模型构建、产品输出等的大数据全产业链，是国内具备综合大数据服务能力的领先企业。

北溟数据积极响应国家政策，推动大数据战略，互联网金融战略发展，旗下布局了专业从事大数据研究、信息核查、信息认证、信用评估等信用信息应用研发与服务的多家大数据业务企业，北溟数据及旗下企业所提供的相关大数据服务，目前已广泛应用于各行业风险管理、风险防范、个人信息保护、反欺诈、精准营销等相关领域。

经过多年发展，集团及旗下企业已与公安系统，银联系统，电信系统，工商系统，民航系统，海关系统等企事业单位建立了全面战略合作伙伴关系，整合了包含身份信息，工商企业信息，消费信息，通讯信息，航旅信息等认证服务，全力为各行业用户提供安全、高效、可靠的风控大数据服务。

北溟及旗下企业正在为全国近俩千家金融企业、事业及机构提供了多种大数据服务,为社会经济发展发挥了积极作用。支持构建诚信社会，我们正在不懈努力。