上海招聘

岗位职责

1、负责公司商业大数据爬虫系统的架构、设计、研发与管理维护；

2、负责网络数据抓取规划、清洗以及汇总的开发工作；

3、负责定期爬取指定网站的数据，为业务部门提供数据支持；

4、负责挖掘算法优化，数据分类及分布统计，为其他部门提供特定需求的数据。

任职要求：

1、2年以上相关工作经验，计算机相关专业本科及以上学历；

2、精通java或者python，熟悉一种以上主流的爬虫工具，如webmagic，nutch等；

3、具有丰富的爬虫经验，能够解决反爬虫、网络异常等各种常见爬虫问题；

4、熟悉网络编程(TCP/HTTP 协议)，多线程、多进程相关知识，有大型分布式爬虫架构、数据挖掘等实践经验者优先。

工作地点：浦东新区东方路3539号东方尚博创意产业园（地铁6、7号线高科西路站1号口）

福利待遇：周末双休+五险一金+带薪年假+餐饮补贴+全勤奖+节日福利+年终奖金+年终分红+专业培训+晋升机会

上海北溟数据科技有限公司是作为国内领先的大数据技术与服务提供商，整合了身份、消费、行为、偏好、轨迹等全方位信息，致力于为用户提供安全、高效、可靠的专业服务。经过不断努力，建立了完善的数据采集、数据合作、数据处理、模型构建、产品输出等的大数据全产业链，是国内具备综合大数据服务能力的领先企业。

北溟数据积极响应国家政策，推动大数据战略，互联网金融战略发展，旗下布局了专业从事大数据研究、信息核查、信息认证、信用评估等信用信息应用研发与服务的多家大数据业务企业，北溟数据及旗下企业所提供的相关大数据服务，目前已广泛应用于各行业风险管理、风险防范、个人信息保护、反欺诈、精准营销等相关领域。

经过多年发展，集团及旗下企业已与公安系统，银联系统，电信系统，工商系统，民航系统，海关系统等企事业单位建立了全面战略合作伙伴关系，整合了包含身份信息，工商企业信息，消费信息，通讯信息，航旅信息等认证服务，全力为各行业用户提供安全、高效、可靠的风控大数据服务。

北溟及旗下企业正在为全国近俩千家金融企业、事业及机构提供了多种大数据服务,为社会经济发展发挥了积极作用。支持构建诚信社会，我们正在不懈努力。