高级爬虫工程师
深圳市佰仟金融服务有限公司
- 公司规模:5000-10000人
- 公司性质:民营公司
- 公司行业:金融/投资/证券
职位信息
- 发布日期:2016-10-11
- 工作地点:深圳-福田区
- 招聘人数:1人
- 工作经验:3-4年经验
- 学历要求:大专
- 职位月薪:10000-20000/月
- 职位类别:软件工程师
职位描述
职位描述:
岗位要求:
1. 3年以上Python、java网络爬虫开发经验,熟悉is,PHP、nutch等编程语言;
2.负责公司有关网络抓取方面的工作,处理网络数据抓取规划、汇总,具备搭建数据采集平台,建立爬虫系统,对数据的抓取、解析、调度、存储、维护等开发工作;
3.爬虫核心算法和策略优化,熟悉采集系统的调度策略,分析爬虫系统瓶颈设计实现相应策略和算法,提升爬虫的抓取效率和质量。
任职要求:
1.熟悉httpclient、htmlparser、lucene、slor等相关技术;Lucene/Nutch/等开源工具;熟悉lucence 和 scrapy 等开源框架;
2.精通抓包工具至少一种,熟悉使用正则表达式;精通网络通信编程,网页抓取原理及技术,熟悉HTTP传输协议,能模拟各类操作爬虫;
3.熟悉Windows和linux系统,基本网络设备的简单配置和管理及计算机硬件、操作系统维护;
4.具有较强的分析和解决问题能力,以解决技术难题为乐趣,有想法,敢于挑战;
5.熟悉MySQL、Oracle及有集群数据库开发经验者优先。
举报
分享
岗位要求:
1. 3年以上Python、java网络爬虫开发经验,熟悉is,PHP、nutch等编程语言;
2.负责公司有关网络抓取方面的工作,处理网络数据抓取规划、汇总,具备搭建数据采集平台,建立爬虫系统,对数据的抓取、解析、调度、存储、维护等开发工作;
3.爬虫核心算法和策略优化,熟悉采集系统的调度策略,分析爬虫系统瓶颈设计实现相应策略和算法,提升爬虫的抓取效率和质量。
任职要求:
1.熟悉httpclient、htmlparser、lucene、slor等相关技术;Lucene/Nutch/等开源工具;熟悉lucence 和 scrapy 等开源框架;
2.精通抓包工具至少一种,熟悉使用正则表达式;精通网络通信编程,网页抓取原理及技术,熟悉HTTP传输协议,能模拟各类操作爬虫;
3.熟悉Windows和linux系统,基本网络设备的简单配置和管理及计算机硬件、操作系统维护;
4.具有较强的分析和解决问题能力,以解决技术难题为乐趣,有想法,敢于挑战;
5.熟悉MySQL、Oracle及有集群数据库开发经验者优先。
职能类别: 软件工程师
公司介绍
深圳市佰仟金融服务有限公司成立于2013年12月,秉承“金融科技助飞平凡梦想”的企业使命,凭借一流的金融科技和金融服务水平,公司始终致力于为广大用户提供优质的消费分期服务。发展四年来,佰仟金融累计为近2000万用户提供了手机、电脑、家电、电动车、摩托车、汽车、医美、时尚消费品等分期服务。
依托强大的金融科技实力、多场景运营能力和日益完善的风控水平,佰仟金融将继续服务消费升级、满足用户美好生活需要,助力信用中国建设。
我们将为员工打造一个平等发展、快乐工作、实现梦想的平台,如果你充满激情,如果你勇于接受挑战,如果你渴望改变世界,那么请加入我们!
薪酬福利:我们提供富有市场竞争力的薪酬标准和激励方案,同时给予员工多种福利政策
假期:享受国家规定的法定假期
保险:享受五险一金、商业保险
专项福利:结婚礼金、生育礼金、慰问礼金
其他福利:年度体检、过节费、团队建设费
培训:提供专业及管理双通道的培训体系和学习机会
依托强大的金融科技实力、多场景运营能力和日益完善的风控水平,佰仟金融将继续服务消费升级、满足用户美好生活需要,助力信用中国建设。
我们将为员工打造一个平等发展、快乐工作、实现梦想的平台,如果你充满激情,如果你勇于接受挑战,如果你渴望改变世界,那么请加入我们!
薪酬福利:我们提供富有市场竞争力的薪酬标准和激励方案,同时给予员工多种福利政策
假期:享受国家规定的法定假期
保险:享受五险一金、商业保险
专项福利:结婚礼金、生育礼金、慰问礼金
其他福利:年度体检、过节费、团队建设费
培训:提供专业及管理双通道的培训体系和学习机会
联系方式
- Email:feng.zhou@bqjr.cn
- 公司地址:地址:span深圳湾科技生态园12栋B座 27楼