公司高薪诚聘网络爬虫工程师
聚诚仁和信息科技(北京)有限公司
- 公司规模:少于50人
- 公司性质:民营公司
- 公司行业:互联网/电子商务 金融/投资/证券
职位信息
- 发布日期:2017-03-30
- 工作地点:北京-朝阳区
- 招聘人数:若干人
- 工作经验:2年经验
- 职位月薪:1-1.5万/月
- 职位类别:软件工程师 技术支持/维护经理
职位描述
职位描述:
岗位职责:
1、参与爬虫系统的设计和开发,负责爬虫系统的框架设计,包括调度、抓取、入库、接口封装等内容,进行互联网相关信息的抓取和分析
2、设计各种算法,提升抓取效果
3、与技术团队进行沟通,负责爬虫数据和业务系统的整合对接
4、负责爬虫数据的策略开发,支持风险业务决策
任职要求:
1、具备2年以上爬虫或者解析相关的开发经验,至少参与过一个以上大型项目的数据抓取和系统设计工作
2、精通Java或Python语言,熟悉框架,熟悉HTML,熟悉基于正则表达式和XPath等信息抽取技术
3、掌握网络爬虫开发原理,对互联网各种类型数据交互模式数据,知道如何处理需登录网站、动态页面、封账号IP等各种情况下的数据采集方法
4、有分布式系统架构方便的工作经验
5、熟悉至少一种关系型数据库(如postgresql、mysql等)
6、熟悉代理ip、vpn等操作经验者优先
举报
分享
岗位职责:
1、参与爬虫系统的设计和开发,负责爬虫系统的框架设计,包括调度、抓取、入库、接口封装等内容,进行互联网相关信息的抓取和分析
2、设计各种算法,提升抓取效果
3、与技术团队进行沟通,负责爬虫数据和业务系统的整合对接
4、负责爬虫数据的策略开发,支持风险业务决策
任职要求:
1、具备2年以上爬虫或者解析相关的开发经验,至少参与过一个以上大型项目的数据抓取和系统设计工作
2、精通Java或Python语言,熟悉框架,熟悉HTML,熟悉基于正则表达式和XPath等信息抽取技术
3、掌握网络爬虫开发原理,对互联网各种类型数据交互模式数据,知道如何处理需登录网站、动态页面、封账号IP等各种情况下的数据采集方法
4、有分布式系统架构方便的工作经验
5、熟悉至少一种关系型数据库(如postgresql、mysql等)
6、熟悉代理ip、vpn等操作经验者优先
职能类别: 软件工程师 技术支持/维护经理
公司介绍
公司目前拥有一支使命感高度统一、经验丰富的专业精英团队,均来自京东、百度、搜狐、雅虎、网易等国际知名的IT公司,为客户和代理商提供高层次、专业化的强有力服务.
一直致力于为广大商家和消费者提供“安全、简单、快乐”的专业电子支付解决方案和服务.
通过已经非常成熟的通讯网、互联网、中国银联及银行系统,让人们远离银行排队的苦恼.
整合了各优质资源,包括产品和服务的高度安全性受业内专家和众多企业及消费者好评的移动POS平台.
一直致力于为广大商家和消费者提供“安全、简单、快乐”的专业电子支付解决方案和服务.
通过已经非常成熟的通讯网、互联网、中国银联及银行系统,让人们远离银行排队的苦恼.
整合了各优质资源,包括产品和服务的高度安全性受业内专家和众多企业及消费者好评的移动POS平台.
联系方式
- 公司地址:上班地址:建国路88号SOHO现代城C座1505