北京 [切换城市] 北京招聘

爬虫工程师

北京维恩咨询有限公司

  • 公司规模:少于50人
  • 公司性质:民营公司
  • 公司行业:专业服务(咨询、人力资源、财会)

职位信息

  • 发布日期:2018-03-22
  • 工作地点:北京-通州区
  • 工作经验:1年经验
  • 学历要求:本科
  • 职位月薪:1-2.5万/月
  • 职位类别:大数据开发/分析  

职位描述

职位描述:
1、互联网站、网页、链接的特征挖掘,对指定的多个网站的网页进行网页抓取、数据提取、清洗、入库;
2
、对搜索、匹配、同步等后台守护程序进行性能优化等;
3
、负责系统日常运营资源调度优化及运营指标分析调优,并能实时监控爬虫的进度和警报反馈;
4
、负责特殊网页采集任务的分析及采集方案设计。

任职要求:
1、本科以上学历,1年以上软件开发经验;
2
、精通正则表达式语法,从结构化的和非结构化的数据中获取信息;
3
、精通HTTP/HTTPS Post/Get请求原理;
4
、精通Python的urllib包;
5
、精通SQL,能熟练使用SQL Server数据库;
6
、有网络爬虫或分布式采集开发经验者优先。


职能类别: 大数据开发/分析

公司介绍

北京维恩咨询有限公司是一家从事于网络零售市场研究,将大数据引入到市场调研行业。维恩咨询旗下共拥有7款数据产品,丰富的产品线提供全面的网络零售解决方案,监测网络零售的产品、价格、渠道和促销,深入研究网络零售的消费者和零售商。

联系方式

  • 公司地址:地址:span翠景北里21号金成中心1206