北京招聘

职位描述：
岗位职责：

1、互联网站、网页、链接的特征挖掘，对指定的多个网站的网页进行网页抓取、数据提取、清洗、入库；

2、对搜索、匹配、同步等后台守护程序进行性能优化等；

3、负责系统日常运营资源调度优化及运营指标分析调优，并能实时监控爬虫的进度和警报反馈；

4、负责特殊网页采集任务的分析及采集方案设计。

任职要求：

1、本科以上学历，2年以上软件开发经验；

2、精通正则表达式语法，从结构化的和非结构化的数据中获取信息；

3、精通HTTP/HTTPS Post/Get请求原理；

4、精通Python的urllib包；

5、精通SQL，能熟练使用SQL Server数据库；

6、有网络爬虫或分布式采集开发经验者优先。 举报 分享

北京维恩咨询有限公司是一家从事于网络零售市场研究，将大数据引入到市场调研行业。维恩咨询旗下共拥有7款数据产品，丰富的产品线提供全面的网络零售解决方案，监测网络零售的产品、价格、渠道和促销，深入研究网络零售的消费者和零售商。