网络爬虫工程师(python)
北京云智汇科技有限公司
- 公司规模:50-150人
- 公司性质:民营公司
- 公司行业:互联网/电子商务
职位信息
- 发布日期:2017-11-24
- 工作地点:北京-海淀区
- 工作经验:1年经验
- 学历要求:本科
- 职位月薪:1.5-2万/月
- 职位类别:高级软件工程师
职位描述
职位描述:
1.负责设计和开发分布式网络爬虫系统,进行多平台信息的抓取和分析工作;
2.负责网页信息和APP数据抽取、清洗、消重等工作,提升平台的抓取效率;
3.参与爬虫核心算法和策略优化,熟悉采集系统的调度策略;
4.实时监控爬虫的进度和警报反馈;
任职要求:
1.熟悉Linux系统,掌握Python等语言;
2.掌握网页抓取原理及技术,了解基于Cookie的登录原理,熟悉基于正则表达式、XPath、CSS等网页信息抽取技术;
3.熟悉整个爬虫的设计及实现流程,有从事网络爬虫、网页信息抽取开发经验,熟悉反爬虫技术,有分布式爬虫架构经验;
1.负责设计和开发分布式网络爬虫系统,进行多平台信息的抓取和分析工作;
2.负责网页信息和APP数据抽取、清洗、消重等工作,提升平台的抓取效率;
3.参与爬虫核心算法和策略优化,熟悉采集系统的调度策略;
4.实时监控爬虫的进度和警报反馈;
任职要求:
1.熟悉Linux系统,掌握Python等语言;
2.掌握网页抓取原理及技术,了解基于Cookie的登录原理,熟悉基于正则表达式、XPath、CSS等网页信息抽取技术;
3.熟悉整个爬虫的设计及实现流程,有从事网络爬虫、网页信息抽取开发经验,熟悉反爬虫技术,有分布式爬虫架构经验;
职能类别: 高级软件工程师
公司介绍
北京云智汇科技有限公司位于北京海淀区上地信息产业基地,是一家专注于教育管理软件领域,集产品研发、推广、服务为一体的高科技公司。
作为教育信息化与移动互联网的崛起者,创新型技术服务提供商,云智汇立足企业,服务社会。公司主营业务涵盖教育信息化与移动互联网服务两大领域,具备端到端“软件+服务”综合业务能力和强大的纵深服务优势。
在教育信息化领域,业务范围包括兴趣培训、K12教育、运营服务以及业务咨询等多个方向;在移动互联网领域,提供IT外包、运营服务、咨询服务等多项服务,在教育、电商、人力资源等重要行业具有深厚积累和丰富经验。
云智汇充分把握时代的机遇与挑战,借助云计算、移动互联、大数据等新兴技术手段,助力我们客户转型和产业升级;未来,云智汇将不懈努力,以创新思维和领先技术,为客户创造可持续的价值。
作为教育信息化与移动互联网的崛起者,创新型技术服务提供商,云智汇立足企业,服务社会。公司主营业务涵盖教育信息化与移动互联网服务两大领域,具备端到端“软件+服务”综合业务能力和强大的纵深服务优势。
在教育信息化领域,业务范围包括兴趣培训、K12教育、运营服务以及业务咨询等多个方向;在移动互联网领域,提供IT外包、运营服务、咨询服务等多项服务,在教育、电商、人力资源等重要行业具有深厚积累和丰富经验。
云智汇充分把握时代的机遇与挑战,借助云计算、移动互联、大数据等新兴技术手段,助力我们客户转型和产业升级;未来,云智汇将不懈努力,以创新思维和领先技术,为客户创造可持续的价值。
联系方式
- 公司地址:地址:span四维图新大厦