爬虫开发工程师
上海人科数据科技有限公司
- 公司规模：50-150人
- 公司性质：民营公司
- 公司行业：互联网/电子商务
职位信息
- 发布日期：2020-10-19
- 工作地点：上海-长宁区
- 招聘人数：1人
- 工作经验：3-4年经验
- 学历要求：本科
- 职位月薪：1.3-1.7万/月
- 职位类别：爬虫开发工程师 Java开发工程师
职位描述
岗位职责：
1. 负责爬虫系统架构和数据存储设计， 建立完整的数据获取、解析、入库和监控流程，并不断优化迭代完善；
2、对多平台数据源（WEB/APP/H5/小程序等）进行数据采集及分析；
3、撰写并规范各类系统设计文档；4、设计数据采集策略，提升数据采集效率及质量；5、理解系统数据处理流程以及根据业务功能需求完成数据开发工作。
岗位要求：
1、本科或以上学历，计算机软件或相关专业；
2、熟练使用java或python语言开发，3-5年开发经验(至少3年爬虫经验)；
3、熟练掌握网页抓取原理及技术，熟悉网站登录原理，熟悉基于正则表达式、XPath、CSS等网页信息;
4、 熟悉常见爬虫框架，有解决复杂的反爬限制实践经验， 能解决如图片验证码/滑块/账号限制/ip限制/访问频繁限制等问题；
5、有互联网、电商平台、移动端数据、政府网站爬取技术经验者优先。
公司介绍
人科数据科技（以下简称人科）成立于2013年，是一家以云计算技术为基础、致力于协助企业建立电子数据保全体系的科技公司。人科以云计算技术为基础、自主开发和运营实时保公众数据云服务平台，并与全国各地公证处建立合作伙伴关系，提供相关咨询和培训服务，以协助企业进行日常证据保全，从而建立全面电子数据保全体系。旗下拥有多个全资子品牌和子公司，分别为知识产权和品牌保护、涉外法律服务、企业通讯基础证据服务、政府行政执法等垂直法律服务场景提供解决方案。************************/ 实时保证据保全/数字内容版权保护平台：***********
联系方式
- 公司地址：地址：span杭州东方公证处