Python爬虫开发工程师
万得信息技术股份有限公司
- 公司性质:民营公司
- 公司行业:计算机软件
职位信息
- 发布日期:2024-03-21
- 工作地点:苏州
- 工作经验:2年及以上
- 学历要求:本科
- 职位月薪:1.2-1.7万·14薪
- 职位类别:Python爬虫开发工程师
职位描述
岗位职责:
1、负责多平台信息爬取,负责破解各类反爬机制;
2、负责APP的数据抓取和爬取链路优化(包括APP反编译、逆向分析、脱壳、加密参数破解、抓取攻防等),提升抓取能力;
3、研究爬虫策略和防屏蔽规则,解决封账号、封IP、验证码、页面跳转等难点,提升网页抓取的效率和质量;
岗位要求:
1、2年以上python爬虫经验,本科以上学历,计算机相关专业;
2、熟悉掌握至少一种开源爬虫框架(scrapy、appium、selenium);
3、精通动态网页抓取、浏览器模拟抓取、APP抓取等技术,熟悉使用fiddler或其他抓包工具;
4、具有js逆向,app逆向相关经验。熟悉js hook原理,熟悉各种反爬常见手段,并能够通过多种应对策略(如代理池、模拟登录、验证码处理、浏览器渲染等)来保证数据的持续交付;
5、具有团队合作精神,有责任感,对工作认真负责,具有较强的学习能力和抗压能力。
1、负责多平台信息爬取,负责破解各类反爬机制;
2、负责APP的数据抓取和爬取链路优化(包括APP反编译、逆向分析、脱壳、加密参数破解、抓取攻防等),提升抓取能力;
3、研究爬虫策略和防屏蔽规则,解决封账号、封IP、验证码、页面跳转等难点,提升网页抓取的效率和质量;
岗位要求:
1、2年以上python爬虫经验,本科以上学历,计算机相关专业;
2、熟悉掌握至少一种开源爬虫框架(scrapy、appium、selenium);
3、精通动态网页抓取、浏览器模拟抓取、APP抓取等技术,熟悉使用fiddler或其他抓包工具;
4、具有js逆向,app逆向相关经验。熟悉js hook原理,熟悉各种反爬常见手段,并能够通过多种应对策略(如代理池、模拟登录、验证码处理、浏览器渲染等)来保证数据的持续交付;
5、具有团队合作精神,有责任感,对工作认真负责,具有较强的学习能力和抗压能力。
公司介绍
万得(Wind)是中国金融大数据行业的领跑者,服务于境内90%以上的银行、证券、保险、基金、信托等各类金融机构。成立20余载,万得致力于为金融领域专业人士提供准确及时的数据和行业沟通平台。肩负着中国金融信息服务行业使命重任、多年坚持自主研发,万得对中国大数据行业的发展起到举足轻重的作用,其市场、技术、服务和品牌已成为大数据行业的参考标准。
联系方式
- 公司地址:万得大厦
- 电话:18716323282