python爬虫工程师
上海柯林布瑞信息技术有限公司
- 公司规模:150-500人
- 公司性质:民营公司
- 公司行业:计算机软件
职位信息
- 发布日期:2024-08-16
- 工作地点:上海·徐汇区
- 工作经验:5-7年
- 学历要求:本科
- 职位月薪:1.5-2.5万
- 职位类别:Python开发工程师
职位描述
工作职责:
1、负责多平台信息爬取和页面内容的提取分析,负责破解各类反爬机制;
2、负责网页的数据抓取和爬取链路优化(包括逆向分析、脱壳、加密参数破解、抓取攻防等),提升抓取能力;
3、研究爬虫策略和防屏蔽规则,解决封账号、封IP、验证码、页面跳转等难点,提升网页抓取的效率和质量;
4、爬取国家药监局等网页,爬取pubmed文献,爬取各个官网的标书等。
任职资格:
1.3年以上python爬虫经验,本科及以上学历,计算机相关专业,有医药数据经验优先;
2.熟悉掌握至少一种开源爬虫框架(scrapy、appium、selenium等);
3.精通动态网页抓取、浏览器模拟抓取、APP抓取等技术,熟悉使用fiddler或其他抓包工具。;
4.具有js逆向,app逆向相关经验。熟悉js hook原理,熟悉各种反爬风控常见手段;
5.具有团队合作精神,有责任感,对工作认真负责,有较强的协调和沟通能力。
职能类别:
Python开发工程师
1、负责多平台信息爬取和页面内容的提取分析,负责破解各类反爬机制;
2、负责网页的数据抓取和爬取链路优化(包括逆向分析、脱壳、加密参数破解、抓取攻防等),提升抓取能力;
3、研究爬虫策略和防屏蔽规则,解决封账号、封IP、验证码、页面跳转等难点,提升网页抓取的效率和质量;
4、爬取国家药监局等网页,爬取pubmed文献,爬取各个官网的标书等。
任职资格:
1.3年以上python爬虫经验,本科及以上学历,计算机相关专业,有医药数据经验优先;
2.熟悉掌握至少一种开源爬虫框架(scrapy、appium、selenium等);
3.精通动态网页抓取、浏览器模拟抓取、APP抓取等技术,熟悉使用fiddler或其他抓包工具。;
4.具有js逆向,app逆向相关经验。熟悉js hook原理,熟悉各种反爬风控常见手段;
5.具有团队合作精神,有责任感,对工作认真负责,有较强的协调和沟通能力。
职能类别:
Python开发工程师
公司介绍
上海柯林布瑞信息技术有限公司是一家高新技术企业,是国内领先的医疗大数据服务商 。柯林布瑞聚焦医疗大数据战略,为用户实现大数据的挖掘与利用,在关键技术、产品开发、工程实施等方面持续投入,以更快、更全、更准、更智能的数据产品及服务,为用户持续创造价值。公司核心产品包括临床数据中心(CDR)、运营数据中心(ODR)、科研数据中心(RDR)、医院信息集成平台HSB,以及基于三大数据中心的满足医院医、教、研、管各方面需求的数据治理、数据服务和人工智能应用。
公司客户遍布全国各主要地区 , 包括华西医院、瑞金医院、长海医院、复旦大学附属肿瘤医院、西南医院、上海市精神卫生中心、上海中医药大学附属龙华医院、中国福利会国际和平妇幼保健院、上海市中西医结合医院、广西壮族自治区人民医院、温州医科大学附属第二医院、常熟市第二人民医院、郑州市骨科医院、成都市第五人民医院、江苏省省级机关医院等各大综合三级医院和专科医院,并且全程参与建设上海市静安区卫计委及镇江市卫计委大数据平台项目等。
柯林布瑞为员工提供优越的薪酬和工作氛围,欢迎各位有识之士的加入。
公司客户遍布全国各主要地区 , 包括华西医院、瑞金医院、长海医院、复旦大学附属肿瘤医院、西南医院、上海市精神卫生中心、上海中医药大学附属龙华医院、中国福利会国际和平妇幼保健院、上海市中西医结合医院、广西壮族自治区人民医院、温州医科大学附属第二医院、常熟市第二人民医院、郑州市骨科医院、成都市第五人民医院、江苏省省级机关医院等各大综合三级医院和专科医院,并且全程参与建设上海市静安区卫计委及镇江市卫计委大数据平台项目等。
柯林布瑞为员工提供优越的薪酬和工作氛围,欢迎各位有识之士的加入。
联系方式
- 公司地址:宜山路700号B2幢1504室