爬虫开发工程师
享度(广州)旅游科技有限公司
- 公司规模:50-150人
- 公司性质:民营
- 公司行业:计算机软件 互联网/电子商务
职位信息
- 发布日期:2024-03-21
- 工作地点:广州·海珠区
- 工作经验:3年及以上
- 学历要求:本科
- 职位月薪:1-1.5万
- 职位类别:计算机辅助设计工程师 数据库工程师/管理员 嵌入式软件开发(Linux/单片机/DLC/DSP…)
职位描述
岗位职责:
1.负责设计和开发分布式网络爬虫系统,进行多平台信息的抓取和分析工作;
2.研究各种网站、链接的形态,发现它们的特点和规律;
3.解决技术疑难问题,包括反反爬、验证码、压力控制等,提升抓取的效率和质量。
4.负责爬虫逻辑的开发,以及API接口的对接,快速响应业务变动。
岗位要求:
1. 本科及以上学历,计算机相关专业,一年以上Python开发和管理经验;
2. 有扎实的算法和数据结构能力,有扎实python语言基础,熟悉多线程、协成、IO多路复用等概念,有相关微服务架构设计经验者优先;
3. 熟悉爬虫原理,常见的反爬虫技术,有公众号、小程序、app等爬虫项目开发经验,能够解决封账号、封IP、验证码识别、图像识别等问题;
4. 熟悉Linux操作,Re、Xpath等页面解析工具,selenium、Appnium、Airtest等模拟工具,MySQL、Redis等常用数据库;
5. 熟悉flask、Django后端技术,熟悉Tensorflow,Java,有使用过celery、supervisor,有APP逆向和开发过验证码识别模型经验;
6.对技术热衷,工作积极主动,沟通交流能力强,具有良好的团队合作精神。
1.负责设计和开发分布式网络爬虫系统,进行多平台信息的抓取和分析工作;
2.研究各种网站、链接的形态,发现它们的特点和规律;
3.解决技术疑难问题,包括反反爬、验证码、压力控制等,提升抓取的效率和质量。
4.负责爬虫逻辑的开发,以及API接口的对接,快速响应业务变动。
岗位要求:
1. 本科及以上学历,计算机相关专业,一年以上Python开发和管理经验;
2. 有扎实的算法和数据结构能力,有扎实python语言基础,熟悉多线程、协成、IO多路复用等概念,有相关微服务架构设计经验者优先;
3. 熟悉爬虫原理,常见的反爬虫技术,有公众号、小程序、app等爬虫项目开发经验,能够解决封账号、封IP、验证码识别、图像识别等问题;
4. 熟悉Linux操作,Re、Xpath等页面解析工具,selenium、Appnium、Airtest等模拟工具,MySQL、Redis等常用数据库;
5. 熟悉flask、Django后端技术,熟悉Tensorflow,Java,有使用过celery、supervisor,有APP逆向和开发过验证码识别模型经验;
6.对技术热衷,工作积极主动,沟通交流能力强,具有良好的团队合作精神。
公司介绍
享度(广州)旅游科技有限公司是一家致力于旅游科技领域的创新公司,通过将数字科技、大数据和AI技术融入旅游业,为全球酒店、旅游度假、定制游、碎片化产品等领域提供一站式的解决方案。
旗下广州绿橙国际旅行社有限公司、广州长丘尾网络科技有限公司、海口海岸线旅行社有限公司等分支机构分别支持国际渠道运营、网络技术开发、客户顾问服务等多元化业务体系。遍布全球7500多个目的地城市的过百万家酒店资源,OTA、旅行社、新媒体等不同渠道的2000多个分销客户,为我们构建全域旅游科技生态系统提供了强有力的保障。
享度,粤语“在这里”的意思。无论客户想要订酒店、找门票,我们随时在这里提供各项旅游资源;亦或客户想要咨询订单、反馈问题,我们也随时在这里提供顾问式的贴心服务。享度,客户有一站式的需求解决方案,员工有跟随行业信息化变革的发展机会。享度,无限可能!
旗下广州绿橙国际旅行社有限公司、广州长丘尾网络科技有限公司、海口海岸线旅行社有限公司等分支机构分别支持国际渠道运营、网络技术开发、客户顾问服务等多元化业务体系。遍布全球7500多个目的地城市的过百万家酒店资源,OTA、旅行社、新媒体等不同渠道的2000多个分销客户,为我们构建全域旅游科技生态系统提供了强有力的保障。
享度,粤语“在这里”的意思。无论客户想要订酒店、找门票,我们随时在这里提供各项旅游资源;亦或客户想要咨询订单、反馈问题,我们也随时在这里提供顾问式的贴心服务。享度,客户有一站式的需求解决方案,员工有跟随行业信息化变革的发展机会。享度,无限可能!
联系方式
- 公司地址:海珠区江南大道中180号 富力天域中心4004-4008室
- 联系人:何先生