爬虫工程师
成都银泰商务服务有限公司
- 公司规模:50-150人
- 公司性质:民营公司
- 公司行业:航天/航空
职位信息
- 发布日期:2020-09-17
- 工作地点:成都-高新区
- 招聘人数:1人
- 工作经验:2年经验
- 学历要求:大专
- 职位月薪:0.8-1.5万/月
- 职位类别:爬虫开发工程师 软件工程师
职位描述
岗位职责:
1、负责设计和开发网络爬虫系统,完成关键信息的数据抽取、清洗、去重、分析等;
2、负责爬虫相关技术的研究和实现工作,比如分布式爬虫、验证码破解、反爬机制的研究等等;
3、负责公司爬虫的核心算法以及策略优化,熟悉采集系统的调度策略;
4、设计爬虫策略和防屏蔽规则,提升网页抓取的效率和质量;
5、负责现有部分爬虫的完善、维护工作,实时监控爬虫的进度和警报反馈,提升爬虫系统稳定性、可扩展性;
6、能独立解决实际开发过程碰到的各类问题;
任职要求:
1、专科及以上学历,计算机相关专业;有机票代理行业从业者优先;
2、至少2年以上爬虫经验;
3、精通Python/Java语言至少一种,具有扎实的计算机基础和编程能力,熟悉常见的算法与数据结构,具有优秀的逻辑思维能力;
4、熟悉Mysql,redis,有过数据库调优和海量数据存储经验优先;
5、熟悉常见的反爬机制,并对反爬具有一定的应对措施策略且有一定研究;
6、熟练掌握正则表达式、XPath、CSS、Html、Javascript、Ajax等技术;
7、熟悉常用网络协议、数据存储和数据处理技术;
8、熟悉linux系统环境、命令,shell、python脚本编写;
9、有电商网站、电商APP采集经验优先;
10、有算法方面基础,例如深度学习、图像识别等优先;
公司介绍
成都银泰商务有限公司成立于2010年3月,主要从事机票商旅业务。承接了中国电信118114、中国联通116114机票呼叫中心服务商及企业差旅服务,为国美等电商平台提供机票营销销售解决方案。
其母公司:成都净蓝科技服务有限公司,公司主营:虚拟数字产品,通信增值业务。
通讯充值、积分消费、网游充值、视频直播会员充值、营销验证行业短信群发、交壹吧一卡通券发行。
一路坎坷,但未曾放弃,
是因为对梦想的坚守。
其母公司:成都净蓝科技服务有限公司,公司主营:虚拟数字产品,通信增值业务。
通讯充值、积分消费、网游充值、视频直播会员充值、营销验证行业短信群发、交壹吧一卡通券发行。
一路坎坷,但未曾放弃,
是因为对梦想的坚守。
联系方式
- 公司地址:地址:span泰然环球时代中心C座1102(吉瑞四路与吉庆四路交叉口)