重庆招聘

工作职责：
1、开发和维护高质量的Python爬虫程序，从各种网站和API中收集所需数据；
2、分析并解决网站反爬虫措施，确保稳定持续的数据获取；
3、设计合适的数据存储方案，确保数据的完整性和安全性；
4、与数据团队合作，进行数据清洗、转换和整合，以支持数据分析和挖掘工作；
5、监测爬虫系统性能，进行优化和调整，以确保高效率和低延迟。

职位要求：
1、扎实的Python编程能力，熟悉异步编程和多线程/多进程技术；
2、深入了解HTTP协议和网页结构，能够进行网页内容解析和数据提取；
3、熟悉常见的爬虫框架，如Scrapy、Beautiful Soup等，并能根据需要进行定制开发；
4、具备网络安全和隐私意识，能够合规地进行数据收集和存储；
5、对于反爬虫机制有深刻的理解，能够应对常见的反爬虫手段；
6、熟悉常见的数据库系统，如MySQL、MongoDB等，能够设计和优化数据存储方案；
7、具备基本的数据处理和清洗能力，了解数据分析的基本流程和方法；
8、良好的沟通能力和团队协作能力，能够与数据团队紧密合作，理解需求并提供支持。

加分项：
1、在大规模数据采集和处理方面有实际经验；
2、熟悉前端基础知识，能够理解和应对前端渲染对爬虫的影响；
3、对机器学习和自然语言处理有基本了解，能够应用在数据处理中；
4、在开发分布式爬虫系统方面有经验。
职能类别：
数据采集工程师

重庆维普资讯有限公司 (Chongqing VIP Information Co.,Ltd.)

    公司创立于1993年，隶属于国家科学技术部西南信息中心，从事数字图书馆行业的数字资源、软件开发、网络信息平台服务。客户遍布全国高等院校、公共图书馆、情报科研院所等。
l、荣获国家科技进步三等奖；
2、中国互联网百强企业；
3、重庆市文化产业示范基地；
4、重庆市电子商务示范企业；
5、重庆出版政府奖获得者公司；
6、国家文化出口重点企业；
7、国家数字出版基地示范企业。

为员工提供丰厚的薪酬福利政策，维普资讯诚邀您的加盟！

社会保障：五险及住房公积金福利
带薪休假：工作年份对应有5-15天带薪年休假
工作时间：五天工作制，早九晚五，周末双休
工作环境：花园式独栋办公楼，交通便利