爬虫开发工程师
永辉超市股份有限公司
- 公司规模:10000人以上
- 公司性质:合资(非欧美)
- 公司行业:批发/零售
职位信息
- 发布日期:2017-10-21
- 工作地点:上海-徐汇区
- 招聘人数:1人
- 工作经验:2年经验
- 学历要求:本科
- 职位月薪:1.4-2万/月
- 职位类别:其他
职位描述
职位描述:
岗位职责:
1. 负责设计、开发、维护爬虫系统;
2. 通过对数据的抓取、解析、存储、搜索等模块的拆分与优化;
3. 负责目标系统的采集、维护及数据异常的跟踪处理、设计爬虫策略和防屏蔽规则、优化网络爬取性能和质量, 用脚本和程序对大规模数据进行处理和分析;
4. 负责对数据的清洗、整理、标准化入库工作。
任职要求:
1、工作认真细致,有较强的学习能力,善于沟通;
2、 两年以上Python语言开发经验,熟悉Scrapy、Spider等框架更佳;熟练使用Mysql、Redis、MongoDB等数据库;
3、有数据爬取,信息抽取处理经验,了解自动化测试工具。
举报
分享
岗位职责:
1. 负责设计、开发、维护爬虫系统;
2. 通过对数据的抓取、解析、存储、搜索等模块的拆分与优化;
3. 负责目标系统的采集、维护及数据异常的跟踪处理、设计爬虫策略和防屏蔽规则、优化网络爬取性能和质量, 用脚本和程序对大规模数据进行处理和分析;
4. 负责对数据的清洗、整理、标准化入库工作。
任职要求:
1、工作认真细致,有较强的学习能力,善于沟通;
2、 两年以上Python语言开发经验,熟悉Scrapy、Spider等框架更佳;熟练使用Mysql、Redis、MongoDB等数据库;
3、有数据爬取,信息抽取处理经验,了解自动化测试工具。
职能类别: 其他
公司介绍
永辉超市成立于2001年, 2010年在A股上市,股票代码 601933.SH,是中国首批“农改超”推广典范、中国企业500强之一,是***“流通”及“农业产业化”双龙头企业。
永辉超市秉承“民生超市、百姓永辉”的理念,自创办以来飞速发展。截至9月中旬,永辉超市业务已覆盖全国29个省份,554个城市,经营面积超过750万平方米。
永辉超市秉承“民生超市、百姓永辉”的理念,自创办以来飞速发展。截至9月中旬,永辉超市业务已覆盖全国29个省份,554个城市,经营面积超过750万平方米。
联系方式
- Email:80731158@yonghui.cn
- 公司地址:福州总部左海鼓楼区湖头街120号永辉集团 (邮编:350025)