百度糯米_上海_数据采集员
北京糯米网科技发展有限公司
- 公司规模:1000-5000人
- 公司性质:合资(非欧美)
- 公司行业:互联网/电子商务
职位信息
- 发布日期:2017-11-07
- 工作地点:上海-嘉定区
- 工作经验:无工作经验
- 学历要求:专业培训
- 职位月薪:0.8-1.3万/月
- 职位类别:数据库工程师/管理员
职位描述
职位描述:
岗位职责:
1. 根据业务需求,调研市场,合理进行数据采集
2. 负责设计和开发分布式的网络爬虫,解决相关数据需求
3. 对接开发人员与第三方接口,顺畅完成数据清洗、数据转换与入库
4. 对采集数据结果负责,定期评估网站质量并维护
任职资格:
1. 本科及以上学历,计算机、数学相关专业优先。
2. 熟练掌握办公软件使用,能快速描述问题。
3. 1年以上Python或者Java开发经验,使用过Scrapy,Pyspider,nutch等任意一种主流爬虫框架有分布式,增量爬取·电商垂直领域爬虫开发经验优先,有大规模爬虫经验优先。
4. 有一定的数据清洗和数据分析能力。
5. 有责任心,学习能力强,具有良好的团队合作精神,对工作有热情,具有良好的分析问题和解决问题的能力,对解决具有挑战性问题充满激情,能承担较大的工作压力。
岗位职责:
1. 根据业务需求,调研市场,合理进行数据采集
2. 负责设计和开发分布式的网络爬虫,解决相关数据需求
3. 对接开发人员与第三方接口,顺畅完成数据清洗、数据转换与入库
4. 对采集数据结果负责,定期评估网站质量并维护
任职资格:
1. 本科及以上学历,计算机、数学相关专业优先。
2. 熟练掌握办公软件使用,能快速描述问题。
3. 1年以上Python或者Java开发经验,使用过Scrapy,Pyspider,nutch等任意一种主流爬虫框架有分布式,增量爬取·电商垂直领域爬虫开发经验优先,有大规模爬虫经验优先。
4. 有一定的数据清洗和数据分析能力。
5. 有责任心,学习能力强,具有良好的团队合作精神,对工作有热情,具有良好的分析问题和解决问题的能力,对解决具有挑战性问题充满激情,能承担较大的工作压力。
职能类别: 数据库工程师/管理员
公司介绍
百度本地广告事业部隶属于百度搜索公司,负责百度本地直通车、百度聚屏等商业产品的研发、运营和销售,通过聚合百度技术、流量和资源为3600行本地商户构建涵盖“流量、内容、转化”的全场景本地营销解决方案,是百度搜索公司一支重要的变现团队。同时旗下拥有深受1亿+用户喜爱的百度糯米APP,为用户提供美食、电影、酒店、旅游、车票、外卖、鲜花等各类丰富、实惠、便捷的生活服务体验。
联系方式
- Email:huojiahui@baidu.com