爬虫工程师
上海热巢网络科技有限公司
- 公司规模:50-150人
- 公司性质:民营公司
- 公司行业:互联网/电子商务
职位信息
- 发布日期:2017-03-31
- 工作地点:上海-静安区
- 招聘人数:1人
- 工作经验:5-7年经验
- 学历要求:本科
- 语言要求:英语 熟练
- 职位月薪:2-2.5万/月
- 职位类别:软件工程师 高级软件工程师
职位描述
职位描述:
职位描述:
1. 熟练掌握一门主流语言的爬虫框架(Java 的 Nutch, Python 的 Scrapy等);
2. 负责网页数据抽取、数据清洗和数据挖掘;
3. 核心调度算法的开发和研究,最大效率提高爬虫下载速度;
4. 破解主流网站和app,ajax等反爬防盗链机制;
任职要求:
1. 熟练掌握 Python,e.g Scrapy;
2. 熟悉NoSQL数据库,熟悉Cassandra体系结构与集群特点;
3. 有大规模爬虫的部署运维经验者优先。
4. 本科以上学历,3-5年工作经验,计算机相关专业.
热巢官方网站:www.rechaos.com
热巢APP: 热巢
举报
分享
职位描述:
1. 熟练掌握一门主流语言的爬虫框架(Java 的 Nutch, Python 的 Scrapy等);
2. 负责网页数据抽取、数据清洗和数据挖掘;
3. 核心调度算法的开发和研究,最大效率提高爬虫下载速度;
4. 破解主流网站和app,ajax等反爬防盗链机制;
任职要求:
1. 熟练掌握 Python,e.g Scrapy;
2. 熟悉NoSQL数据库,熟悉Cassandra体系结构与集群特点;
3. 有大规模爬虫的部署运维经验者优先。
4. 本科以上学历,3-5年工作经验,计算机相关专业.
热巢官方网站:www.rechaos.com
热巢APP: 热巢
职能类别: 软件工程师 高级软件工程师
关键字: 抓数据 Scrapy 爬虫 微信数据 爬虫工程师 Python
公司介绍
上海热巢网络科技有限公司(HotNest Internet Technology.,Ltd)成立于2014年8月,总部位于上海,是在消费升级背景下快速发展的中德合资公司。目前完成数千万元A轮融资,投资方有招商局创投、元禾原点、安持等。
热巢HotNest定位海外品牌在中国市场的云管理总部,以数据驱动,为海外品牌提供中国市场落地加速服务。
我们的合作客户:LVMH路威酩轩集团、Kering开云集团、德国Dado Sens、金光APP等国际知名品牌;上海九百-西区老大房等本土老字号品牌;WPP、Publicis阳狮等专业服务商。
热巢HotNest定位海外品牌在中国市场的云管理总部,以数据驱动,为海外品牌提供中国市场落地加速服务。
我们的合作客户:LVMH路威酩轩集团、Kering开云集团、德国Dado Sens、金光APP等国际知名品牌;上海九百-西区老大房等本土老字号品牌;WPP、Publicis阳狮等专业服务商。
联系方式
- Email:kongyiyun@rechaos.com
- 公司地址:地址:span铜仁路299号SOHO东海广场3009单元