爬虫工程师
北京源石云科技有限公司上海分公司
- 公司规模:150-500人
- 公司性质:民营公司
- 公司行业:互联网/电子商务
职位信息
- 发布日期:2017-10-18
- 工作地点:上海-徐汇区
- 工作经验:3-4年经验
- 职位月薪:1.1-2.5万/月
- 职位类别:互联网软件开发工程师
职位描述
职位描述:
1、负责开发网络爬虫系统,完成数据采集与爬取、解析处理、入库等数据日常工作;
2、负责领域知识的定向爬取、深度提取和挖掘;配合数据的清洗、整理、去重及合并等工作;
3、负责与机器学习工程师、大数据工程师、数据挖掘、分析人员、运营及产品等协同工作,完成数据统计、查询和分析。
4、负责业务研发团队的需求收集并包装出相应的爬虫API输出
岗位要求:
1.计算机相关专业毕业,2年以上实际开发经验
2.精通爬虫相关语言,java、python、nodejs 等
3.熟悉Jsoup、Selenium、WebDriver、PhantomJS、htmlunit、Nutch、ETL、HtmlParser等技术优先;有分布式爬虫架构,数据挖掘经验者优先
4.熟悉python优先,有app研发背景或app爬虫开发经验佳,有逆向经验尤佳;
1、负责开发网络爬虫系统,完成数据采集与爬取、解析处理、入库等数据日常工作;
2、负责领域知识的定向爬取、深度提取和挖掘;配合数据的清洗、整理、去重及合并等工作;
3、负责与机器学习工程师、大数据工程师、数据挖掘、分析人员、运营及产品等协同工作,完成数据统计、查询和分析。
4、负责业务研发团队的需求收集并包装出相应的爬虫API输出
岗位要求:
1.计算机相关专业毕业,2年以上实际开发经验
2.精通爬虫相关语言,java、python、nodejs 等
3.熟悉Jsoup、Selenium、WebDriver、PhantomJS、htmlunit、Nutch、ETL、HtmlParser等技术优先;有分布式爬虫架构,数据挖掘经验者优先
4.熟悉python优先,有app研发背景或app爬虫开发经验佳,有逆向经验尤佳;
职能类别: 互联网软件开发工程师
关键字: 爬虫经验 数据挖掘 python
公司介绍
公司介绍:
源石云科技公司是一家服务于互联网的大数据云平台,目前有大数据风控,移动广告,消费金融,资讯等产品,团队来自百度,甲骨文,Paypal,期待你的加入。
现有上海,无锡,常州,杭州,4处办公地点,整个团队300人以上,目前公司处于B轮,领导nice,团队氛围好,丰富美味的下午茶,团队游,年度体检等,福利多多,欢迎有共同目标的人员加入一起奋斗!
公司产品:小象优品app:移动电商产品,汇聚全球好物,给你想要!
福利待遇从优,入职首月起缴纳五险一金,每年5天带薪年假(每满1年增加1天),人性化多样化福利:员工生日派对、节日礼品、团建/拓训、体检、年会等。
源石云科技公司是一家服务于互联网的大数据云平台,目前有大数据风控,移动广告,消费金融,资讯等产品,团队来自百度,甲骨文,Paypal,期待你的加入。
现有上海,无锡,常州,杭州,4处办公地点,整个团队300人以上,目前公司处于B轮,领导nice,团队氛围好,丰富美味的下午茶,团队游,年度体检等,福利多多,欢迎有共同目标的人员加入一起奋斗!
公司产品:小象优品app:移动电商产品,汇聚全球好物,给你想要!
福利待遇从优,入职首月起缴纳五险一金,每年5天带薪年假(每满1年增加1天),人性化多样化福利:员工生日派对、节日礼品、团建/拓训、体检、年会等。
联系方式
- 公司地址:地址:span徐汇区古美路1528弄漕河泾现代服务园区大厦A4号楼2楼