杭州招聘

职位描述：

1、负责开发网络爬虫系统，完成数据采集与爬取、解析处理、入库等数据日常工作；

2、负责领域知识的定向爬取、深度提取和挖掘；配合数据的清洗、整理、去重及合并等工作；

3、负责与机器学习工程师、大数据工程师等协同工作，完成数据统计、查询和分析。

岗位要求：

1.2年以上实际爬虫开发经验

2.精通爬虫相关语言，python 或 nodejs 等

3.能够解决封账号、封IP、验证码识别、图像识别等问题

4.熟悉 python request 模块、xpath、Selenium、splash 等技术优先；有分布式爬虫架构，数据挖掘经验者优先

5.有主流电商数据爬取或者视频抓取经验者优先。

义乌中国小商品城大数据有限公司于2020年3月成立，系浙江中国小商品城集团股份有限公司（股票代码：600415）下属全资控股公司。公司负责义乌中国小商品城线上官方平台chinagoods开发运营。网站依托义乌市场7.5万家实体商铺资源，服务产业链上游200万家中小微企业，以贸易数据整合为核心驱动，对接供需双方在生产制造、展示交易、仓储物流、金融信贷、市场管理等环节的需求，实现市场资源有效、精准配置，构建真实、开放、融合的数字化贸易综合服务平台。