爬虫开发工程师
上海冠勇信息科技有限公司
- 公司规模:50-150人
- 公司性质:民营公司
- 公司行业:互联网/电子商务
职位信息
- 发布日期:2020-12-09
- 工作地点:上海-闵行区
- 招聘人数:3人
- 工作经验:3-4年经验
- 学历要求:大专
- 职位月薪:1.5-2.5万/月
- 职位类别:爬虫开发工程师 大数据开发工程师
职位描述
职责描述
1. 负责多平台信息爬取和页面内容的提取分析;
2. 优化抓取策略,充分利用带宽资源,避免限制;
3. 分析爬虫系统的技术缺陷,对策略架构做出合理地调整和改进。
职位要求
1、有3年以上网络爬虫相关开发 经验;
2、本科及以上学历,计算机相关专业;
3、良好的JAVA和Python基础知识,熟悉多线程并发处理;
4、熟悉SQL语言,熟悉MySQL等主流数据库;
5、熟悉javascript和html,以及http协议;
6、有较强的学习能力和责任心,热爱软件开发;
7、对大数据处理有了解或实际项目中有应用hadoop的优先;
公司介绍
冠勇科技是全球技术领先的网络版权内容搜索技术服务商、中国第三方网络版权大数据监测服务商。公司成立于2011年,研发总部位于上海市闵行区紫竹国家高新区,2013年在美国洛杉矶设立办事处,2014年在北京成立分公司。
公司采用核心技术——“海量音视频、图文内容搜索”,结合云计算技术,以新媒体版权内容为中心,打造了全球技术领先的版权云监测平台CPMLive,长期为美国华纳、NBA、优酷土豆、搜狐等海内外用户提供新媒体版权大数据搜索与监测、版权作品搜索API、影视版权大数据挖掘与分析等服务,并先后与国家版权局、北京版权局、上海版权局进行深度合作,已成为国内技术领先、服务优质、市场占有率最高的新媒体搜索技术服务商。
公司采用核心技术——“海量音视频、图文内容搜索”,结合云计算技术,以新媒体版权内容为中心,打造了全球技术领先的版权云监测平台CPMLive,长期为美国华纳、NBA、优酷土豆、搜狐等海内外用户提供新媒体版权大数据搜索与监测、版权作品搜索API、影视版权大数据挖掘与分析等服务,并先后与国家版权局、北京版权局、上海版权局进行深度合作,已成为国内技术领先、服务优质、市场占有率最高的新媒体搜索技术服务商。
联系方式
- 公司地址:地址:北京市朝阳区窑洼湖桥东化工路18号