爬虫工程师 (职位编号:J193341)
网易集团
- 公司规模:10000人以上
- 公司性质:上市公司
- 公司行业:网络游戏
职位信息
- 发布日期:2019-11-28
- 工作地点:广州
- 招聘人数:1人
- 工作经验:3-4年经验
- 学历要求:本科
- 职位月薪:2.5-3万/月
- 职位类别:其他
职位描述
Responsibility
1、负责设计和开发通用爬虫系统,提取分析各种千形万态的平台页面内容;
2、研究各种网站、链接的形态,发现它们的特点和规律;
3、解决技术疑难问题,包括反反爬、压力控制等,提升网页抓取的效率和质量。
Requirements
1、计算机及相关专业,本科以上学历,1年以上爬虫开发经验;
2、精通python、计算机网络,熟练使用多线程,熟悉Scrapy等常用爬虫框架;
3、熟悉Linux操作、正则表达式,MySQL、MongoDB等常用数据库,了解各种Web前端技术;
4、能够解决封账号、封IP、验证码识别、图像识别等问题;
5、具有良好的沟通能力和团队合作意识,有数据分析、文本分析背景者优先。
1、负责设计和开发通用爬虫系统,提取分析各种千形万态的平台页面内容;
2、研究各种网站、链接的形态,发现它们的特点和规律;
3、解决技术疑难问题,包括反反爬、压力控制等,提升网页抓取的效率和质量。
Requirements
1、计算机及相关专业,本科以上学历,1年以上爬虫开发经验;
2、精通python、计算机网络,熟练使用多线程,熟悉Scrapy等常用爬虫框架;
3、熟悉Linux操作、正则表达式,MySQL、MongoDB等常用数据库,了解各种Web前端技术;
4、能够解决封账号、封IP、验证码识别、图像识别等问题;
5、具有良好的沟通能力和团队合作意识,有数据分析、文本分析背景者优先。
职能类别:其他
公司介绍
网易 (NASDAQ: NTES)是中国领先的互联网技术公司,在开发互联网应用、服务及其它技术方面,网易始终保持国内业界的领先地位。网易对中国互联网的发展具有强烈的使命感,网易利用最先进的互联网技术,加强人与人之间信息的交流和共享,实现“网聚人的力量”。
1997年6月创立以来,凭借先进的技术和优质的服务,网易深受广大网民欢迎,曾两次被中国互联网络信息中心(CNNIC)评选为中国十佳网站之首。
网易作为中国网站的领先者,始终致力于电子商务及IT产业的持续发展,同时也在努力促进中国人民的数字化生活。为了这个目标,网易把亿万的网民聚集在一起,实现资讯的共享,为用户提供更好的服务,为他们创造更愉悦的在线体验。
1997年6月创立以来,凭借先进的技术和优质的服务,网易深受广大网民欢迎,曾两次被中国互联网络信息中心(CNNIC)评选为中国十佳网站之首。
网易作为中国网站的领先者,始终致力于电子商务及IT产业的持续发展,同时也在努力促进中国人民的数字化生活。为了这个目标,网易把亿万的网民聚集在一起,实现资讯的共享,为用户提供更好的服务,为他们创造更愉悦的在线体验。
联系方式
- Email:liqiang04@corp.netease.com
- 公司地址:地址:span西北旺东路10号院中关村软件园二期西区7号A座