网络爬虫工程师
上海璞锐公关策划咨询有限公司
- 公司规模:50-150人
- 公司性质:外资(欧美)
- 公司行业:公关/市场推广/会展
职位信息
- 发布日期:2019-11-12
- 工作地点:上海
- 招聘人数:2人
- 工作经验:无工作经验
- 学历要求:本科
- 职位月薪:1-2万/月
- 职位类别:软件工程师
职位描述
1.负责整个主题爬虫系统架构和数据存储设计,应对各种互联网爬虫规则;
2.把握网络爬虫的核心技术研究方向,例如信息抽取、数据聚类、重组、搜索;
3.分析爬虫系统的技术缺陷,对策略架构做出合理性地调整和改进;
4.负责日常网页数据抓取需求的实现;
5.爬虫系统的维护和优化;
岗位要求:
1.有两年以上网络爬虫软件设计与开发经验;
2.精通Java语言编程,熟悉Linux平台;
3.熟悉搜索引擎的工作原理;熟悉Lucene、Nutch、Heritrix、Larbin、HtmlParse、Scrapy等开源工具;
4.精通网页爬虫、分布式、多线程开发技术;
5.熟悉DOMHTML5CSS3等页面对象,使用过HtmlParser、Parser、xpath等页面解析组件,熟悉正则表达式;
6.熟悉nosql(redis、mongodb),有hbase开发经验者优先;
7.熟悉ActiveMQ、RabbitMQ、Redis、kafka等消息框架;
8.研究过反爬虫技术,熟悉地址去重算法;
9.能独立解决技术问题;
2.把握网络爬虫的核心技术研究方向,例如信息抽取、数据聚类、重组、搜索;
3.分析爬虫系统的技术缺陷,对策略架构做出合理性地调整和改进;
4.负责日常网页数据抓取需求的实现;
5.爬虫系统的维护和优化;
岗位要求:
1.有两年以上网络爬虫软件设计与开发经验;
2.精通Java语言编程,熟悉Linux平台;
3.熟悉搜索引擎的工作原理;熟悉Lucene、Nutch、Heritrix、Larbin、HtmlParse、Scrapy等开源工具;
4.精通网页爬虫、分布式、多线程开发技术;
5.熟悉DOMHTML5CSS3等页面对象,使用过HtmlParser、Parser、xpath等页面解析组件,熟悉正则表达式;
6.熟悉nosql(redis、mongodb),有hbase开发经验者优先;
7.熟悉ActiveMQ、RabbitMQ、Redis、kafka等消息框架;
8.研究过反爬虫技术,熟悉地址去重算法;
9.能独立解决技术问题;
职能类别:软件工程师
公司介绍
PRIME Research简介
PRIME Research在全球设有8个国际办事处,以100多种语言以及优秀人才和尖端技术的力量,帮助传播人员评估公关价值和投资回报。该公司整合、分析并评估社交、数字,印刷和广播等各渠道的媒体表现,提供有实际操作意义的洞察和战略指导,力求取得更好的传播和业务成果。璞锐在巴西、中国、德国、瑞士,英国和美国设有办事处,员工超过700人。2018年01月PRIME Research被美国上市公司Cision收购,并成为旗下Cision Insights部门的重要组成部分。
Cision简介
Cision Ltd. (NYSE: CISN)是面向公关和营销传播人员提供赢媒体软件和服务的全球领先企业。Cision的软件使用户能够识别主要影响者、制作和发布战略内容,并测量重大影响。Cision拥有3,000多名员工,在美洲、欧洲、中东和非洲以及亚太地区15个国家设有办事处。
联系方式:
上海璞锐公关策划咨询有限公司
地址:上海浦东新区峨山路91弄100号陆家嘴软件园2号楼306室
电话:021-68592099-819
传真:021-68592166
PRIME Research在全球设有8个国际办事处,以100多种语言以及优秀人才和尖端技术的力量,帮助传播人员评估公关价值和投资回报。该公司整合、分析并评估社交、数字,印刷和广播等各渠道的媒体表现,提供有实际操作意义的洞察和战略指导,力求取得更好的传播和业务成果。璞锐在巴西、中国、德国、瑞士,英国和美国设有办事处,员工超过700人。2018年01月PRIME Research被美国上市公司Cision收购,并成为旗下Cision Insights部门的重要组成部分。
Cision简介
Cision Ltd. (NYSE: CISN)是面向公关和营销传播人员提供赢媒体软件和服务的全球领先企业。Cision的软件使用户能够识别主要影响者、制作和发布战略内容,并测量重大影响。Cision拥有3,000多名员工,在美洲、欧洲、中东和非洲以及亚太地区15个国家设有办事处。
联系方式:
上海璞锐公关策划咨询有限公司
地址:上海浦东新区峨山路91弄100号陆家嘴软件园2号楼306室
电话:021-68592099-819
传真:021-68592166
联系方式
- Email:hr.china@prime-research.com
- 公司地址:上海浦东新区峨山路91弄100号陆家嘴软件园2号楼306室