北京 [切换城市] 北京招聘北京计算机软件招聘北京高级软件工程师招聘

爬虫开发工程师

英特力光通信开发有限公司

  • 公司规模:500-1000人
  • 公司性质:民营公司
  • 公司行业:通信/电信运营、增值服务  通信/电信/网络设备

职位信息

  • 发布日期:2017-03-10
  • 工作地点:北京-海淀区
  • 招聘人数:1人
  • 学历要求:本科
  • 职位月薪:1-2万/月
  • 职位类别:高级软件工程师  

职位描述

职位描述:
岗位职责:
1、负责各产品的数据抓取需求;
2、负责开发公司的爬虫系统;
3、参与爬虫架构的设计与研究;
4、参与爬虫核心算法的设计与优化;
5、负责支持工程师进行大规模互联网数据的抓取;
6、对抓取数据进行除重,匹配,过滤等处理;
7、支持工程师进行网络爬虫架构设计、功能开发及优化;
8、帮助研究网页信息抽取等核心算法的研究和优化;

任职要求:
1、计算机相关专业,两年以上大规模网页爬虫开发经验;
2、熟悉http协议,xml相关技术(解析,dom树, xpath);
3、熟悉正则表达式;
4、熟悉python/java 编程语言,数据结构和算法基础扎实;
5、熟悉js、ajax、网页去重,能够总结分析不同网站的结构特点与规律;
6、精通Java、Python、C#、PHP语言,有一定的编程经验;
7、熟悉多线程、网络编程,了解网页抓取原理及技术,熟悉正则表达式,能从结构化的和非结构化的数据中获取信息;

优先条件:
1、有爬虫相关工作经验3 以上;
2、熟悉开源的爬虫系统,如scrapy等;
3、有分布式爬虫架构经验者优先;
4、熟练撑握信息检索相关知识,从事过网络爬虫,网页去重,内容识别,网页信息抽取的相关工作, 熟悉solr,Lucene,heritrix,elasticsearch优先;
5、对文本挖掘,自然语言处理有一定的理解,有从事过分词,命名实体识别,文本分类,聚类等工作者优先。

职能类别: 高级软件工程师

关键字: 爬虫开发 java爬虫

举报 分享

公司介绍

  山东英特力公司成立于1992年,是集光通信、有线无线通信等科研开发、生产制造、设计施工于一体的高新技术企业。公司总部设立在山东济宁高新技术产业开发区,英特力总部工业园占地736亩,在北京、南京、济宁分别设立研发中心。
英特力公司以信息化产品为主体,以生物信息、养生健康及新材料为辅助,走多元化发展之路。英特力公司自成立以来,始终坚持以创新为灵魂,实施技术创新、管理创新和制度创新。
英特力公司在发展通信的同时,紧紧抓住人类要养生、要健康、要长寿、要绿色的大趋势,以诚信、天然、纯真、绿色为根本,以高端养生健康蜂产品及蜂生物信息为切入点,走养生健康产业及生物信息发展之路;新材料以轻量化、节能减排为目标,创新产品,持久发展。
    专业的技术优势,务实创新的开拓精神,奋进向上的员工团队,使得英特力不断地向更高的战略目标迈进。
    英特力公司注重对员工的培养和锻炼,给优秀人才具有行业竞争力的优良待遇和发展机会,提供完备的培训体系,给优秀人才以广阔的发展空间。英特力公司诚邀您的加盟!

联系方式

  • 公司地址:上班地址:北京