深圳 [切换城市] 深圳招聘深圳计算机软件招聘深圳软件工程师招聘

爬虫开发工程师

深圳市中科为实业集团有限公司

  • 公司规模:500-1000人
  • 公司性质:民营公司
  • 公司行业:专业服务(咨询、人力资源、财会)

职位信息

  • 发布日期:2019-04-01
  • 工作地点:深圳-龙华新区
  • 招聘人数:1人
  • 工作经验:2年经验
  • 学历要求:大专
  • 职位月薪:1-2万/月
  • 职位类别:软件工程师

职位描述

职位具体要求

1、计算机及相关专业大专及以上学历,2年以上的爬虫程序设计开发经验;

2、熟练掌握一门主流语言的爬虫框架;

3、熟悉 Https、Http 协议的基本原理,了解 Https、Http 协议交互的流程,明白大部分 http head的作用与意义,熟悉nutch,httpclient,jsoup等工具;

4、熟练掌握 , 够熟练使用 XPath 对 DOM 文档进行查询和解析;

5、掌握模拟登陆,突破IP封锁,突破登录限制等反反爬技术,能监控爬虫运行情况;

6、熟悉Mysql数据库,熟练使用SQL语句;

7、有全站爬虫开发经验者,熟悉HTML5/CSS3/等前端技术优先;

工作职责

1、负责研究网站特质,数据要素分析、提取、整合,网页信息抓取、解析、数据清洗等研发和优化工作;

2、参与爬虫相关数据存储机制设计,参与设计数据有效利用策略,从数据合理性、完整性角度提 供建议;

3、参与爬虫核心算法的策略优化研究,提升抓取的效率和质量;

4、维护现有网络爬虫系统,完成数据采集与爬取、解析处理、入库等数据日常工作,跟进技术热 点,及时更新新的爬虫功能;

5、负责爬虫核心技术研究、开发工作,对反爬虫屏蔽具有相应的应对策略;

职能类别: 软件工程师

公司介绍

    中科为集团成立于2009年,致力于为中国高新科技企业而为之,为企业提供成立
到上市一站式的全方位、专业化的优质服务。秉持“让创业者活下去,让创新者活得好”的服务理念,将产业政策、科技咨询、知识产权、法律、财税、金融等双创服务全方位融入企业的当前经营和未来发展中,打造全新的中小企业创新创业服务平台。
    公司业务:知识产权、资质认定、政府咨询、投融资、财税审计、上市服务、园区服务、法律服务、培训讲座
公司定位:为中国高新科技企业而为之
公司愿景:让创业者活下去,让创新者活的好
    公司理念:自律、高效、包容、创新
    公司使命:成就客户、成就员工、成就品牌
深圳总部地址:深圳市龙华区民治大道牛栏前大厦16楼
深圳子公司:深圳市龙华区龙华街道油松路天汇大厦A栋10楼A1003-1
广州子公司地址:广州市番禺区汉溪大道西283号越时代广场东塔2131—2132号
集团园区服务站:
?东部创业公园双创服务工作站(深圳市龙岗区启迪协信科技园5B栋创业公园2楼)
?牛栏前中科为企业服务站(深圳市龙华区民治大道牛栏前大厦1楼)
?中科为中小企业双创服务基地(深圳市龙华区民治大道牛栏前大厦16楼)
?中科为健康智谷(深圳市盐田区深盐路2028号)
?中科金麒中科双创园区服务站(东莞市凤岗镇金麒路1号中科金麒智能制造科技园1栋1楼)

集团微信公众号:中科为小蜜蜂

联系方式

  • 公司地址:深圳市龙华区民治大道牛栏前大厦16楼