爬虫开发工程师
深圳市中科为实业集团有限公司
- 公司规模:500-1000人
- 公司性质:民营公司
- 公司行业:专业服务(咨询、人力资源、财会)
职位信息
- 发布日期:2019-04-01
- 工作地点:深圳-龙华新区
- 招聘人数:1人
- 工作经验:2年经验
- 学历要求:大专
- 职位月薪:1-2万/月
- 职位类别:软件工程师
职位描述
职位具体要求
1、计算机及相关专业大专及以上学历,2年以上的爬虫程序设计开发经验;
2、熟练掌握一门主流语言的爬虫框架;
3、熟悉 Https、Http 协议的基本原理,了解 Https、Http 协议交互的流程,明白大部分 http head的作用与意义,熟悉nutch,httpclient,jsoup等工具;
4、熟练掌握 , 够熟练使用 XPath 对 DOM 文档进行查询和解析;
5、掌握模拟登陆,突破IP封锁,突破登录限制等反反爬技术,能监控爬虫运行情况;
6、熟悉Mysql数据库,熟练使用SQL语句;
7、有全站爬虫开发经验者,熟悉HTML5/CSS3/等前端技术优先;
工作职责
1、负责研究网站特质,数据要素分析、提取、整合,网页信息抓取、解析、数据清洗等研发和优化工作;
2、参与爬虫相关数据存储机制设计,参与设计数据有效利用策略,从数据合理性、完整性角度提 供建议;
3、参与爬虫核心算法的策略优化研究,提升抓取的效率和质量;
4、维护现有网络爬虫系统,完成数据采集与爬取、解析处理、入库等数据日常工作,跟进技术热 点,及时更新新的爬虫功能;
5、负责爬虫核心技术研究、开发工作,对反爬虫屏蔽具有相应的应对策略;
职能类别: 软件工程师
公司介绍
中科为集团成立于2009年,致力于为中国高新科技企业而为之,为企业提供成立
到上市一站式的全方位、专业化的优质服务。秉持“让创业者活下去,让创新者活得好”的服务理念,将产业政策、科技咨询、知识产权、法律、财税、金融等双创服务全方位融入企业的当前经营和未来发展中,打造全新的中小企业创新创业服务平台。
公司业务:知识产权、资质认定、政府咨询、投融资、财税审计、上市服务、园区服务、法律服务、培训讲座
公司定位:为中国高新科技企业而为之
公司愿景:让创业者活下去,让创新者活的好
公司理念:自律、高效、包容、创新
公司使命:成就客户、成就员工、成就品牌
深圳总部地址:深圳市龙华区民治大道牛栏前大厦16楼
深圳子公司:深圳市龙华区龙华街道油松路天汇大厦A栋10楼A1003-1
广州子公司地址:广州市番禺区汉溪大道西283号越时代广场东塔2131—2132号
集团园区服务站:
?东部创业公园双创服务工作站(深圳市龙岗区启迪协信科技园5B栋创业公园2楼)
?牛栏前中科为企业服务站(深圳市龙华区民治大道牛栏前大厦1楼)
?中科为中小企业双创服务基地(深圳市龙华区民治大道牛栏前大厦16楼)
?中科为健康智谷(深圳市盐田区深盐路2028号)
?中科金麒中科双创园区服务站(东莞市凤岗镇金麒路1号中科金麒智能制造科技园1栋1楼)
集团微信公众号:中科为小蜜蜂
到上市一站式的全方位、专业化的优质服务。秉持“让创业者活下去,让创新者活得好”的服务理念,将产业政策、科技咨询、知识产权、法律、财税、金融等双创服务全方位融入企业的当前经营和未来发展中,打造全新的中小企业创新创业服务平台。
公司业务:知识产权、资质认定、政府咨询、投融资、财税审计、上市服务、园区服务、法律服务、培训讲座
公司定位:为中国高新科技企业而为之
公司愿景:让创业者活下去,让创新者活的好
公司理念:自律、高效、包容、创新
公司使命:成就客户、成就员工、成就品牌
深圳总部地址:深圳市龙华区民治大道牛栏前大厦16楼
深圳子公司:深圳市龙华区龙华街道油松路天汇大厦A栋10楼A1003-1
广州子公司地址:广州市番禺区汉溪大道西283号越时代广场东塔2131—2132号
集团园区服务站:
?东部创业公园双创服务工作站(深圳市龙岗区启迪协信科技园5B栋创业公园2楼)
?牛栏前中科为企业服务站(深圳市龙华区民治大道牛栏前大厦1楼)
?中科为中小企业双创服务基地(深圳市龙华区民治大道牛栏前大厦16楼)
?中科为健康智谷(深圳市盐田区深盐路2028号)
?中科金麒中科双创园区服务站(东莞市凤岗镇金麒路1号中科金麒智能制造科技园1栋1楼)
集团微信公众号:中科为小蜜蜂
联系方式
- 公司地址:深圳市龙华区民治大道牛栏前大厦16楼