网络爬虫工程师
深圳就位网科技有限公司
- 公司规模:少于50人
- 公司性质:民营公司
- 公司行业:计算机软件
职位信息
- 发布日期:2019-10-28
- 工作地点:深圳-福田区
- 招聘人数:1人
- 工作经验:1年经验
- 学历要求:大专
- 职位月薪:0.8-1万/月
- 职位类别:软件工程师
职位描述
职责描述:
1、使用C#负责爬虫系统架构设计和开发(如抓取调度,多样化抓取,页面解析和结构化抽取,海量数据存储和读取);
2、设计特定网站爬取策略方法,完成关键技术攻坚,提升爬取效率和稳定性;
3、负责网页数据抽取算法研究和开发,提升网页数据抓取效率和质量
4、及时解决生产上的系统问题,并对业务需求提供支持
任职要求:
1、大专及以上学历,有1年及以上相关工作经验,具有大型web登陆分析、爬虫、反爬、浏览器等研发经验者优先;
2、熟悉HTTP、HTTPS协议机HTTP Client等工具,能在协议层做性能方面调优,能通过Fiddler等抓包软件解决爬虫及网络相关问题;
3、精通WebBrowser原理及js调用,做过复杂业务的表单提交和复杂数据抓取者优先;
4、熟悉分布式应用开发原理及多线程开发技术;
5、熟悉正则表达式、xpath等web信息提取及文本分析技术,有从事网络爬虫、网页信息抽取的经验;
6、精通Mysql数据库操作,会多条件查询语句性能优化,熟悉MongoDb数据库的基本操作;
7、具有较强的学习能力、自我管理能力、工作认真负责,热爱爬虫事业。
公司介绍
深圳就位网科技有限公司(www.jiuweiwang.com),专注产业大数据挖掘和数据应用服务。
团队擅长数据整合、数据建模、语义分析、产业数据分析、行业标准制定,主要为政府、园区运营商、投融资机构、行业协会、行业研究机构、产业地产商等用户提供专业的数据应用解决方案。公司工作氛围好,重视员工培养,团队有活力,处于快速发展期,可以为员工提供足够的发展空间,诚挚欢迎各位勇于拼搏的“拼客”加入我们!
团队擅长数据整合、数据建模、语义分析、产业数据分析、行业标准制定,主要为政府、园区运营商、投融资机构、行业协会、行业研究机构、产业地产商等用户提供专业的数据应用解决方案。公司工作氛围好,重视员工培养,团队有活力,处于快速发展期,可以为员工提供足够的发展空间,诚挚欢迎各位勇于拼搏的“拼客”加入我们!
联系方式
- 公司地址:地址:span天安数码城管理中心2层