深圳招聘

职责描述：

1、使用C#负责爬虫系统架构设计和开发（如抓取调度，多样化抓取，页面解析和结构化抽取，海量数据存储和读取）；

2、设计特定网站爬取策略方法，完成关键技术攻坚，提升爬取效率和稳定性；

3、负责网页数据抽取算法研究和开发，提升网页数据抓取效率和质量

4、及时解决生产上的系统问题，并对业务需求提供支持

任职要求：

1、大专学历，有1年及以上相关工作经验，具有大型web登陆分析、爬虫、反爬、浏览器等研发经验者优先；

2、熟悉HTTP、HTTPS协议机HTTP Client等工具，能在协议层做性能方面调优，能通过Fiddler等抓包软件解决爬虫及网络相关问题；

3、精通WebBrowser原理及js调用，做过复杂业务的表单提交和复杂数据抓取者优先；

4、熟悉分布式应用开发原理及多线程开发技术；

5、熟悉正则表达式、xpath等web信息提取及文本分析技术，有从事网络爬虫、网页信息抽取的经验；

6、精通Mysql数据库操作，会多条件查询语句性能优化，熟悉MongoDb数据库的基本操作；

7、具有较强的学习能力、自我管理能力、工作认真负责。

有求职意向者，请针对启信宝的全维度数据的抓取，给出你的抓取方案流程（包括账号登录机制），聊聊你的想法。

深圳就位网科技有限公司（www.jiuweiwang.com），专注产业大数据挖掘和数据应用服务。
团队擅长数据整合、数据建模、语义分析、产业数据分析、行业标准制定，主要为政府、园区运营商、投融资机构、行业协会、行业研究机构、产业地产商等用户提供专业的数据应用解决方案。公司工作氛围好，重视员工培养，团队有活力，处于快速发展期，可以为员工提供足够的发展空间，诚挚欢迎各位勇于拼搏的“拼客”加入我们！