北京招聘

职位信息

1.完成爬虫系统的设计与开发，搭建数据采集平台，通过对数据的抓取、解析、调度、存储等模块的拆分与优化，构建和完善统一的抓取服务平台；

  2.把握网络爬虫的核心技术研究方向，例如信息抽取、数据聚类、重组、搜索；

  3.分析爬虫系统的技术缺陷，对策略架构做出合理性地调整和改进；

4.设计爬虫策略和防屏蔽规则，提升网页抓取的效率和质量 

  5.负责指定网页数据抓取需求的实现；

6.及时解决爬虫抓取过程中出现的问题并不断维护、优化程序；

  

  任职要求：

1、专科及以上学历，计算机相关专业；

2、3年以上Python开发的经验，2年以上爬虫开发经验；熟悉MySQL或了解PostgreSQL数据库，能协助检查数据入库环节；有多线程开发经验；

3、熟悉整个爬虫的设计及实现流程，精通网页抓取原理及技术，精通正则表达式、HTML，JS，AJAX等网页信息抽取技术，从结构化的和非结构化的数据中获取信息；

4、有海量数据爬取经验者优先，有大数据量、高并发项目经验者优先，有各种证券数据和财经信息爬取技术经验者优先；

5、具有搜索相关技术研发、数据挖掘、数据处理、自然语言处理、信息检索、机器学习背景者优先；

6.研究过反爬虫技术，熟悉地址去重算法；
7.能独立解决技术问题；

郑州紫硅信息技术有限公司坐落于郑州市金水区金城时代广场，是一家从事APP软件设计、开发和运营的公司。我司将为员工提供广阔的发展平台、公平公正的晋升机会、优质的办公环境以及丰富多样的员工福利和活动。
有志于在APP软件开发领域发展的有识之士，欢迎加入我们的团队。