北京招聘

1、负责分布式网络爬虫系统的架构设计与开发，参与系统设计与开发;
2、互联网站、网页、链接的特征挖掘，进行网页抓取、数据提取、清洗、入库;
3、负责爬虫核心算法的策略优化研究，充分利用资源，避免限制;
4、优化搜索、匹配、抓取等关键程序的性能及效率;
5、负责反爬策略设计和开发等。

认知要求
1、1年以上爬虫开发相关经验;
2、精通种开源爬虫框架，如scrapy、webmagic等， 有开发爬虫框架经验优先;
3、熟悉反爬虫优先。
职能类别：
Python开发工程师
关键字：
入库数据提取网页抓取爬虫框架反爬虫策略优化爬虫开发

万得（Wind）是中国金融大数据行业的领跑者，服务于境内90%以上的银行、证券、保险、基金、信托等各类金融机构。成立20余载，万得致力于为金融领域专业人士提供准确及时的数据和行业沟通平台。肩负着中国金融信息服务行业使命重任、多年坚持自主研发，万得对中国大数据行业的发展起到举足轻重的作用，其市场、技术、服务和品牌已成为大数据行业的参考标准。