北京招聘

1.岗位职责

(1) 对目标网站进行数据爬取分析，定义最优策略；

(2) 负责爬虫系统的架构设计和研发，独立进行抓取、抽取和清洗工作；

(3) 负责相关技术难点的攻克；

(4) 负责大规模数据爬虫的监控报警、性能优化等工作。

2.任职要求

(1) 计算机相关专业本科及以上学历，3年以上Python或Java爬虫项目独立开发经验者优先；

(2) 熟悉Scrapy、Pyspider、webmagic、Nutch等开源框架中至少一种；

(3) 熟悉正则表达式、XPath、DOM、HTML等网页信息抽取技术；

(4) 熟悉MySQL、Redis等数据库；

(5) 具备大型网站采集经验者优先，熟悉反爬虫技术者优先；

(6) 具备分布式系统架构使用/研发经验、熟悉Docker者优先。

   丙晟科技是一家专注于互联网科技的创新服务商，公司由万达、腾讯、高灯三方成立，是一家合资网络科技公司，全力打造全球领先的线上线下融合新消费模式。整合三家优势资源，一方面对万达商业中心线下场景进行全面数字化升级，打造智慧广场、智慧门店，紧密连接商业中心、商户和消费者，形成“超级导购”、“超级店长”、“超级会员”三位一体体系，提升商业中心效能和消费体验。