北京招聘

岗位职责：

1、完成对复杂网站的数据抓取和交互模拟；

2、通过各种渠道或方式对相关网站进行抓取；

3、不断完善并维护相关网站的抓取，使之稳定运行，核心逻辑必须有单元测试；

4、善于灵活运用各种非爬虫技术解决爬虫相关问题；

5、随时响应并解决突发问题；

6、完成领导交办的其他工作。

任职要求：

1、本科以上学历，1年以上网站抓取经验，有电商网站、秒杀相关抓取经验；

2、有较强的网站分析能力，熟知各种反爬措施及相关解决办法

技能要求；

3、熟练使用eventlet、gevent、requests、selenium等技术实现高并发稳定抓取；

4、熟练使用消息队列（MQ）、celery等异步框架实现分布式任务处理；

5、熟知HTTP、TCP、Socket等底层知识；

6、熟练掌握Fiddler、Http debugger等抓捕工具；

7、熟悉Sql Server基本使用；

8、熟悉Scapy，熟悉Javascript，有一定的分析能力；

9、能使用mock进行单元测试；

10、善于沟通、有团队协作精神。

利丰供应链管理（中国）有限公司成立于2008年10月08日，主要经营范围为普通货物的仓储和仓储配套服务，承办海运、陆运、空运进出口货物、国际展品、私人物品及过境货物的国际运输代理业务，包括：揽货、托运、订舱、仓储、中转、集装箱拼装拆箱、结算运杂费、报关、报验、保险、相关的短途运输服务及运输咨询业务等。