北京 [切换城市] 北京招聘北京计算机软件招聘北京高级软件工程师招聘

爬虫技术专家-微博广告平台

新浪微博

  • 公司规模:500-1000人
  • 公司性质:民营公司
  • 公司行业:互联网/电子商务

职位信息

  • 发布日期:2019-11-22
  • 工作地点:北京
  • 招聘人数:1人
  • 工作经验:3-4年经验
  • 学历要求:本科
  • 职位月薪:2-5万/月
  • 职位类别:高级软件工程师

职位描述

1. 负责主流网站/APP模拟登录、全网数据抓取及数据架构设计等核心工作,包括爬虫、结构化提取和内容分析等相关功能

2. 参与数据层建设,专注于抓取平台建设和行业垂直领域数据爬取、清洗、分析、归纳并负责核心编码实现

3. 负责抓取策略设计、更新和维护

4.负责设计和开发网络爬虫,解决实际开发过程碰到的各类问题

岗位要求:

1.计算机相关专业本科及以上学历三年以上从事爬虫工作经验

2.良好的代码工程能力,扎实的数据结构和算法功底

3.熟悉Linux,熟练掌握gopythonjavaphp等其中一门或两门语言并对语言底层机制和原理有深入理解

4.熟悉tcp/ip, http, xmljson等网络标准/协议,熟悉动态页面渲染技术和页面结构化抽取技术

5.熟练掌握数据库存储(如:MySQL),缓存(如:MemcacheRedis

6.精通主流的爬虫框架,有分布式爬虫架构经验者优先

7.有大型爬虫系统设计和实现经验,对爬虫、网页分析、反爬虫策略调优有丰富经验



职能类别:高级软件工程师

公司介绍

微博是人们在线创作、分享和发现内容的中国领先社交媒体平台。微博创立于2009年,是新浪内部孵化的业务板块,并于2014年在美国纳斯达克市场上市,股票代码(Nasdaq: WB)。微博基于公开平台架构,让用户能够公开实时发表内容,与他人进行社交互动并与世界紧密相连。微博上用户之间的关系可能是不对称的,每个用户都可以关注任何其他用户,对任何一条微博发表评论并转发。微博平台这种简单、不对称和分发式的特点使原创微博能演化为快速传播、多方参与并实时更新的话题流。商业化方面,微博能帮助其广告和营销客户提供综合性的社交营销方案,向用户推销品牌、产品和服务。

联系方式

  • 公司地址:地址:span北京市海淀区西北旺东路10号院西区8号楼新浪总部大厦