爬虫技术专家-微博广告平台
新浪微博
- 公司规模:500-1000人
- 公司性质:民营公司
- 公司行业:互联网/电子商务
职位信息
- 发布日期:2019-11-22
- 工作地点:北京
- 招聘人数:1人
- 工作经验:3-4年经验
- 学历要求:本科
- 职位月薪:2-5万/月
- 职位类别:高级软件工程师
职位描述
1. 负责主流网站/APP模拟登录、全网数据抓取及数据架构设计等核心工作,包括爬虫、结构化提取和内容分析等相关功能
2. 参与数据层建设,专注于抓取平台建设和行业垂直领域数据爬取、清洗、分析、归纳并负责核心编码实现
3. 负责抓取策略设计、更新和维护
4.负责设计和开发网络爬虫,解决实际开发过程碰到的各类问题
岗位要求:
1.计算机相关专业本科及以上学历,三年以上从事爬虫工作经验
2.良好的代码工程能力,扎实的数据结构和算法功底
3.熟悉Linux,熟练掌握go、python、java、php等其中一门或两门语言并对语言底层机制和原理有深入理解
4.熟悉tcp/ip, http, xml,json等网络标准/协议,熟悉动态页面渲染技术和页面结构化抽取技术
5.熟练掌握数据库存储(如:MySQL),缓存(如:Memcache、Redis)
6.精通主流的爬虫框架,有分布式爬虫架构经验者优先
7.有大型爬虫系统设计和实现经验,对爬虫、网页分析、反爬虫策略调优有丰富经验
职能类别:高级软件工程师
公司介绍
微博是人们在线创作、分享和发现内容的中国领先社交媒体平台。微博创立于2009年,是新浪内部孵化的业务板块,并于2014年在美国纳斯达克市场上市,股票代码(Nasdaq: WB)。微博基于公开平台架构,让用户能够公开实时发表内容,与他人进行社交互动并与世界紧密相连。微博上用户之间的关系可能是不对称的,每个用户都可以关注任何其他用户,对任何一条微博发表评论并转发。微博平台这种简单、不对称和分发式的特点使原创微博能演化为快速传播、多方参与并实时更新的话题流。商业化方面,微博能帮助其广告和营销客户提供综合性的社交营销方案,向用户推销品牌、产品和服务。
联系方式
- 公司地址:地址:span北京市海淀区西北旺东路10号院西区8号楼新浪总部大厦