爬虫开发工程师
北京无限讯奇信息技术有限公司
- 公司规模:150-500人
- 公司行业:计算机软件 通信/电信运营、增值服务
职位信息
- 发布日期:2017-04-17
- 工作地点:北京-大兴区
- 招聘人数:5人
- 工作经验:3-4年经验
- 学历要求:大专
- 职位月薪:1-1.5万/月
- 职位类别:互联网软件开发工程师
职位描述
职位描述:
工作职责:
1、负责互联网站、网页、链接的特征挖掘,对指定的多个网站的网页进行网页抓取、数据提取、清洗、入库;
2、参与分布式爬虫和数据采集系统的架构设计和开发;
3、参与抓取数据的处理分析。
任职资格:
1、计算机/电子/通信类、数学、金融等理工相关专业,2年及以上工作经验;
2、熟练使用Python、java等语言进行网络爬虫编写,熟悉scrapy;
3、熟练使用MySQL、MongoDB、Redis等数据库操作和开发;
4、熟练掌握分布式爬虫框架,对模拟登录、代理IP技术有一定了解;
5、有hadoop或spark平台使用经验优先。
举报
分享
工作职责:
1、负责互联网站、网页、链接的特征挖掘,对指定的多个网站的网页进行网页抓取、数据提取、清洗、入库;
2、参与分布式爬虫和数据采集系统的架构设计和开发;
3、参与抓取数据的处理分析。
任职资格:
1、计算机/电子/通信类、数学、金融等理工相关专业,2年及以上工作经验;
2、熟练使用Python、java等语言进行网络爬虫编写,熟悉scrapy;
3、熟练使用MySQL、MongoDB、Redis等数据库操作和开发;
4、熟练掌握分布式爬虫框架,对模拟登录、代理IP技术有一定了解;
5、有hadoop或spark平台使用经验优先。
职能类别: 互联网软件开发工程师
公司介绍
北京无限讯奇信息技术有限公司是中国移动12580综合信息服务平台的独家合作伙伴。
公司致力于大众生活信息的精确服务,现有北京、上海两个运营中心。承建中国移动的全国12580综合信息服务支撑平台、并负责平台运营和信息提供。
公司正着力构建国内第一个基于移动电话、互联网的最便捷、有效、可信的信息桥梁。
作为中国移动在信息服务领域的全国首批合作伙伴,无限讯奇正在协助运营商设计、开发,并承建全国的业务平台;承担全部的运营、支撑工作。
公司将全方位提供优选的商旅、娱乐、生活、餐饮、交通指路等综合信息服务上海和广州地区的目标任务是通过组建本地地面团队完成对本地30余个行业的商户详细信息收集,带领团队按照公司提供的行业需求模板完成上海和广州省内主要城市商户信息采集并确认,以满足消费者查询需求。
公司致力于大众生活信息的精确服务,现有北京、上海两个运营中心。承建中国移动的全国12580综合信息服务支撑平台、并负责平台运营和信息提供。
公司正着力构建国内第一个基于移动电话、互联网的最便捷、有效、可信的信息桥梁。
作为中国移动在信息服务领域的全国首批合作伙伴,无限讯奇正在协助运营商设计、开发,并承建全国的业务平台;承担全部的运营、支撑工作。
公司将全方位提供优选的商旅、娱乐、生活、餐饮、交通指路等综合信息服务上海和广州地区的目标任务是通过组建本地地面团队完成对本地30余个行业的商户详细信息收集,带领团队按照公司提供的行业需求模板完成上海和广州省内主要城市商户信息采集并确认,以满足消费者查询需求。
联系方式
- 公司地址:上班地址:亦庄经济技术开发区隆庆街18号安快创业谷