上海 [切换城市] 上海招聘上海计算机软件招聘上海数据库工程师/管理员招聘

高级数据采集工程师

上海中估联信息技术有限公司

  • 公司规模:50-150人
  • 公司性质:民营公司
  • 公司行业:房地产

职位信息

  • 发布日期:2017-10-14
  • 工作地点:上海
  • 招聘人数:1人
  • 工作经验:2年经验
  • 学历要求:本科
  • 职位月薪:1-1.5万/月
  • 职位类别:数据库工程师/管理员  

职位描述

职位描述:
职责范围:
1.负责建立和管理分布式网络爬虫系统的架构设计、研发、部分编程工作。
2.负责管理采集进度,配合采集数据的统计、查询、汇报。
3.爬取各种网络结构化和非结构化数据。
4.参与数据融合流程的设计与部署,提升现有数据爬取系统的效率。
5.为团队成员提供技术培训。
6.完成上级安排的其它相关工作。

专业技术要求:
1.2年以上python或者node.js编程经验,熟悉scrapy(beautifulsoap)等爬虫框架。
2.熟悉多线程编程,提高爬虫效率。
3.熟悉基于规则的网页信息抽取,精通正则表达式。
4.有从结构化的和非结构化的数据中获取信息的经验,了解分布式数据存储和计算。
5.熟悉主流爬虫工具与技术,或具有丰富的网络爬取经验。
6.了解各类房地产信息平台、WEB-GIS API、点评平台、论坛平台或者政务公开平台的信息服务机制者优先。

其它要求:
1.大学本科及以上学历,信息管理、信息安全、情报学、计算机科学与工程专业,其它相关专业择优考虑。
2.能独立完成汇报工作,熟练使用PPT及主流大数据图表(如Tableau)表达设计思路与工作成果。
3.善于独立思考解决问题,具备良好的团队管理、资源协调、沟通能力。
4.热衷于技术创新与难点突破,能承受一定的工作压力。

职能类别: 数据库工程师/管理员

关键字: 爬虫框架 python 多线程编程 爬取 正则

举报 分享

公司介绍

中估联行

全称中估联行不动产估价联盟(China Appraisal Association,英文缩写CAA),是由中国各地最优秀的房地产估价咨询机构组成,通过联盟成员机构之间资源共享、优势互补、联动协作、集约发展等合作形式,打造全国不动产估价顾问领域具备最强实力和最高水平的综合服务平台,从而为广大客户提供更为专业化、全国化、信息化、便利化的优质服务。

作为全国不动产估价顾问领域优势资源整合与协作的平台,中估联行已经通过智能评估支持系统( VISS )、估价作业支持系统( VOSS )、《中估联行估价实务手册》等重点工作的推进,实现了联盟内部在房地产数据库、信息化系统建设、作业流程、技术标准和服务规范等方面的优化和统一。

另外,"中估联行"联盟成员之间还在不动产数据信息提供、创新产品研究、企业品牌营销、企业内部管理、专业培训、海外机构互动协助等方面进行深层次的合作和交流,为房地产评估和顾问咨询行业更好的适应市场变化、满足客户需求进行有益探索和尝试,为房地产评估和顾问咨询领域的行业发展做出应有的贡献。

同时,中估联行已经和国内外的行业相关企业、机构和团体建立了全面的战略合作伙伴关系,共同建立起一个多元化、全方位的业务交流与合作模式,强强联手,实现共赢。


上海中估联信息技术有限公司

上海中估联信息技术有限公司由"中估联行"主要成员投资成立的数据分析和软件开发企业。公司于2014年4月成立,集合房地产估价行业优秀的估价机构与IT行业优秀的团队组合, 旨在充分利用估价行业的专业优势,结合自计算机批量评估技术、大数据挖掘与分析技术,以及系统软件研发等方面的资源和优势,研究估价行业的大数据,打造估价企业的大系统,面向全国,服务行业,成为房地产估价行业优秀的信息化解决方案服务供应商。

联系方式

  • 公司地址:地址:span上海市长宁区延安西路777号8楼