爬虫开发工程师
上海文盛资产管理股份有限公司
- 公司规模:150-500人
- 公司性质:民营公司
- 公司行业:金融/投资/证券
职位信息
- 发布日期:2017-06-06
- 工作地点:上海-长宁区
- 招聘人数:1人
- 工作经验:5-7年经验
- 学历要求:本科
- 职位月薪:25-35万/年
- 职位类别:互联网软件开发工程师
职位描述
职位描述:
1、负责设计和开发分布式的网络爬虫,定向数据的采集与爬取、解析处理、入库及备份等数据日常工作;
2、负责网页爬虫核心技术算法的研究和开发,研究各种网页形态,探寻特点和规律,提升网页抓取的效率和质量;
3、设计和开发分布式网络爬虫系统,并进行多平台信息抓取和分析工作;
4、负责网页信息抽取、数据清洗、深度提取和挖掘等研发和优化工作;
5、负责网页的自然语义解析,解析出其中的准确数据;
6、爬虫核心算法和策略优化,熟悉采集系统的调度策略,维护升级。
相关工作经验:
1、计算机及相关专业本科及以上学历,3-5年工作经验,2年以上的爬虫程序设计开发经验;
2、熟练掌握一门主流语言的爬虫框架(Java 的 Nutch, Python 的 Scrapy等);熟练掌握至少一种主流的web抓包,开发工具,熟悉数据库,如Mysql、MongoDB等
3、熟悉 Http 协议的基本原理,了解 Http 协议交互的流程和 http head的作用与意义,熟悉nutch,httpclient,jsoup等工具;
4、 熟练掌握 javascript, 熟悉大部分的主流前端框架和模板技术,能够熟练使用 XPath 对 DOM 文档进行查询和解析;精通正则表达式,从结构化的和非结构化的数据中获取信息;
5、能够对自然语言进行解析,获得其中准确数据。
6、工作踏实认真,思路清晰,有强烈的责任心、优秀的协调沟通能力和团队合作精神。
举报
分享
1、负责设计和开发分布式的网络爬虫,定向数据的采集与爬取、解析处理、入库及备份等数据日常工作;
2、负责网页爬虫核心技术算法的研究和开发,研究各种网页形态,探寻特点和规律,提升网页抓取的效率和质量;
3、设计和开发分布式网络爬虫系统,并进行多平台信息抓取和分析工作;
4、负责网页信息抽取、数据清洗、深度提取和挖掘等研发和优化工作;
5、负责网页的自然语义解析,解析出其中的准确数据;
6、爬虫核心算法和策略优化,熟悉采集系统的调度策略,维护升级。
相关工作经验:
1、计算机及相关专业本科及以上学历,3-5年工作经验,2年以上的爬虫程序设计开发经验;
2、熟练掌握一门主流语言的爬虫框架(Java 的 Nutch, Python 的 Scrapy等);熟练掌握至少一种主流的web抓包,开发工具,熟悉数据库,如Mysql、MongoDB等
3、熟悉 Http 协议的基本原理,了解 Http 协议交互的流程和 http head的作用与意义,熟悉nutch,httpclient,jsoup等工具;
4、 熟练掌握 javascript, 熟悉大部分的主流前端框架和模板技术,能够熟练使用 XPath 对 DOM 文档进行查询和解析;精通正则表达式,从结构化的和非结构化的数据中获取信息;
5、能够对自然语言进行解析,获得其中准确数据。
6、工作踏实认真,思路清晰,有强烈的责任心、优秀的协调沟通能力和团队合作精神。
职能类别: 互联网软件开发工程师
关键字: 爬虫 开发 java python
公司介绍
上海文盛资产管理股份有限公司(Shanghai Wensheng Asset Management Co.,Ltd)成立于2006年9月,是浙江文华控股有限公司旗下控股子公司,注册资本为100003.1828万元人民币。目前公司主营业务为金融不良资产投资管理、企业管理咨询、投资管理及咨询(除经纪外)。
浙江文华控股有限公司(Zhejiang Wenhua Holding Co.,Ltd)成立于2003年10月,是一家在浙江省注册、由民间资本投资设立的资产管理公司,主营不良资产(包括实物、债权和股权)处置等投资业务,注册资金人民币2000万元。公司所处的浙江省会城市杭州及其周边的宁波、温州、绍兴、义乌等地区,民营经济发达,为不良资产运作提供了丰沛的市场客户资源。
目前,截至2019年末,公司累计管理规模(债权本息)1075亿元,文盛资产的经营服务网络已经覆盖至京津冀地区、长三角地区以及珠三角地区多个省、直辖市和经济特区。总部在上海,在北京、杭州、南京、广州成立了分公司。在多年的良好经营下本公司已经培养出了一大批优秀的不良资产处置人员和管理人才,并且在业界打造出了独属于“文盛”的良好口碑和品牌。曾多次被受邀参加***院和四大资产管理公司召开或主持的金融不良资产的法律、法规及金融不良资产行业内交流研讨会,成为国内民营不良资产管理公司当中的翘楚。
立足当下,展望未来。文盛资产将在稳定巩固业务团队的基础上,集中探索金融创新,多渠道拓展业务资金来源。同时积极开展多品种不良资产投资管理业务,致力于将公司打造成行业内领先的特殊机会投资管理服务商,为特殊机会投资人提供更好、更优质的不良资产投资管理服务。
上海地址:上海市徐汇区龙腾大道2763号滨江城开中心5号楼(200232)
杭州地址:杭州市江干区民心路280号平安金融中心A幢32楼(310016)
北京地址:北京市朝阳区安定路5号天圆祥泰大厦1818室(100029)
南京地址:南京市鼓楼区汉中路2号亚太商务楼29层BC单元(210005)
广州地址:广州市天河区珠江新城冼村路5号凯华国际中心51楼(510627)
浙江文华控股有限公司(Zhejiang Wenhua Holding Co.,Ltd)成立于2003年10月,是一家在浙江省注册、由民间资本投资设立的资产管理公司,主营不良资产(包括实物、债权和股权)处置等投资业务,注册资金人民币2000万元。公司所处的浙江省会城市杭州及其周边的宁波、温州、绍兴、义乌等地区,民营经济发达,为不良资产运作提供了丰沛的市场客户资源。
目前,截至2019年末,公司累计管理规模(债权本息)1075亿元,文盛资产的经营服务网络已经覆盖至京津冀地区、长三角地区以及珠三角地区多个省、直辖市和经济特区。总部在上海,在北京、杭州、南京、广州成立了分公司。在多年的良好经营下本公司已经培养出了一大批优秀的不良资产处置人员和管理人才,并且在业界打造出了独属于“文盛”的良好口碑和品牌。曾多次被受邀参加***院和四大资产管理公司召开或主持的金融不良资产的法律、法规及金融不良资产行业内交流研讨会,成为国内民营不良资产管理公司当中的翘楚。
立足当下,展望未来。文盛资产将在稳定巩固业务团队的基础上,集中探索金融创新,多渠道拓展业务资金来源。同时积极开展多品种不良资产投资管理业务,致力于将公司打造成行业内领先的特殊机会投资管理服务商,为特殊机会投资人提供更好、更优质的不良资产投资管理服务。
上海地址:上海市徐汇区龙腾大道2763号滨江城开中心5号楼(200232)
杭州地址:杭州市江干区民心路280号平安金融中心A幢32楼(310016)
北京地址:北京市朝阳区安定路5号天圆祥泰大厦1818室(100029)
南京地址:南京市鼓楼区汉中路2号亚太商务楼29层BC单元(210005)
广州地址:广州市天河区珠江新城冼村路5号凯华国际中心51楼(510627)
联系方式
- Email:joinus-bj@wenshengamc.com
- 公司地址:上海市徐汇区龙腾大道2763号滨江城开中心5号楼(200232)