爬虫项目经理
深圳前海增信通信息服务有限公司
- 公司规模:50-150人
- 公司性质:民营公司
- 公司行业:计算机服务(系统、数据服务、维修)
职位信息
- 发布日期:2017-07-19
- 工作地点:深圳-南山区
- 招聘人数:1人
- 学历要求:大专
- 职位月薪:1.2-2万/月
- 职位类别:技术支持/维护经理
职位描述
职位描述:
岗位职责:
1.参与爬虫系统的设计和开发,负责爬虫系统的框架设计
2.负责网页信息抽取、数据清洗等研发和优化工作
3.对互联网海量业务进行整合、分析挖掘
4.与技术团队进行沟通,负责爬虫数据与业务系统的整合对接
5.能主导部门新技术研究、开发
任职要求:
1.对爬虫、图形验证码识别等技术有较深入研究
2. 计算机或相关专业专科以上学历,3年以上爬虫工作经验
3. 掌握网络爬虫开发原理,对互联网各种类型数据交互模式数据,知道如何处理需登录网站、动态页面、封账号IP等各种情况下的数据采集方法
4. 熟悉大规模网页爬取,深度网页爬取,熟悉Nutch、Scrapy、Lucene、Heritrix、Solr、Sphinx等工具
3. 熟悉J2EE技术平台和主要框架,精通Java开发,能熟练应用spring,MyBatis, MQ等主流技术框架;
4. 对数据库有充分了解,熟悉Oracle、MySQL、NonSQL等技术
5. 熟悉分布式系统开发和存储技术,如Redis、Memcache、Ehcache等
6. 学习能力强,对新技术研究狂热,有很强独立研究能力
举报
分享
岗位职责:
1.参与爬虫系统的设计和开发,负责爬虫系统的框架设计
2.负责网页信息抽取、数据清洗等研发和优化工作
3.对互联网海量业务进行整合、分析挖掘
4.与技术团队进行沟通,负责爬虫数据与业务系统的整合对接
5.能主导部门新技术研究、开发
任职要求:
1.对爬虫、图形验证码识别等技术有较深入研究
2. 计算机或相关专业专科以上学历,3年以上爬虫工作经验
3. 掌握网络爬虫开发原理,对互联网各种类型数据交互模式数据,知道如何处理需登录网站、动态页面、封账号IP等各种情况下的数据采集方法
4. 熟悉大规模网页爬取,深度网页爬取,熟悉Nutch、Scrapy、Lucene、Heritrix、Solr、Sphinx等工具
3. 熟悉J2EE技术平台和主要框架,精通Java开发,能熟练应用spring,MyBatis, MQ等主流技术框架;
4. 对数据库有充分了解,熟悉Oracle、MySQL、NonSQL等技术
5. 熟悉分布式系统开发和存储技术,如Redis、Memcache、Ehcache等
6. 学习能力强,对新技术研究狂热,有很强独立研究能力
职能类别: 技术支持/维护经理
公司介绍
增信通成立于2014年,是国内领先的金融风控产品及服务供应商。
公司总部位于深圳,并在北京、上海、成都设立办事处,目前已为国内超过500家金融及金融科技机构提供风控服务,包括平安普惠、宜信、京东金融、掌众金融、众安保险等知名机构。
增信通是国家高新技术企业,具有软件企业及软件产品双软认证,通过了ISO9001质量体系认证,在风控领域拥有超过20项软件著作权。2017年,增信通与大数据系统计算技术国家工程实验室设立征信大数据技术研究中心,并于深圳大学联合设立大数据信息工程处理实验室。
2016年,增信通获上市公司初灵信息千万级A轮投资。
公司总部位于深圳,并在北京、上海、成都设立办事处,目前已为国内超过500家金融及金融科技机构提供风控服务,包括平安普惠、宜信、京东金融、掌众金融、众安保险等知名机构。
增信通是国家高新技术企业,具有软件企业及软件产品双软认证,通过了ISO9001质量体系认证,在风控领域拥有超过20项软件著作权。2017年,增信通与大数据系统计算技术国家工程实验室设立征信大数据技术研究中心,并于深圳大学联合设立大数据信息工程处理实验室。
2016年,增信通获上市公司初灵信息千万级A轮投资。
联系方式
- 公司地址:地址:span北航大厦2号楼3A02