爬虫工程师
深圳中业兴融互联网金融服务有限公司
- 公司规模:150-500人
- 公司性质:民营公司
- 公司行业:金融/投资/证券
职位信息
- 发布日期:2019-06-01
- 工作地点:深圳-南山区
- 招聘人数:若干人
- 工作经验:2年经验
- 学历要求:本科
- 职位月薪:1.5-2.5万/月
- 职位类别:软件工程师 高级软件工程师
职位描述
1、参与公司所需的爬虫系统架构设计、数据库设计;
2、负责设计、开发、维护分布式的网络爬虫,包括调度、抓取、维护、验证等爬虫工作,建设完善分布式爬虫系统;
3、负责抽取算法和数据库建模的调研和设计,保证抽取、去重、分类、解析、增量融合入库等流程之后的数据结果;
4、对反爬机制有研究,有能力破解复杂图片验证码/账号限制/ip限制。
任职要求:
1、全日制本科及以上学历,至少2年以上Python开发经验;
2、熟练掌握Java/Python任意编程语言,优先考虑Python;
3、有能力破解复杂的图片验证码,有能力解决复杂的反爬限制,熟练使用正则表达式;
4、有通用分布式爬虫系统架构和开发经验,能快速部署新的爬虫应用,有scrapy项目经验加分;
5、熟悉爬虫抓取原理及技术,熟悉搜索引擎,从结构化的和非结构化的数据中获取信息,有网站开发经历加分,有搜索开发经验加分;
6、熟悉关系型(mysql/postgresql)、非关系型数据库(mongodb/hbase/elasticsearch)、缓存数据库(redis/memcached),有过建模和使用经验;
7、具有分布式、多线程/协程/进程的编程经验,有可证明的良好编码习惯,github有个人项目加分;
8、逻辑思维优秀,有良好的沟通能力和语言表达能力。
公司介绍
深圳中业兴融互联网金融服务有限公司(简称:中业兴融)成立于2015年2月份,是中业金服旗下专业的网络借贷信息中介服务平台。
作为深圳最有活力和创造力的互联网金融创新性企业的一份子, 中业兴融已经于2017年9月份完成首轮融资,中业兴融坚持以普惠金融为使命,利用人工智能的科技发展机遇,让更多用户享受到简单、便捷、高效的金融服务。为解决了中小企业融资难、融资贵等问题,实现全社会各阶层、各群体共享金融服务,支持实体经济可持续发展贡献力量。
2016年-2017年期间,中业兴融在构筑合规基础上厚积薄
作为深圳最有活力和创造力的互联网金融创新性企业的一份子, 中业兴融已经于2017年9月份完成首轮融资,中业兴融坚持以普惠金融为使命,利用人工智能的科技发展机遇,让更多用户享受到简单、便捷、高效的金融服务。为解决了中小企业融资难、融资贵等问题,实现全社会各阶层、各群体共享金融服务,支持实体经济可持续发展贡献力量。
2016年-2017年期间,中业兴融在构筑合规基础上厚积薄
联系方式
- Email:hr.sz@zyxr.com
- 公司地址:地址:span创业路1777号海信南方大厦17楼