长沙招聘

职位描述：
岗位职责:

1. 负责设计和开发分布式的金融信息网络爬虫应用
2. 负责网页信息抽取技术的研究和开发
3. 负责解决爬取过程中的各种反爬问题
4. 负责数据抓取，数据清洗，数据架构开发维护等工作

任职资格:

1、精通python,java等开发语言
2、熟悉网页抓取原理及技术，熟悉基于Cookie的网站登录原理，熟悉基于正则表达式、Xpath、CSS等网页信息，熟悉常规的反爬策略，熟悉代理池、JS解读，请求解析，抓包拦截等基本相关技能，熟悉爬虫、种子、去重、提取、过滤、分发、DNS
cache、异步处理等概念和过程；
3、熟悉多线程、网络编程，精通网页抓取原理及技术，精通正则表达式，能从结构化的和非结构化的数据中获取信息，具备信息检索、web挖掘等搜索引擎相关知识，有从事网络爬虫、网页去重、网页信息抓取、网页分类中任一种程序开发经验；
4、熟练掌握数据库开发，对数据处理和数据质量有较深认识；精通至少一种主流数据NoSQL、mysql数据库；
5、熟悉如scrapy,crawley,portia,newspaper,python-goose框架优先
6、有海量数据爬取经验者优先；有爬取过
金融咨询相关平台数据优先；具有自然语言处理、机器学习背景优先。
7、有实际分布式爬虫开发经验优先

举报 分享

翼勋金融简介
上海翼勋互联网金融信息服务有限公司（简称翼勋金融）是一家互联网金融综合服务平台，注册资金1亿元，总部位于上海，公司服务范围已覆盖江苏、浙江、安徽、四川、辽宁等20多个省,70多个城市，16年7月翼勋金融在全国开设门店已达90多家，门店覆盖员工人数逾5000人。
翼勋金融专注于网络信贷撮合服务、消费金融等领域的发展，致力于用自身强大的平台建设，卓越的风控技术、大数据驱动能力为广大用户提供专业、简单、优质、便捷的普惠金融服务。
2016年，凭借良好的行业口碑及领先的金融科技技术， 翼勋金融成为上海互联网金融行业协会理事单位、上海金融信息行业协会副会长单位。
未来，翼勋金融将秉承“普惠金融，服务人人”的理念，为有融资、投资需求的广大用户建立更为高效、透明、安全、便捷的互联网金融服务，为创建一个便捷、健康、多元化的互联网金融生态圈而不懈努力。
二、我们的翼勋
拥有一支高学历、高素质的专业队伍，员工人数逾5000人，干部及专业人才中本科及以上学历占比80%以上，研究生占比达20%。
我们的足迹：
2015.05.28 翼勋金融正式成为上海信息服务业行业协会会员
2015.07.08 翼勋金融与零壹财经共同研究、出版的《2015年中国P2P借贷服务行业白皮书》正式发行
2015.07.13翼勋金融旗下“钜宝盆”平台成交额突破14.5亿元
2015.07.21翼勋金融成为上海金融信息行业协会首批理事单位
2015.09.30 翼勋金融布局全国门店达50家
2015.10.10 翼勋金融成为中国经济周刊理事单位
2015.10.12 翼勋金融获赠诺贝尔和平奖得主尤努斯教授颁发普惠金融感谢状
2015.11.13翼勋金融荣获新闻晨报“金罗盘”***财富管理机构评选“最受信赖互联网金融机构”奖
2015.11.15 翼勋金融在全国开设已达61家门店，员工人数超2600人
2015.12.11 翼勋金融荣获第一财经金融价值榜CFV“***金融服务互联网金融机构”
2016.01.21 翼勋金融荣获“第五届中国公益节——2015年度互联网金融责任品牌”奖
2016.03.15 翼勋金融成为上海市互联网金融行业协会理事单位
翼勋金融成为互联网金融信息安全公共服务平台企业会员
2016.03.24翼勋金融在全国开设门店已达80家，员工人数超4500人
2016.05.27翼勋金融荣升上海金融信息行业协会副会长单位
2016.07.03 钜宝盆累计投资额已超90亿，投资人数已达11.21万人
2016.07.11翼勋金融在全国开设门店已达85家，员工人数超4700人
2016.07.13翼勋金融首家三农营业部（徐州）正式开业
2016.07.17 翼勋金融携手朗迪峰会打造首届中国峰会行业最高规格金融科技盛会（Lend It）
2016.07.25翼勋金融在全国开设门店已达86家，员工人数超4800人