爬虫开发工程师
广州市衡生科技有限公司
- 公司规模:少于50人
- 公司性质:民营公司
- 公司行业:金融/投资/证券
职位信息
- 发布日期:2020-10-19
- 工作地点:广州-天河区
- 招聘人数:1人
- 工作经验:2年经验
- 学历要求:本科
- 职位月薪:0.8-1.2万/月
- 职位类别:爬虫开发工程师
职位描述
技能要求:Python,爬虫,MySQL,爬虫架构。
岗位职责:
1、负责金融网站数据的收集,负责采集方案的设计、代码实现等;
2、负责规划并实现分布式爬虫和数据采集系统的技术实现方案;
3、设计和开发分布式网络爬虫程序;
4、大容量数据的管理及分布式存储;
5、设计优化爬虫调度系统,优化调度策略。
任职要求:
1、2-5年工作经验,本科及以上学历;
2、熟悉Python基础,熟悉多线程编程环境,熟悉常见开源框架;
3、了解前端技术,HTML,JavaScript,Ajax等 ;
4、熟练使用正则表达式,精通网页数据提取;
5、熟悉抓取原理及技术,熟悉Scrapy、Pyspider、nutch等主流爬虫框架使用;
6、熟练使用Mysql,熟悉Nosql数据库如Redis等;
7、熟悉websocket 数据实时采集;
8、喜欢技术钻研,具有较强的学习能力,有独立解决问题的能力。
公司介绍
衡生科技是区块链开发公司,旨在打造全球顶尖区块链专业投资机构,汇聚了区块链金融翘楚,提供区块链投资生态系统服务,基于大数据和人工智能(AI)为获得加密资产的合理回报保驾护航。公司旗下有对冲基金、CETF基金项目孵化等区块链相关服务,引领智慧投资。 甄选优质项目,把握财富先机!
联系方式
- 公司地址:地址:span林和西路9号耀中广场A座618