爬虫开发工程师
广州网融信息技术有限公司
- 公司规模:50-150人
- 公司性质:民营公司
- 公司行业:互联网/电子商务
职位信息
- 发布日期:2019-04-21
- 工作地点:广州-天河区
- 招聘人数:若干人
- 工作经验:无工作经验
- 学历要求:招若干人
- 语言要求:不限
- 职位月薪:0.7-1.5万/月
- 职位类别:软件工程师
职位描述
1、负责互联网站、网页、链接的特征挖掘
2、提供分布式爬虫和数据采集系统的技术实现方案;
3、设计和开发分布式网络爬虫程序;
4、分析静态网页结构,解析网页数据,对数据进行过滤,去重,结构化处理;
5、设计优化爬虫调度系统,优化调度策略。
任职要求:
1. 大专以上学历,3年左右相关工作经验,熟悉 Python/Java/Node.js,有较丰富的爬虫系统开发经验;
2. 熟悉常用的数据结构和算法,熟悉常见设计模式;
3. 熟悉网络编程(TCP/HTTP 协议),具有 linux 下编程经验和操作经验;
4. 能够解决反爬虫、网络异常等各种常见爬虫问题;
5. 了解分布式系统的设计与实现;
6. 熟练掌握八爪鱼、火车头、神箭手或后羿等数据采集器;
7.优秀的分析、解决问题能力,对处理未知的、挑战性问题充满激情;
8.良好的沟通能力和团队合作精神,熟悉java,掌握python,熟悉常用爬虫框架中的一种或多种,如Scrapy框架或其他的Web scraping framework。
职能类别: 软件工程师
公司介绍
广州网融信息技术有限公司(G4B)创建于2006年,现已发展成为中国领先的企业全生命周期管理和商事服务区块链领域的平台提供商。
G4B以人工智能、大数据技术为基础,为网办大厅、政务办、工商、税务、社保、公积金、公安、银行等部门提供企业开办、变更、注销等企业全生命周期的一网通办解决方案。
G4B为全国首批获得区块链备案的企业,凭借多年政务经验,为政府行业客户提供政务公开、商事服务、网办全程追溯、电子证据存储的区块链解决方案。
G4B拥有密码产品定点生产资质,公司提供的电子签章产品、线上线下全程电子化支撑平台得到广泛应用,是电子政务、电子商务领域不见面、不接触办事解决方案的领先供应商。
G4B开创式地为政府、银行、园区写字楼、中介公司、企业服务商等与雇主搭建起商事服务区块链,通过线上线下资源整合与大数据服务,建立企业服务生态圈,为企业用户提供企业开办、变更、注销、财税代理、税务筹划、商标、知识产权等多达数千个企业服务,用真人管家帮助企业解决发展难题,提高工作效率,降低用人成本。
G4B未来将继续坚持为政企服务的发展思路,打造成一个基于互联网的政企服务孵化器,为“大众创业”“万众创新”的发展浪潮推波助澜。
G4B以人工智能、大数据技术为基础,为网办大厅、政务办、工商、税务、社保、公积金、公安、银行等部门提供企业开办、变更、注销等企业全生命周期的一网通办解决方案。
G4B为全国首批获得区块链备案的企业,凭借多年政务经验,为政府行业客户提供政务公开、商事服务、网办全程追溯、电子证据存储的区块链解决方案。
G4B拥有密码产品定点生产资质,公司提供的电子签章产品、线上线下全程电子化支撑平台得到广泛应用,是电子政务、电子商务领域不见面、不接触办事解决方案的领先供应商。
G4B开创式地为政府、银行、园区写字楼、中介公司、企业服务商等与雇主搭建起商事服务区块链,通过线上线下资源整合与大数据服务,建立企业服务生态圈,为企业用户提供企业开办、变更、注销、财税代理、税务筹划、商标、知识产权等多达数千个企业服务,用真人管家帮助企业解决发展难题,提高工作效率,降低用人成本。
G4B未来将继续坚持为政企服务的发展思路,打造成一个基于互联网的政企服务孵化器,为“大众创业”“万众创新”的发展浪潮推波助澜。
联系方式
- 公司地址:网融信息技术有限公司