数据爬虫工程师
嘉悦物产集团有限公司
- 公司规模:50-150人
- 公司性质:民营公司
- 公司行业:贸易/进出口
职位信息
- 发布日期:2021-01-05
- 工作地点:杭州-江干区
- 招聘人数:1人
- 工作经验:无需经验
- 学历要求:本科
- 职位月薪:1-1.5万/月
- 职位类别:数据治理工程师
职位描述
工作职责:
1、负责投研平台网络来源数据的抓取、清洗、入库;
2、负责搭建和维护分布式网络爬虫平台和任务系统;
3、不断改善和优化爬虫系统,提升抓取的效率和质量;
任职要求:
1、计算机相关专业本科以上,2年以上的爬虫开发经验;
2、熟练掌握Python或Java等语言,精通正则表达式;
3、精通网页抓取原理和技术,熟悉html/javascript/css/xpath/ajax等Web技术;
4、熟悉常用爬虫框架如Scrapy等一种或多种;
5、对网站、App有一定分析和爬取经验,熟知各种反爬策略;
6、有大型分布式爬虫架构经验者优先;
7、熟悉大数据框架、有大数据处理经验优先。
职能类别:数据治理工程师
公司介绍
嘉悦物产集团有限公司致力于以能源化工、黑色金属、农产品等大宗商品产业,为上下游客户提供具备金融理念的现代产业服务。公司拥有强大的研投能力、完善的管理体系、扎实的产业渠道、丰富的金融手段以及全球产业链视野,立志能够充分运用金融工具,以领先的核心业务为客户创造更多的价值。
公司采用集团化管理与发展的模式,以商品贸易为基础,扎根产业,夯实产业触角、发现产业矛盾和产业投资机会,助力产业升级,构建具有自身特色的护城河。
我们将员工视为最宝贵的财富,具备完善的新员工培养和晋升体系,定期的系统性培训和交流分享,优厚的薪酬水平和多项补贴,竭诚期待您的加入。
公司采用集团化管理与发展的模式,以商品贸易为基础,扎根产业,夯实产业触角、发现产业矛盾和产业投资机会,助力产业升级,构建具有自身特色的护城河。
我们将员工视为最宝贵的财富,具备完善的新员工培养和晋升体系,定期的系统性培训和交流分享,优厚的薪酬水平和多项补贴,竭诚期待您的加入。
联系方式
- 公司地址:地址:span民心路100号万银国际3005