爬虫开发工程师
上海虎宝网络科技有限公司
- 公司规模:50-150人
- 公司性质:创业公司
- 公司行业:互联网/电子商务
职位信息
- 发布日期:2019-06-29
- 工作地点:上海-松江区
- 招聘人数:1人
- 工作经验:3-4年经验
- 学历要求:大专
- 职位月薪:1-2万/月
- 职位类别:大数据开发/分析
职位描述
1、负责设计、开发、维护、重构分布式的网络爬虫,包括调度、抓取、维护、验证等爬虫工作;
2、负责按照产品规划,进行详细设计,并指导团队进行编码与构建活动,解决数据爬取中的各类技术难题(主要是反爬机制研究);
3、负责指导初级和中级爬虫工程师的开发工作。
工作要求:
1、计算机相关专业本科以上学历
2、至少3年以上爬虫、搜索、数据库建模的开发经验,熟练掌握Java/Python/C/Go任意编程语言,优先考虑Python;
3、有能力破解复杂的图片验证码,有能力解决复杂的反爬限制;
4、熟悉解析工具Jsoup、Xpath、正则表达式;有scrapy和selenium项目经验加分;
5、熟悉关系型(mysql/postgresql)、非关系型数据库;(mongodb/cassandra/hbase/elasticsearch)、缓存数据库(redis/memcached),有过建模和使用经验;
6、熟练使用Linux系统,熟悉tcp,http协议原理;熟悉ajax工作原理、HTML规范、JavaScript技术;
7、逻辑思维优秀,有良好的沟通能力和语言表达能力;
公司介绍
上海虎宝网络科技有限公司是一家专业从事互联网平台运营、APP开发、WEB应用开发、软件开发、大数据分析、网站建设、网站推广和网络营销的企业。旗下"虎宝企业联盟”(以下简称“虎宝”)依托互联网共享经济和区域经济解决区域内采购、交易、展示、金融、、培训、工商、财税、资本服务等诉求。营造企业家专属社交圈,形成企业紧密合作,宽松互信的良性区域经济。虎宝将加强企业与企业,政府与企业间的交流合作,更好地利用各项资源,为企业提供全方位的高品质服务。未来三年将以全国6000家区县为基本单元布局,打通区域经济产业链,将传统企业经营向智能化、信息化、集约化、协同化、定制化升级。 虎宝的目标是成为中国领先的企业公共服务平台运营商,为政府、企业、服务机构、资本、高端产品资源方提供全新的价值流通模式,构建互利共赢的企业服务生态圈,激发企业活力、促进经济发展和社会繁荣,支撑大众创业万众创新的国家战略。
来这里,伴你左右的,有舒适宜人的办公环境、融洽轻松的工作氛围、充满激情与热爱的团队。我们是一家真正做技术,真正做产品的互联网公司,团队气氛活跃,没有层级的隔阂,没有办公室政治,分分钟可以与公司领导交换意见。我们用百人之力,做了这么多每一件都不能掉以轻心的事。如果说有什么特质是我们在不断的变化中坚持的,那便是:勤奋、好学、创新。
公司福利
1、公司提供具有竞争力的薪酬待遇、完善的福利体制、良好的晋升机会、系统的培训及发展计划;
2、公司提供绩效奖、年终奖、项目奖及优秀员工评选表彰奖等;
3、入职即缴纳社保(养老、医疗、生育、失业、工伤),缴纳住房公积金;
4、工作满一年的员工享受5天年假,各种带薪假期及额外带薪假期、每年的薪酬调整、优秀员工股权分享,舒适办公环境;
5、各类传统节日发放礼品;
6、优秀外地技术人员公司可提供公租房,解决后顾之忧。
来这里,伴你左右的,有舒适宜人的办公环境、融洽轻松的工作氛围、充满激情与热爱的团队。我们是一家真正做技术,真正做产品的互联网公司,团队气氛活跃,没有层级的隔阂,没有办公室政治,分分钟可以与公司领导交换意见。我们用百人之力,做了这么多每一件都不能掉以轻心的事。如果说有什么特质是我们在不断的变化中坚持的,那便是:勤奋、好学、创新。
公司福利
1、公司提供具有竞争力的薪酬待遇、完善的福利体制、良好的晋升机会、系统的培训及发展计划;
2、公司提供绩效奖、年终奖、项目奖及优秀员工评选表彰奖等;
3、入职即缴纳社保(养老、医疗、生育、失业、工伤),缴纳住房公积金;
4、工作满一年的员工享受5天年假,各种带薪假期及额外带薪假期、每年的薪酬调整、优秀员工股权分享,舒适办公环境;
5、各类传统节日发放礼品;
6、优秀外地技术人员公司可提供公租房,解决后顾之忧。
联系方式
- 公司地址:地址:span漕河泾开发区莘砖公路668号1101室