爬虫开发工程师
长沙麦都网络科技有限公司
- 公司规模:150-500人
- 公司性质:民营公司
- 公司行业:教育/培训/院校
职位信息
- 发布日期:2020-12-15
- 工作地点:长沙-长沙县
- 招聘人数:1人
- 工作经验:3-4年经验
- 学历要求:本科
- 职位月薪:1-1.5万/月
- 职位类别:爬虫开发工程师
职位描述
岗位职责:
1.负责公司爬虫的核心技术研究、架构开发和维护升级。
2.分析爬虫系统的技术缺陷,对策略架构做出合理地调整和改进,提升爬虫抓取效果。
3.对抓取后的数据进行清洗、存储等,并持续优化平台,以便满足各种爬取业务需求。
4.优化搜索、匹配、抓取等关键程序的性能及效率。
5.负责公司反爬虫架构设计与开发。
任职要求:
1.本科及以上学历。
2.3年以上网络爬虫研发经验,精通python,精通网页抓取原理及技术,精通正则表达式,熟练掌握Requests、Selenium、Scrapy等技术,熟悉验证码解决方案,从结构化的和非结构化的数据中获取信息。
3.有丰富的APP、WEB爬虫的采集经验,如防反爬、js逆向(反混淆),App逆向,能解决如图片/滑块验证码,账号限制,ip限制等问题。
4.熟悉多线程编程,熟悉算法和数据结构。
5.有分布式爬虫框架搭建、大型爬虫系统研发经验者优先 。
6.掌握常用数据库及存储引擎(如:MySQL,Mongodb,ElasticSearch等)及调优。
7.具有PHP或Golang开发经验优先。
公司介绍
麦都网络”,2011年成立于长沙,是一家集开发和运营的“互联网+教育”科技创新型企业。目前有员工近200人,荣获“国家高新技术企业”与“2019年湖南省互联网企业50强”。在职业教育类考试培训领域,已形成围绕顶尖教学资源展开的成熟市场化运作体系,打造了步知公考、步知刷题、公考雷达、书小页等品牌产品,用户总数近1000万,成为了国内知名的公职类考试线上教育企业,综合竞争力位于前列。
公司员工福利:
基本保障:五险一金
优厚薪酬:绩效奖金、年终奖金
通畅晋升:通畅清晰的职级晋升和岗位规划
其他福利:每月茶话会、每年户外旅游、传统佳节精美礼品
公司核心产品:
步知公考:公职类考试一站式教学服务平台 ******************
步知刷题:*********************/
公考雷达: ****************************/
书小页:**************************/
欲了解公司更多信息,欢迎访问公司官网:***********************
联系方式:0731-84092640
公司员工福利:
基本保障:五险一金
优厚薪酬:绩效奖金、年终奖金
通畅晋升:通畅清晰的职级晋升和岗位规划
其他福利:每月茶话会、每年户外旅游、传统佳节精美礼品
公司核心产品:
步知公考:公职类考试一站式教学服务平台 ******************
步知刷题:*********************/
公考雷达: ****************************/
书小页:**************************/
欲了解公司更多信息,欢迎访问公司官网:***********************
联系方式:0731-84092640
联系方式
- 公司地址:地址:span开元路与东六路交汇处华润置地广场25楼整层