爬虫开发工程师
深圳市诺维尔科技互联网有限公司
- 公司性质:民营公司
- 公司行业:电子技术/半导体/集成电路
职位信息
- 发布日期:2020-03-18
- 工作地点:深圳-福田区
- 招聘人数:2人
- 工作经验:1年经验
- 学历要求:本科
- 职位月薪:1-1.5万/月
- 职位类别:软件工程师 数据库工程师(DBA)
职位描述
岗位职责:
1.负责电商平台产品大数据爬虫系统的设计、研发与管理维护;
2.设计爬虫策略与算法,提升抓取效果;
3.持续优化系统,提高系统的稳定性及性能;
4.处理海量结构化数据的挖掘,找寻数据间的内在关联,并在此基础上构建机器学习模型;
5.挖掘算法优化,数据分类及分布统计,为其他部门提供特定需求的数据;
6.负责抽取算法和数据库建模的调研和设计,保证抽取、去重、分类、解析、增量融合入库等流程之后的数据结果
任职要求:
1、熟悉Linux系统,掌握Java 、Python、PHP、shell等语言;
2、丰富的爬虫经验,网络异常等各种常见爬虫问题;
3、熟悉网络编程(TCP/HTTP 协议),多线程、多进程相关知识,有分布式爬虫架构,数据挖掘经验;
4、熟悉爬虫抓取原理及技术,熟悉搜索引擎,从结构化的和非结构化的数据中获取信息,有网站开发经历,有搜索开发经验优先;
5、掌握多种解析工具Jsoup、Xpath、Beautifulsoup、htmlparser、正则,有Nutch,Heritrix,jsoup抓取经验或者分布式抓取经验者优先;
6、有前端(HTML、CSS、JavaScript、JQuery、Bootstrap)开发经验优先;
7、优秀的分析、解决问题能力,对处理未知的、挑战性问题充满激情;
8、具备较强的学习能力和责任心,良好的沟通能力,团队合作精神。
待遇:
1.五险一金;
2.经验1-5年的,工资6-15K;
3.优秀者可以谈公司期权股份;
任职要求:
1、计算机、通信、机械、电子自动化类相关专业优先;
2、中专及以上学历具有上进心,了解计算机基础和操作;
3、做事严谨踏实,责任心强,善于学习总结以及分析、解决能力;
4、思维活跃,有志于从事互联网行业相关工作;
5、欢迎转行,无经验有同事带;
福利待遇:
1.基本工资+绩效奖金+项目奖金+岗位津贴+丰厚年终奖;
2.购买社保,五险一金,15天带薪年假;
3.每年加薪一次,良好的晋升平台及完善的培养体系;
4.丰富的业余集体活动(下午茶,拓展,旅游,聚餐,年会等);
5.五天七小时制,早上九点到下午六点,中午休息两小时,周末双休;
公司介绍
联系方式
- 公司地址:地址:span坂田百瑞达神州新天下大厦