武汉招聘

职位描述：
职位描述：
1. 负责JAVA爬虫框架的设计、开发；
2. 负责设计爬虫监控和效率统计分析的基本模块开发；
3. 负责与前端的数据对接；
4. 反爬虫策略的解决；
5. 负责抽取内容的清洗、转换；

任职要求：
1. 2年及以上Java爬虫开发工作经验；
2. 熟悉MySQL数据库的日常操作和优化；
3. 熟悉selenium、Nutch、Heritrix、Webmagic等工具和爬虫框架；
4. 有其他java类项目者优先考虑；
5. 熟悉Html、Xml解析，了解DOM，精通正则表达式；
6. 熟悉网页抓取原理及技术，熟悉基于Cookie的网站登录原理，熟悉基于正则表达式、XPath、CSS等网页信息抽取技术；
7. 有多线程、多进程、网络通信编程相关开发经验；
8. 有分布式爬虫架构，数据挖掘经验优先。 举报 分享

027-86838878