北京招聘

职位描述：
岗位职责
1、负责开发网络爬虫系统，完成数据采集与爬取、解析处理、入库等数据日常工作；
2、研究各种网页探寻特点和规律，根据业务需求，实现大规模文本、图片数据的定向爬取、数据清洗、深度提取和挖掘等研发和优化工作；
3、负责与大数据工程师、数据挖掘、分析人员、运营及产品等协同工作，完成数据统计、查询和分析。
4、有责任心，学习能力强，具有良好的团队合作精神，对工作有热情；

岗位要求：
1.计算机及相关专业，本科及以上学历，2年及以上工作经验；
2.熟悉Python、C#等编程语言，有1年以上的Python爬虫开发经验；
3.掌握网络爬虫开发原理，熟悉互联网各种类型数据和交互模式数据的采集方法；
4.有从事网络爬虫、网页去重、网页信息抽取的经验，精通网页抓取原理及技术
5.熟练运用正则表达式和Xpath表达式；
6.具备数据库设计能力； 熟悉TCP，HTTP协议原理；熟悉AJAX工作原理；
7.熟练使用Mysql数据库；
8.熟练Scrapy框架者优先；
9.构建过分布式爬虫系统者优先。

公安部第一研究所是公安部直属的从事警务和公共安全技术研究，为公安工作和社会公共安全领域提供产品、系统解决方案、工程实施和技术服务的综合性研究所。自1960年建所以来，遵照“对党忠诚、服务人民、执法公正、纪律严明”总要求，紧紧围绕“科技强警”战略，大力开展科技创新和成果转化，获得国家发明奖、国家科技进步奖和部级科技进步奖近200项，研究所设8个研发部门，11个所属公司，2个生产部门，12个技术机构，建有5个国家工程实验室，4个公安部级重点实验室，现有一支2800多人的科研、管理和支撑队伍，包括1500余人的研发团队和350余名各领域专家，50余人享受政府特殊津贴。