长沙招聘

数据开发工程师（数据采集方向）4个需求

职责描述：

1. 参与数据采集系统的架构设计和研发，独立进行数据采集、清洗、转换、统计、模型计算等工作；

2. 根据业务需求，负责数据采集系统核心技术研究、开发工作，对屏蔽技术具有相应的应对策略；

3. 跟进大数据前沿技术的发展，将合适的技术方案适时引入业务场景；

4. 对数据及内容敏感，细心、严谨，有较强的责任心及自驱力；

 

任职要求：

1。实现对互联网网站、网页、APP内容的采集和数据ETL等工作，开发分布式网络采集系统，分布式数据采集预警系统，监控数据采集的健康状况；

   基于正则表达式、Xpath、CSS、JSON、DOM模型等网页信息采集技术，完成内容采集、处理、结构化、过滤、清洗等数据处理工作，并设计储存结构；

   熟悉逆向工程、用户登录、js加密解密、验证码识别技术；

2. 有交互式采集系统开发经验，对数据加密解密有浓厚兴趣，了解Socket，http等通讯协议、对通讯数据抓包和数据包的分析

熟悉fidder、Charles、burp、suite等工具

3. 熟悉Java/Scala/js语言并精通hadoop生态体系，hadoop、Flink、HBase、Spark、Kafka等

熟悉Redis、Mysql、MQ、ES、Fastdfs、Spring boot、Spring Cloud等；

有基于Spring boot、Spring Cloud、Flink、Spark、HBase等开发和性能优化经验；

4. 有扎实的算法基础，对技术热衷，能够主动学习寻求解决方案；

5.能独立解决实际开发过程中碰到的各类问题；

博彦科技股份有限公司
--加入博彦，携手世界500强

博彦科技股份有限公司（简称“博彦科技”，深交所上市公司）是亚洲领先的全方位IT服务及行业解决方案提供商，具备全球范围内的交付能力。业务范围涵盖咨询及解决方案、IT服务、应用程序开发和维护、ERP和BPO（业务流程外包）等服务，专注于高科技、金融服务、电信工程、医药、制造等领域，积累了丰富的经验，与众多全球500强企业和世界领先科技公司成功合作，是全球客户信赖的IT综合服务提供商和战略合作伙伴。

博彦科技创立于1995年，总部位于北京，并在中国主要城市设立分支机构和研发中心，在美国、日本、新加坡和印度也都设有交付中心。博彦科技的全球交付能力以及灵活使用现场服务、近岸服务和多级离岸交付中心等交付方式的能力，使得博彦在全球范围内都能够以低成本交付高质量的服务。遍布全球的交付中心使得博彦可以和世界共享自己的服务、行业知识和成熟的流程管理。

博彦科技已取得CMMI5认证，拥有完善、成熟的管理和开发流程，确保为客户提供高质量的服务。博彦科技安全系统已达到ISO27001国际标准，遵循严格的安全标准，实施严密的安全措施，以保护客户的信息安全。博彦科技的领军地位也得到了IDC、 IAOP等业内权威研究机构的认可。
博彦科技于2012年1月在深交所上市，并先后收购了印度ESS、美国ExtendLogic及美国大展集团等多家国际知名IT企业。博彦科技将秉承“超越期待，尽善尽美”的服务理念，作为您IT服务的理想合作伙伴，一如既往的为客户提供优质、专业、高效的服务。

IAOP全球外包100强、NeoIT全球外包服务100强、《全球服务》杂志“全球服务100强”、IDC中国离岸软件开发供应商10强
国家规划布局内重点软件企业、工信部中国软件业务收入百强企业
国际人力资源管理协会“中国行业十佳雇主”
招聘联系方式（用于简历投递）：

应届生、实习生简历请投递：campus@beyondsoft.com
社会人员简历请投递：zhaopin@beyondsoft.com

博彦招聘微博互动方式，欢迎@博彦科技 @博彦科技招聘 @博彦科技校园招聘

博彦科技官方地址：*************************
博彦科技官方微博：****************/beyondsoft
博彦科技招聘微博：****************/beyondsofthr
博彦校园招聘微博：****************/beyondsoftUHR