爬虫抓数据：抓公开信息，也可能违法

风险从哪来

根据《刑法》相关规定，违反国家规定侵入计算机信息系统，或者采用其他技术手段获取该计算机信息系统中存储、处理或者传输的数据，情节严重的，可能构成非法获取计算机信息系统数据罪。绕过登录、破解加密、突破反爬技术措施去抓取数据，风险显著上升。

民事与竞争风险

根据《反不正当竞争法》，经营者不得以不正当手段获取、使用或者披露他人的商业秘密；大量抓取对手平台的商品、用户、评价数据，可能被认定为不正当竞争，需停止侵权并赔偿。若抓取的是用户个人信息，还涉及个人信息保护的违法收集。所谓公开数据不等于可以任意、无限制地抓取。

合规采集怎么做

第一，优先通过官方接口或授权合作获取数据，签署数据使用协议。第二，遵守目标网站的robots协议与服务条款，控制抓取频率，避免影响对方系统运行。第三，不绕过登录验证、加密与技术防护措施。第四，不抓取个人信息，特别是敏感信息。第五，数据来源做记录留痕，用第三方数据供应商的，核验其合法授权链条。