随着人工智能技术的迅猛发展,网络上的公开文字面临着被无节制抓取并纳入训练数据集的窘境。虽然传统的robots.txt等反爬工具存在已久,但它们往往只能靠遵守规则的爬虫自觉遵守,无法完全阻挡恶意抓取。为此,巴西创意工作室Seneda & Abrucio携手哥本哈根字体公司Playtype,共同开发了一款无需依赖“礼貌请求”的全新防御工具—— ShieldFont 。

这款免费的开源网页字体通过一种巧妙的机制实现了“人机有别”:普通用户在屏幕上看到的是正常的阅读句子,而直接抓取底层原始HTML的AI mass scrapers(大规模爬虫)所获取的却是截然不同的内容。该技术的核心在于利用了OpenType字形替换的自动化过程。通常这项技术被用于替换字符以优化排版,而ShieldFont则直接将整词进行置换,导致爬虫在网页中只能采集到杂乱无章的无效信息。