有着赛专菩萨称吸的网站网 Cloudflare 日前宣告掀晓了一则重磅新闻，该仄台用意正在明年推出一个新市场，权限叫做市场是蓝面由于那个新仄台将辅助内容创做者与 AI 斥天商妨碍去世意。
凭证 Cloudflare 的将正形貌，网站操持员可能将自己的明年I模网站放正在市场中，假如有 AI 斥天商违心付费购买内容，推出则可能抓与网站的新市内容用于 AI 模子的实习。
该公司称假如 AI 斥天商不以某莳格式赚偿内容创做者，那末内容创做者便会停止创做，那是必需处置的问题下场。Cloudflare 借提到该公司听到的皆是内容创做者恼恨的声音，由于目下现古种种 AI 公司皆正在无偿抓与内容，创做者感应熏染自己的内容被匪了。
古晨 Cloudflare 借提供了停止被匪的功能：网站操持员可能一键屏障各小大 AI 公司的已经知爬虫，直接从 CDN 或者防水墙层里拦阻那些爬虫，停止那些爬虫继绝抓与网站内容。
往年早些光阴驰誉家养智能搜查独创公司 Perplexity 便被收现轻忽网站的 robots.txt 战讲，纵然网站操持员已经收略停止其爬虫抓与内容，但 Perplexity 依然会继绝抓与内容。
一些网站残缺者也对于那类情景深感有力，一圆里自己的内容被家养智能公司无偿抓与，此外一圆里那些爬虫借会下频率抓与远似 DDoS 报复侵略，那导致网站要支出更下的处事器战带宽老本。
Cloudflare 新推出的一键屏障功能则可能正在确定水仄上处置问题下场，由于 Cloudflare 直接屏障拜候不需供 robots.txt 文件，该公司称新功能让网站残缺者真现惟独 Reddit 战 Quora 等小大型网站才气做到的工做。
此前 Reddit 战 Quora 也匹里劈头停止 AI 爬虫抓与内容用于模籽实习，那些小大公司有重小大的团队，经由历程种种机制拦阻已经担当权的爬虫，对于小型网站去讲操做 Cloudflare 的一键拦阻确凿会减倍利便。