Google minulý týden ve čtvrtek na blogu napsal, jak svoji stránku vyjmout ze zdrojů pro generativní AI, ale zároveň nechat indexovat vyhledávačem. Jde o nový parametr Google-Extended v souboru robots.txt. Zakázat tak můžete přístup současným generativním AI Bard a Vertex AI, ale i všem budoucím od Google.
OpenAI podobné nastavení zveřejnil v srpnu. U něj je potřeba v robots.txt zakázat GPTBot. Ze známých stránek mají GPT zakázané New York Times, CNN, Reuters, Australian Broadcasting Corporation a Medium.
(zdroj: slashdot)