En gjennomgang av robots.txt-filer fra 10 000 nettsteder viser at mange som blokkerer treningsroboter som GPTBot, likevel lar roboter som henter svar i sanntid slippe gjennom uhindret.
Kilde: https://sitedex.dev/insights/robots-txt-2023-war-memorial
En gjennomgang av robots.txt-filer fra 10 000 nettsteder viser at mange som blokkerer treningsroboter som GPTBot, likevel lar roboter som henter svar i sanntid slippe gjennom uhindret.
Kilde: https://sitedex.dev/insights/robots-txt-2023-war-memorial