OpenAI expérimente la gouvernance de l'IA

OpenAI a indiqué que son robot de recherche ChatGPT pourrait ne pas respecter les restrictions des fichiers robots.txt, contestant ainsi une convention établie de longue date pour l’accès automatisé aux sites web. Bien que robots.txt ne soit pas un système légal d’accès, il a été utilisé des décennies durant par éditeurs, moteurs de recherche et crawlers comme une frontière pratique. Si les agents IA revendiquent un traitement différent des crawlers, les propriétaires de sites devront davantage s’appuyer sur l’authentification, les paywalls ou des actions en justice pour contrôler l’utilisation des données. Cette question est cruciale car les assistants IA récupèrent de plus en plus des pages en temps réel pour leurs utilisateurs, brouillant la limite entre navigation, extraction et traitement algorithmique des données.

Sources du briefing

• OpenAI Says Robots.txt May Not Apply To ChatGPT’s Fetch Bot - Search Engine JournalSearch Engine Journal