IA générative : face aux robots crawlers, la réponse au cas par cas des éditeurs

Image à la une de l'article IA générative : face aux robots crawlers, la réponse au cas par cas des éditeurs
Alors que la quasi-totalité des éditeurs utilisent leurs fichiers robots.txt pour faire valoir leur opposition aux robots crawlers de l’intelligence artificielle générative, certains les autorisent, nommément ou par omission. L’absence de certains bots dans les fichiers robots.txt tient aussi parfois à la complexité de tous les identifier à mesure qu’ils se créent. mind Media a consulté et analysé les fichiers robots.txt des éditeurs français pour mieux comprendre leur stratégie face aux crawlers de l’IA.
Cet article vous est offert gratuitement par la rédaction, car vous êtes actuellement en période d'essai.
Vous avez accès à nos contenus pendant 15 jours.

Série

Ce dossier est le deuxième d’une série consacrée à la présence des bots des acteurs de l’intelligence artificielle dans les fichiers robots.txt des éditeurs français.

Face à l’intérêt croissant des acteurs de l’intelligence artificielle générative pour leurs contenus, de nombreux éditeurs français ont choisi de leur en interdire l’accès, notamment via leurs conditions générales et les directives de leurs fichiers robots.txt. Certains ont même lancé des procédures judiciaires contre eux (voir la première partie de ce dossier).

Des accords noués avec OpenAI et Perplexity

D’autres ont trouvé un terrain d’entente. A l’étranger, plusieurs groupes de presse ont ainsi conclu des accords rémunérés avec OpenAI : Springer en Allemagne, Prisa Media en Espagne, The Atlantic et Condé Nast aux Etats-Unis, le Financial Times au Royaume-Uni ou encore News Corp. 

En France, à ce jour, seul Le Monde s’est entendu avec OpenAI, en mars 2024, lui permettant d’utiliser ses contenus pour entraîner ses modèles et alimenter ses services, contre rémunération dans le cadre des droits voisins et une collaboration technique pour développer des outils ou fonctionnalités utilisant l’IA au sein de la rédaction. Le quotidien du soir a également signé un accord pluriannuel avec Perplexity en mai 2025, pour “améliorer la qualité des informations de son moteur de réponse et offrir à la rédaction des outils innovants”. Dans la foulée, Le Monde a dévoilé un robot conversationnel s’appuyant sur la technologie de Perplexity pour répondre aux questions de ses lecteurs, basé exclusivement sur ses articles. 

Numerama (Humanoid, Groupe Ebra) avait été le premier site français à signer un accord avec Perplexity en janvier 2025. En échange de l’autorisation d’accéder à ses contenus pour répondre aux requêtes des internautes, la société américaine met à sa disposition des ressources techniques et partage ses revenus publicitaires lorsque le site apparaît comme source dans les résultats de son moteur de réponse. “Perplexity, qui n’était pas encore aussi populaire qu’aujourd’hui, nous a contactés.

Vous lisez cet article grâce à votre abonnement à mind Media.
Explorez de nouveaux horizons en consultant nos autres verticales :
Vous avez une information à nous partager ?
Article à retrouver dans La lettre mind Media n°706
Chaque mois, retrouvez l'essentiel de nos articles
Lundi 7 juillet 2025
Nos autres services
mind Research
Décider : un service de recherche et de market intelligence sur mesure pour alimenter vos analyses et appuyer vos prises de décisions.
En savoir plus
mind Learning
Se former : des formats courts pour le management, le coaching de dirigeants, la montée en compétence de profils junior.
En savoir plus
mind Events
Se rencontrer : des conférences d'une demie journée dédiées aux problématiques du secteur et ouvertes à l'ensemble de l'écosystème.
En savoir plus
Ce que vous devez absolument lire cette semaine
Les contenus essentiels de la semaine sélectionnés par la rédaction.
Voir tout
Etude Reuters Institute : l’utilisation de l’IA pour l’actualité chaude encore marginale, mais en progression 
L’info. Le Reuters Institute a publié fin octobre son rapport annuel sur l’intelligence artificielle générative et l’information, après avoir...
13 novembre 2026
Le patron de M6 appelle à nouveau à changer totalement le cadre réglementaire audiovisuel
Alors que le marché de la publicité audiovisuelle sera de nouveau en baisse en 2026 pour les acteurs traditionnels de la télévision, David Larramendy, PDG de M6, a tancé le milieu politique, jeudi...
12 novembre 2026
OpenAI lance Business Hub, qui donne aux marques des outils de mesure 
L’info. OpenAI a annoncé mardi 10 novembre le lancement de Business Hub, qui regroupe une console d’analytics, un espace de gestion de la fiche des entreprises dans lequel elles...
12 novembre 2026
AI Overviews : DVP saisit à son tour l’Autorité de la concurrence contre Google
L’info. Contestant les conditions du déploiement en France le 22 juillet des fonctionnalités AI Overviews et AI Mode, la Société des droits voisins de la presse...
10 novembre 2026
Les articles les plus consultés du mois sur mind Media
Ce sur quoi les lecteurs cliquent le plus le mois dernier.
Ce sur quoi les lecteurs cliquent le plus le mois dernier.
1
Paul Boulangé (Influential France) : « Il y a vraiment de la valeur à créer en rapprochant creator economy et médias »
Influential, l'agence de marketing d'influence de Publicis Connected Media, communique depuis son lancement en France, en juin, sur l'importance du rôle des médias dans la construction des...
22 octobre 2026
2
Emilie Rouganne remplace Pierre Calmard à la tête de Dentsu France
L’info. Dentsu France a annoncé lundi 2 novembre, dans un communiqué, la nomination d’Émilie Rouganne au poste de PDG. Elle succède à Pierre Calmard...
2 novembre 2026
3
Google affirme vouloir mettre les sources plus en avant dans AI Search
L’info. Jeudi 15 octobre, Google a annoncé une mise à jour d’AI Search (AI Overviews, AI Mode) mettant davantage en avant les sources des informations...
19 octobre 2026
4
Les grandes marques allouent une part décroissante de leurs revenus à la publicité, selon WARC 
L’info. Sur un échantillon de 25 des plus grands annonceurs aux Etats-Unis, le ratio des investissements publicitaires sur le chiffre d’affaires est tombé de 6,1% en 2019...
20 octobre 2026
5
Coopérative U et Unlimitail scellent leur accord, face à Intermarché et Valiuz
L’info. Coopérative U et la régie de retail media Unlimitail ont annoncé jeudi 22 octobre un partenariat pluriannuel sur le retail media, qui débutera en janvier...
22 octobre 2026
6
Leila André (Havas Edge) : « Le marché a tendance à associer la performance aux leviers digitaux bas de funnel. Nous voyons les choses différemment »
Havas Edge France fait partie du réseau Edge Performance Network du groupe Havas. L'agence, qui travaille avec des clients en forte croissance, fonde son approche sur une vision agile de la...
28 octobre 2026