Quelle est la stratégie des éditeurs vis-à-vis des robots crawlers ?

Image à la une de l'article Quelle est la stratégie des éditeurs vis-à-vis des robots crawlers ?
mind Media a récupéré et analysé les fichiers robots.txt des principaux éditeurs français, pour mieux connaître les acteurs qui convoitent leurs articles et les contenus qui les accompagnent (commentaires, signatures, etc.). Dans cette deuxième partie de notre étude, focus sur les pratiques des médias, pour bloquer ces activités ou en tirer des revenus.
Cet article vous est offert gratuitement par la rédaction, car vous êtes actuellement en période d'essai.
Vous avez accès à nos contenus pendant 15 jours.

Série

Cet article est la deuxième et dernière partie d’une enquête sur le contenu des fichiers robots.txt des éditeurs français. 

  1. IA, veille, publicité, agrégation de contenus… Quels sont les robots crawlers que les éditeurs français bloquent ou autorisent sur leurs sites ?
  2. Quelle est la stratégie des éditeurs vis-à-vis des robots crawlers ?

Pour faire de la veille pour leurs clients, agréger des contenus pour leurs services, ent

Vous lisez cet article grâce à votre période d’essai.
Explorez de nouveaux horizons en consultant nos autres verticales :
Vous lisez cet article grâce à votre abonnement à mind Media.
Explorez de nouveaux horizons en consultant nos autres verticales :
Vous avez une information à nous partager ?
Article à retrouver dans La lettre mind Media n°680
Chaque mois, retrouvez l'essentiel de nos articles
Lundi 16 décembre 2024
Nos autres services
mind Research
Décider : un service de recherche et de market intelligence sur mesure pour alimenter vos analyses et appuyer vos prises de décisions.
En savoir plus
mind Learning
Se former : des formats courts pour le management, le coaching de dirigeants, la montée en compétence de profils junior.
En savoir plus
mind Events
Se rencontrer : des conférences d'une demie journée dédiées aux problématiques du secteur et ouvertes à l'ensemble de l'écosystème.
En savoir plus
Ce que vous devez absolument lire cette semaine
Les contenus essentiels de la semaine sélectionnés par la rédaction.
Voir tout
AI Overviews : l’Apig saisit l’Autorité de la concurrence
L’info. L’Alliance de la presse d’information générale (Apig) a annoncé mardi 11 août la saisie de l’Autorité de la concurrence...
11 août 2026
Metrobus remporte le contrat de régie publicitaire de la RATP
L’info. Metrobus (Mediatransports) a remporté l’appel d’offres de la RATP relatif à la gestion des espaces publicitaires du réseau de transport parisien...
10 août 2026
Nielsen rachète DoubleVerify pour 2,15 milliards de dollars
L’info. Nielsen a annoncé le 6 août l’acquisition de la société d’advérification DoubleVerify (DV), pour un montant de 13,60 dollars par action...
Reworld Media pousse la convergence des médias et de l’influence au bout de la logique
L’info. Grazia (Reworld Media) a annoncé le 6 juillet intégrer le pool de créateurs de contenus représentés par l’agence Follow (groupe EDG)...
Les articles les plus consultés du mois sur mind Media
Ce sur quoi les lecteurs cliquent le plus le mois dernier.
Ce sur quoi les lecteurs cliquent le plus le mois dernier.
1
Comment Bolt a obtenu 16% d’engagement avec des créateurs de contenus sur BeReal
La marque de VTC a testé pour la première fois en mars une opération de collaboration commerciale avec des créateurs de contenus sur le réseau social français BeReal, racheté en 2024 par Voodoo et...
15 juillet 2026
2
Publicis relève ses objectifs annuels 2026 après des revenus nets en hausse de 4,8% au T2
L’info. Publicis Groupe a annoncé jeudi 16 juillet avoir enregistré 3,8 milliards de revenus nets au deuxième trimestre 2026, soit une croissance organique de +4,8%. Une...
3
Comparateurs : le tribunal repousse la demande de rectification de jugement de Twenga face à Google
L’info. Par un jugement rendu jeudi 9 juillet, le Tribunal des activités économiques de Paris (TAE) a sèchement rejeté la requête en rectification...
4
Les revenus publicitaires de Google Search en hausse de 17% au T2 2026
L’info. Au deuxième trimestre 2026, la régie publicitaire de Google Alphabet (Google Advertising) a généré un chiffre d’affaires de 81,6 milliards de...
5
Havas enregistre une croissance de ses revenus nets organiques de 2,5% au T2 2026
L’info. Au deuxième trimestre, Havas a enregistré un revenu net de 724 millions d’euros, en hausse de 2,5% en croissance organique (dans la lignée du premier...
6
DMA : la Commission européenne inflige 890 millions d’euros d’amendes à Google pour autopréférence et paiement coercitif
L’info. Jeudi 23 juillet, la Commission européenne a annoncé deux sanctions d’un montant total de 890 millions d’euros à l’encontre de Google pour...