mind Media a récupéré et analysé les fichiers robots.txt des principaux éditeurs français pour mieux connaître les acteurs qui convoitent leurs articles et les contenus qui les accompagnent (commentaires, signatures, etc.), ainsi que la stratégie qu’ils adoptent pour empêcher ces pratiques ou en tirer des revenus. Dans cette première partie de notre étude, focus sur les robots des moteurs de recherche, des adtechs, des sociétés de l’IA générative, de la veille et de l’agrégation de contenus.
Série
Cet article est la première partie d’une enquête sur le contenu des fichiers robots.txt des éditeurs français.
- IA, veille, publicité, agrégation de contenus… Quels sont les robots crawlers que les éditeurs français bloquent ou autorisent sur leurs sites ?
- Quelle est l’attitude des éditeurs vis-à-vis des robots crawlers ?
La généralisation de l’IA générative a mis en lumière l’importance des contenus des éditeurs d’informat
…Vous lisez cet article grâce à votre abonnement à mind Media.
Explorez de nouveaux horizons en consultant nos autres verticales :
Vous avez une information à nous partager ?
Article à retrouver dans La lettre mind Media n°679
Chaque mois, retrouvez l'essentiel de nos articles
Lundi 9 décembre 2024