Aller au contenu

SEO : bloquer les bots IA ne marche pas + X lance son MCP officiel

Resume

Deux sujets SEO/plateformes. BuzzStream publie une etude sur 4 millions de citations IA : 70-95% des sites qui bloquent les crawlers IA via robots.txt sont quand meme cites par ChatGPT, Gemini, etc. Le blocage est inefficace car les modeles utilisent SERPAPI, des caches, ou ignorent robots.txt. X (Twitter) publie un serveur MCP officiel (XMCP) : Python, OAuth1/OAuth2, 100+ outils API, compatible FastMCP.

Analyse critique

BuzzStream :

L'etude est solide (4M citations). Le mecanisme est clair : ChatGPT utilise SERPAPI pour recuperer les resultats de recherche Google, donc robots.txt (qui bloque les crawlers directs) est contourne. Les sites apparaissent dans les snippets Google, et les LLM les citent via ces snippets.

C'est un mythe qui tombe : bloquer les bots IA ne protege pas le contenu. La seule protection reelle serait de ne pas apparaitre dans les SERP Google — ce qui est commercial ment suicidaire.

XMCP :

X officialise l'acces API via MCP. Le serveur expose 100+ endpoints (posts, recherche, utilisateurs). C'est significatif : la premiere plateforme majeure a proposer un MCP officiel. Supporte OAuth1/OAuth2, whitelisting d'outils, integration Grok AI.

Pertinence ProbatioVault

Impact faible :

  • BuzzStream : signal pour le SEO de ProbatioVault-site. Si on publie du contenu marketing, le bloquer aux bots IA est contre-productif — mieux vaut etre cite.
  • XMCP : pourrait remplacer notre outil clix pour le pipeline veille. Avantage : officiel, OAuth propre. Inconvenient : necessite des cles API X (clix scrape sans API). A surveiller mais pas de changement immediat — clix fonctionne.