{"id":131454,"date":"2026-10-06T12:37:21","date_gmt":"2026-10-06T10:37:21","guid":{"rendered":"https:\/\/quondos.com\/mag\/?p=131454"},"modified":"2026-10-06T12:37:23","modified_gmt":"2026-10-06T10:37:23","slug":"google-confirma-que-algunos-crawlers-de-ia-acceden-a-sitemaps-y-feeds-rss","status":"publish","type":"post","link":"https:\/\/quondos.com\/mag\/google-confirma-que-algunos-crawlers-de-ia-acceden-a-sitemaps-y-feeds-rss\/","title":{"rendered":"Google confirma que algunos crawlers de IA acceden a sitemaps y feeds RSS"},"content":{"rendered":"\n<figure class=\"wp-block-image size-large\"><img loading=\"lazy\" decoding=\"async\" width=\"1024\" height=\"536\" src=\"https:\/\/quondos.com\/mag\/wp-content\/uploads\/2023\/05\/quien-es-realmente-dueno-google-1-1024x536.webp\" alt=\"google\" class=\"wp-image-124474\" title=\"\" srcset=\"https:\/\/quondos.com\/mag\/wp-content\/uploads\/2023\/05\/quien-es-realmente-dueno-google-1-1024x536.webp 1024w, https:\/\/quondos.com\/mag\/wp-content\/uploads\/2023\/05\/quien-es-realmente-dueno-google-1-300x157.webp 300w, https:\/\/quondos.com\/mag\/wp-content\/uploads\/2023\/05\/quien-es-realmente-dueno-google-1-768x402.webp 768w, https:\/\/quondos.com\/mag\/wp-content\/uploads\/2023\/05\/quien-es-realmente-dueno-google-1.webp 1268w\" sizes=\"auto, (max-width: 1024px) 100vw, 1024px\" \/><\/figure>\n\n\n\n<p><strong>John Mueller, responsable de Search Relations de Google, ha explicado que algunos crawlers utilizados por sistemas de inteligencia artificial acceden a sitemaps XML y feeds RSS<\/strong>, seg\u00fan ha podido comprobar en los registros de sus propios servidores. El comentario aporta una pista relevante para los propietarios de sitios web que quieren facilitar el descubrimiento de sus contenidos por parte de sistemas de IA. :chatgpt-content-reference{index=\u00bb3&#8243;}<\/p>\n\n<p>Mueller realiz\u00f3 estas declaraciones junto a Martin Splitt durante un episodio del podcast <strong>Search Off the Record<\/strong> publicado el 1 de octubre y dedicado a analizar si los sitemaps siguen teniendo utilidad. La conversaci\u00f3n abord\u00f3 tanto el funcionamiento tradicional de los sitemaps como la forma en que los crawlers orientados al entrenamiento de sistemas de IA pueden descubrir contenidos.<\/p>\n\n<p>Uno de los puntos destacados es que muchos de estos crawlers no ofrecen una consola equivalente a Google Search Console donde un webmaster pueda <strong>enviar directamente un sitemap<\/strong>. Por ese motivo, Mueller recomienda mantener mecanismos de descubrimiento convencionales cuando el objetivo sea facilitar el acceso de estos sistemas al contenido.<\/p>\n\n<div id=\"ez-toc-container\" class=\"ez-toc-v2_0_76 counter-hierarchy ez-toc-counter ez-toc-grey ez-toc-container-direction\">\n<div class=\"ez-toc-title-container\">\n<p class=\"ez-toc-title\" style=\"cursor:inherit\">\u00cdndice de contenidos<\/p>\n<span class=\"ez-toc-title-toggle\"><a href=\"#\" class=\"ez-toc-pull-right ez-toc-btn ez-toc-btn-xs ez-toc-btn-default ez-toc-toggle\" aria-label=\"Alternar tabla de contenidos\"><span class=\"ez-toc-js-icon-con\"><span class=\"\"><span class=\"eztoc-hide\" style=\"display:none;\">Toggle<\/span><span class=\"ez-toc-icon-toggle-span\"><svg style=\"fill: #999;color:#999\" xmlns=\"http:\/\/www.w3.org\/2000\/svg\" class=\"list-377408\" width=\"20px\" height=\"20px\" viewBox=\"0 0 24 24\" fill=\"none\"><path d=\"M6 6H4v2h2V6zm14 0H8v2h12V6zM4 11h2v2H4v-2zm16 0H8v2h12v-2zM4 16h2v2H4v-2zm16 0H8v2h12v-2z\" fill=\"currentColor\"><\/path><\/svg><svg style=\"fill: #999;color:#999\" class=\"arrow-unsorted-368013\" xmlns=\"http:\/\/www.w3.org\/2000\/svg\" width=\"10px\" height=\"10px\" viewBox=\"0 0 24 24\" version=\"1.2\" baseProfile=\"tiny\"><path d=\"M18.2 9.3l-6.2-6.3-6.2 6.3c-.2.2-.3.4-.3.7s.1.5.3.7c.2.2.4.3.7.3h11c.3 0 .5-.1.7-.3.2-.2.3-.5.3-.7s-.1-.5-.3-.7zM5.8 14.7l6.2 6.3 6.2-6.3c.2-.2.3-.5.3-.7s-.1-.5-.3-.7c-.2-.2-.4-.3-.7-.3h-11c-.3 0-.5.1-.7.3-.2.2-.3.5-.3.7s.1.5.3.7z\"\/><\/svg><\/span><\/span><\/span><\/a><\/span><\/div>\n<nav><ul class='ez-toc-list ez-toc-list-level-1 ' ><li class='ez-toc-page-1 ez-toc-heading-level-2'><a class=\"ez-toc-link ez-toc-heading-1\" href=\"https:\/\/quondos.com\/mag\/google-confirma-que-algunos-crawlers-de-ia-acceden-a-sitemaps-y-feeds-rss\/#Los_registros_del_servidor_muestran_accesos_de_crawlers_de_IA\" >Los registros del servidor muestran accesos de crawlers de IA<\/a><\/li><li class='ez-toc-page-1 ez-toc-heading-level-2'><a class=\"ez-toc-link ez-toc-heading-2\" href=\"https:\/\/quondos.com\/mag\/google-confirma-que-algunos-crawlers-de-ia-acceden-a-sitemaps-y-feeds-rss\/#Sitemapxml_y_RSS_siguen_siendo_mecanismos_de_descubrimiento_utiles\" >Sitemap.xml y RSS siguen siendo mecanismos de descubrimiento \u00fatiles<\/a><\/li><li class='ez-toc-page-1 ez-toc-heading-level-2'><a class=\"ez-toc-link ez-toc-heading-3\" href=\"https:\/\/quondos.com\/mag\/google-confirma-que-algunos-crawlers-de-ia-acceden-a-sitemaps-y-feeds-rss\/#Mueller_descarta_que_llmstxt_sustituya_al_sitemap_XML\" >Mueller descarta que llms.txt sustituya al sitemap XML<\/a><\/li><li class='ez-toc-page-1 ez-toc-heading-level-2'><a class=\"ez-toc-link ez-toc-heading-4\" href=\"https:\/\/quondos.com\/mag\/google-confirma-que-algunos-crawlers-de-ia-acceden-a-sitemaps-y-feeds-rss\/#Por_que_Search_Console_puede_mostrar_un_sitemap_como_no_recuperable\" >Por qu\u00e9 Search Console puede mostrar un sitemap como no recuperable<\/a><\/li><li class='ez-toc-page-1 ez-toc-heading-level-2'><a class=\"ez-toc-link ez-toc-heading-5\" href=\"https:\/\/quondos.com\/mag\/google-confirma-que-algunos-crawlers-de-ia-acceden-a-sitemaps-y-feeds-rss\/#Los_logs_pueden_ayudar_a_entender_que_crawlers_visitan_un_sitio\" >Los logs pueden ayudar a entender qu\u00e9 crawlers visitan un sitio<\/a><\/li><\/ul><\/nav><\/div>\n<h2><span class=\"ez-toc-section\" id=\"Los_registros_del_servidor_muestran_accesos_de_crawlers_de_IA\"><\/span>Los registros del servidor muestran accesos de crawlers de IA<span class=\"ez-toc-section-end\"><\/span><\/h2>\n\n<p>Mueller explic\u00f3 que ha observado personalmente en los logs de sus sitios web <strong>peticiones de crawlers de IA dirigidas a archivos sitemap y RSS<\/strong>. No identific\u00f3 qu\u00e9 bots concretos estaban realizando esas solicitudes y tampoco afirm\u00f3 saber qu\u00e9 uso posterior hacen las empresas de los datos que encuentran.<\/p>\n\n<p>Este matiz es importante porque una petici\u00f3n a un archivo no demuestra por s\u00ed misma que el contenido vaya a utilizarse para entrenamiento, recuperaci\u00f3n de informaci\u00f3n o generaci\u00f3n de respuestas. Lo que muestran los registros es que <strong>determinados sistemas automatizados est\u00e1n llegando hasta esos recursos<\/strong>.<\/p>\n\n<p>La observaci\u00f3n tambi\u00e9n ayuda a entender por qu\u00e9 la forma en que se publica un sitemap puede influir en su descubrimiento. Cuando un sitio utiliza un nombre est\u00e1ndar y accesible, otros sistemas pueden encontrarlo sin necesidad de disponer de una herramienta espec\u00edfica para enviar la URL.<\/p>\n\n<p>Seg\u00fan Mueller, los propietarios que quieran mantener un sitemap privado pueden utilizar <strong>un nombre de archivo poco habitual<\/strong>, evitar incluirlo en robots.txt y enviarlo directamente a Google. El inconveniente es que esa decisi\u00f3n dificulta que otros sistemas encuentren el archivo por su cuenta.<\/p>\n\n<h2><span class=\"ez-toc-section\" id=\"Sitemapxml_y_RSS_siguen_siendo_mecanismos_de_descubrimiento_utiles\"><\/span>Sitemap.xml y RSS siguen siendo mecanismos de descubrimiento \u00fatiles<span class=\"ez-toc-section-end\"><\/span><\/h2>\n\n<p>Para los sitios interesados en aparecer en sistemas de IA, Mueller plantea una recomendaci\u00f3n sencilla: <strong>utilizar el nombre est\u00e1ndar sitemap.xml o recurrir a los feeds RSS<\/strong>. La raz\u00f3n es que muchos crawlers no disponen de un procedimiento espec\u00edfico para que los propietarios les indiquen d\u00f3nde est\u00e1 su sitemap.<\/p>\n\n<p>Los feeds RSS pueden resultar especialmente f\u00e1ciles de descubrir porque normalmente se encuentran enlazados desde el <strong>HTML de la cabecera de las p\u00e1ginas<\/strong>. De esta forma, un crawler que visite el sitio puede localizar el feed sin necesidad de que exista un sistema espec\u00edfico de env\u00edo.<\/p>\n\n<p>La recomendaci\u00f3n no implica que un sitemap sea una garant\u00eda de aparici\u00f3n en una herramienta de IA. Se trata principalmente de una cuesti\u00f3n de <strong>descubrimiento t\u00e9cnico del contenido<\/strong>. Que un crawler pueda localizar un recurso no significa necesariamente que vaya a utilizarlo ni que el contenido vaya a aparecer posteriormente en una respuesta generada.<\/p>\n\n<p>La conversaci\u00f3n tambi\u00e9n pone de relieve que los mecanismos dise\u00f1ados originalmente para buscadores tradicionales pueden seguir teniendo utilidad en un ecosistema donde cada vez participan m\u00e1s agentes automatizados.<\/p>\n\n<h2><span class=\"ez-toc-section\" id=\"Mueller_descarta_que_llmstxt_sustituya_al_sitemap_XML\"><\/span>Mueller descarta que llms.txt sustituya al sitemap XML<span class=\"ez-toc-section-end\"><\/span><\/h2>\n\n<p>Durante el podcast tambi\u00e9n se abord\u00f3 una de las propuestas que ha ganado atenci\u00f3n en el entorno del SEO y la b\u00fasqueda basada en IA: <strong>llms.txt<\/strong>. Preguntado sobre si este archivo podr\u00eda sustituir a un sitemap XML, Mueller estableci\u00f3 una diferencia clara entre ambos formatos.<\/p>\n\n<p>Seg\u00fan explic\u00f3, los sistemas de Google no pueden utilizar actualmente llms.txt como sustituto de un sitemap porque <strong>el archivo Markdown no utiliza el formato estructurado que requiere el protocolo de sitemaps<\/strong>. El planteamiento puede cambiar en el futuro, pero no forma parte del funcionamiento actual de Google.<\/p>\n\n<p>Mueller compar\u00f3 la idea con la diferencia entre un sitemap HTML y un sitemap XML. Aunque un documento en Markdown puede contener informaci\u00f3n \u00fatil, <strong>no cumple el mismo papel t\u00e9cnico que un sitemap XML<\/strong> dise\u00f1ado espec\u00edficamente para ayudar a los motores de b\u00fasqueda a descubrir URLs.<\/p>\n\n<p>El responsable de Google ya hab\u00eda comentado anteriormente que los sistemas de la compa\u00f1\u00eda no utilizaban llms.txt para estas funciones. En este contexto, su recomendaci\u00f3n es trabajar con mecanismos que actualmente est\u00e1n documentados y funcionan, en lugar de basar una estrategia de rastreo en tecnolog\u00edas cuyo uso todav\u00eda no est\u00e1 consolidado.<\/p>\n\n<h2><span class=\"ez-toc-section\" id=\"Por_que_Search_Console_puede_mostrar_un_sitemap_como_no_recuperable\"><\/span>Por qu\u00e9 Search Console puede mostrar un sitemap como no recuperable<span class=\"ez-toc-section-end\"><\/span><\/h2>\n\n<p>La conversaci\u00f3n tambi\u00e9n abord\u00f3 otro problema habitual entre propietarios de sitios web: el mensaje <strong>\u201cCouldn\u2019t fetch\u201d que puede aparecer en Search Console aunque el sitemap sea v\u00e1lido y est\u00e9 publicado correctamente<\/strong>.<\/p>\n\n<p>Mueller explic\u00f3 que una de las posibles causas est\u00e1 relacionada con la carga del servidor. En determinados momentos, los sistemas de Google pueden tener dificultades para recuperar el archivo y Search Console puede reflejarlo como un problema de obtenci\u00f3n aunque el sitemap no tenga un error estructural.<\/p>\n\n<p>Otra posibilidad est\u00e1 relacionada con la <strong>demanda de rastreo<\/strong>. Google no rastrea necesariamente todas las URLs de un sitio con la misma frecuencia. Cuando sus sistemas consideran que existe poca necesidad de buscar contenido adicional, pueden reducir el nivel de rastreo y eso tambi\u00e9n puede afectar a la recuperaci\u00f3n del sitemap.<\/p>\n\n<p>Mueller relacion\u00f3 esa demanda de rastreo con la percepci\u00f3n que Google tiene sobre la calidad y la necesidad de descubrir contenido nuevo. Por tanto, <strong>un error de recuperaci\u00f3n no siempre es exclusivamente un problema t\u00e9cnico<\/strong> que pueda solucionarse modificando el XML.<\/p>\n\n<h2><span class=\"ez-toc-section\" id=\"Los_logs_pueden_ayudar_a_entender_que_crawlers_visitan_un_sitio\"><\/span>Los logs pueden ayudar a entender qu\u00e9 crawlers visitan un sitio<span class=\"ez-toc-section-end\"><\/span><\/h2>\n\n<p>La principal conclusi\u00f3n pr\u00e1ctica para los propietarios de p\u00e1ginas web es que <strong>los logs del servidor ofrecen informaci\u00f3n directa sobre las peticiones que reciben los archivos<\/strong>. En ellos es posible comprobar si existen solicitudes dirigidas al sitemap, al RSS u otros recursos.<\/p>\n\n<p>En el caso de los crawlers de IA, estos registros pueden resultar especialmente \u00fatiles porque no existe un sistema universal equivalente a Search Console para enviar un sitemap a todas las plataformas. Revisar qu\u00e9 agentes visitan el sitio puede ayudar a entender c\u00f3mo est\u00e1 siendo descubierto el contenido.<\/p>\n\n<p>La recomendaci\u00f3n de Mueller no supone abandonar los sitemaps tradicionales. Al contrario, su planteamiento apunta a <strong>mantener una estructura sencilla y accesible<\/strong>, con nombres est\u00e1ndar y feeds correctamente enlazados, si el objetivo es facilitar el descubrimiento del contenido tanto por buscadores como por otros sistemas automatizados.<\/p>\n\n<p>En un escenario donde los sistemas de IA rastrean cada vez m\u00e1s informaci\u00f3n publicada en la web, la conversaci\u00f3n de Google devuelve protagonismo a herramientas que ya forman parte de la infraestructura SEO. <strong>Sitemap.xml, RSS, robots.txt y los registros del servidor siguen siendo elementos relevantes<\/strong> para entender c\u00f3mo se encuentra y se rastrea un sitio.<\/p>\n\n\n\n<p><\/p>\n","protected":false},"excerpt":{"rendered":"<p>John Mueller, responsable de Search Relations de Google, ha explicado que algunos crawlers utilizados por sistemas de inteligencia artificial acceden &#8230; <\/p>\n<p class=\"read-more-container\"><a title=\"Google confirma que algunos crawlers de IA acceden a sitemaps y feeds RSS\" class=\"read-more button\" href=\"https:\/\/quondos.com\/mag\/google-confirma-que-algunos-crawlers-de-ia-acceden-a-sitemaps-y-feeds-rss\/#more-131454\" aria-label=\"Leer m\u00e1s sobre Google confirma que algunos crawlers de IA acceden a sitemaps y feeds RSS\">Leer m\u00e1s<\/a><\/p>\n","protected":false},"author":850,"featured_media":124474,"comment_status":"open","ping_status":"closed","sticky":false,"template":"","format":"standard","meta":{"footnotes":""},"categories":[236],"tags":[],"class_list":["post-131454","post","type-post","status-publish","format-standard","has-post-thumbnail","hentry","category-seo","generate-columns","tablet-grid-50","mobile-grid-100","grid-parent","grid-50","no-featured-image-padding"],"_links":{"self":[{"href":"https:\/\/quondos.com\/mag\/wp-json\/wp\/v2\/posts\/131454","targetHints":{"allow":["GET"]}}],"collection":[{"href":"https:\/\/quondos.com\/mag\/wp-json\/wp\/v2\/posts"}],"about":[{"href":"https:\/\/quondos.com\/mag\/wp-json\/wp\/v2\/types\/post"}],"author":[{"embeddable":true,"href":"https:\/\/quondos.com\/mag\/wp-json\/wp\/v2\/users\/850"}],"replies":[{"embeddable":true,"href":"https:\/\/quondos.com\/mag\/wp-json\/wp\/v2\/comments?post=131454"}],"version-history":[{"count":1,"href":"https:\/\/quondos.com\/mag\/wp-json\/wp\/v2\/posts\/131454\/revisions"}],"predecessor-version":[{"id":131455,"href":"https:\/\/quondos.com\/mag\/wp-json\/wp\/v2\/posts\/131454\/revisions\/131455"}],"wp:featuredmedia":[{"embeddable":true,"href":"https:\/\/quondos.com\/mag\/wp-json\/wp\/v2\/media\/124474"}],"wp:attachment":[{"href":"https:\/\/quondos.com\/mag\/wp-json\/wp\/v2\/media?parent=131454"}],"wp:term":[{"taxonomy":"category","embeddable":true,"href":"https:\/\/quondos.com\/mag\/wp-json\/wp\/v2\/categories?post=131454"},{"taxonomy":"post_tag","embeddable":true,"href":"https:\/\/quondos.com\/mag\/wp-json\/wp\/v2\/tags?post=131454"}],"curies":[{"name":"wp","href":"https:\/\/api.w.org\/{rel}","templated":true}]}}