{"id":15552,"date":"2018-02-05T06:46:01","date_gmt":"2018-02-05T14:46:01","guid":{"rendered":"https:\/\/staging.kinsta.site\/es\/?p=15552"},"modified":"2021-01-21T18:14:08","modified_gmt":"2021-01-21T17:14:08","slug":"robots-txt-de-wordpress","status":"publish","type":"post","link":"https:\/\/staging.kinsta.site\/es\/blog\/robots-txt-de-wordpress\/","title":{"rendered":"Gu\u00eda de Robots.txt de WordPress \u2013  \u00bfQu\u00e9 Es y C\u00f3mo Se Utiliza?"},"content":{"rendered":"<p>\u00bfAlguna vez escuch\u00f3 el t\u00e9rmino robots.txt y se pregunt\u00f3 c\u00f3mo se aplica a su sitio web? La mayor\u00eda de los sitios web tienen un archivo robots.txt, pero eso no significa que la mayor\u00eda de los webmasters lo entiendan. En esta publicaci\u00f3n, esperamos cambiar la percepci\u00f3n, al ofrecer una inmersi\u00f3n profunda en el archivo robots.txt de <a href=\"https:\/\/staging.kinsta.site\/es\/base-de-conocimiento\/que-es-wordpress\/\">WordPress<\/a> y tambi\u00e9n sabr\u00e1 c\u00f3mo puede controlar y limitar el acceso a su sitio web. Al final, usted ser\u00e1 capaz de responder a preguntas como:<\/p>\n<ul>\n<li><a href=\"#what\">\u00bfQu\u00e9 es un archivo robots.txt de WordPress?<\/a><\/li>\n<li><a href=\"#benefit\">\u00bfC\u00f3mo puede robots.txt ayudar a mi sitio web?<\/a><\/li>\n<li><a href=\"#how\">\u00bfC\u00f3mo puedo a\u00f1adir un archivo robots.txt a WordPress?<\/a><\/li>\n<li><a href=\"#rules\">\u00bfQu\u00e9 tipo de reglas puedo poner en robots.txt?<\/a><\/li>\n<li><a href=\"#test-robots.txt\">\u00bfC\u00f3mo puedo probar mi archivo robots.txt?<\/a><\/li>\n<li><a href=\"#examples\">\u00bfC\u00f3mo grandes sitios web de WordPress implementan robots.txt?<\/a><\/li>\n<\/ul>\n<p>\u00a1Hay mucho para tratar, as\u00ed que vamos a empezar!<\/p>\n<h2><a id=\"what\"><\/a>\u00bfQu\u00e9 Es un Archivo Robots.txt de WordPress?<\/h2>\n<p>Antes de que podamos hablar sobre el robots.txt de WordPress, es importante definir lo que es un \u00abrobot\u00bb en este caso. Los robots son cualquier tipo de \u00abbot\u00bb que visitan los sitios web en internet. El ejemplo m\u00e1s com\u00fan son rastreadores de motor de b\u00fasqueda. Estos robots se \u00abarrastran\u00bb en la web para ayudar a los motores de b\u00fasqueda como Google a indexar y clasificar los miles de millones de p\u00e1ginas en internet.<\/p>\n<p>As\u00ed, los bots son, <i>en general<\/i>, una buena cosa para el internet\u2026 o al menos una cosa necesaria. Pero eso no significa necesariamente que usted, u otros webmasters, quieran robots corriendo sin restricciones. El deseo de controlar c\u00f3mo los webrobots interact\u00faan con sitios web condujo a la creaci\u00f3n del <b>Est\u00e1ndar de Exclusi\u00f3n de<\/b> <b>Robots <\/b>a<b> <\/b>mediados de la d\u00e9cada de 1990. Robots.txt es la aplicaci\u00f3n pr\u00e1ctica de esa norma &#8211;<b>le permite controlar c\u00f3mo los robots participantes interact\u00faan con su sitio web<\/b>. Puede bloquear totalmente los bots, restringir su acceso a ciertas \u00e1reas de su sitio web, y otras cosas.<\/p>\n<p>La parte \u00abparticipaci\u00f3n\u00bb es importante, sin embargo. Robots.txt no puede<i> forzar a <\/i>un bot a seguir sus directrices. Y los bots maliciosos pueden y omitir\u00e1n el archivo robots.txt. Incluso las organizaciones prestigiosas ignorar<i>an algunos <\/i>comandos que usted puede poner en robots.txt. Por ejemplo, <a href=\"https:\/\/productforums.google.com\/forum\/#!topic\/webmasters\/oBbFpMoygF0\" target=\"_blank\" rel=\"noopener noreferrer\">Google ignorar\u00e1 las reglas<\/a> que agregue a su robots.txt sobre la frecuencia con la que sus rastreadores visitan a su sitio web. Si usted tiene un mont\u00f3n de problemas con los bots, una soluci\u00f3n de seguridad como <a href=\"https:\/\/www.cloudflare.com\" target=\"_blank\" rel=\"noopener noreferrer\">Cloudflare<\/a> o <a href=\"https:\/\/sucuri.net\" target=\"_blank\" rel=\"noopener noreferrer\">Sucuri<\/a> pueden ser pr\u00e1cticos.<\/p>\n<h3><a id=\"benefit\"><\/a>\u00bfPor Qu\u00e9 Debe Preocuparse por su Archivo Robots.txt?<\/h3>\n<p>Para la mayor\u00eda de los webmasters, las ventajas de un archivo robots.txt bien estructurado se reducen a dos categor\u00edas:<\/p>\n<ul>\n<li>Optimizaci\u00f3n de los recursos de rastreo de los motores de b\u00fasqueda dici\u00e9ndoles que no pierdan el tiempo en p\u00e1ginas que no desea indexar. Esto ayuda a garantizar que los motores de b\u00fasqueda se centren en el rastreo de las p\u00e1ginas que m\u00e1s le interesan.<\/li>\n<li>Optimizar el uso del servidor mediante el bloqueo de los robots que est\u00e1n desperdiciando recursos.<\/li>\n<\/ul>\n<p>Robots.txt No Se Trata Espec\u00edficamente sobre Controlar Qu\u00e9 P\u00e1ginas Son Indexadas en los Motores de B\u00fasqueda<\/p>\n<p>Robots.txt <b>no es<\/b> una forma infalible para controlar las p\u00e1ginas indexadas por los motores de b\u00fasqueda. Si su objetivo principal es detener que ciertas p\u00e1ginas se incluyan en los resultados del motor de b\u00fasqueda, el enfoque adecuado es <a href=\"https:\/\/support.google.com\/webmasters\/answer\/93710?hl=en\" target=\"_blank\" rel=\"noopener noreferrer\">usar una etiqueta meta \u201cnoindex\u201d<\/a> u otro m\u00e9todo similar directo.<\/p>\n<p>Esto es debido a que su robots.txt <b>no<\/b> est\u00e1 directamente diciendo a los motores de b\u00fasqueda a <b>indexar <\/b>contenido &#8211; simplemente les dice que no <b>rastreen a \u00e9l<\/b>. Si bien Google no rastrear\u00e1 las \u00e1reas marcadas desde el interior de su sitio, <a href=\"https:\/\/support.google.com\/webmasters\/answer\/6062608?hl=en\" target=\"_blank\" rel=\"noopener noreferrer\">Google mismo afirma<\/a> que si un sitio externo se vincula a una p\u00e1gina que usted excluye con su archivo robots.txt, Google a\u00fan podr\u00eda indexar esa p\u00e1gina.<\/p>\n<p>John Mueller un analista Webmaster de Google confirm\u00f3 que si una p\u00e1gina tiene enlaces que se apuntan a ella <a href=\"https:\/\/www.searchenginejournal.com\/google-pages-blocked-robots-txt-will-get-indexed-theyre-linked\/255911\/\" target=\"_blank\" rel=\"noopener noreferrer\">puede ser indexada<\/a>\u00a0incluso si fue bloqueada por robots.txt. He aqu\u00ed lo que \u00e9l dijo en una sesi\u00f3n de Webmasters:<\/p>\n<p>Una cosa para tener en cuenta es que si estas p\u00e1gina son bloqueadas por robots.txt te\u00f3ricamente puede suceder que alguien las enlace por casualidad. Si \u00a0esto pasa <strong>quiz\u00e1s indexemos esta URL<\/strong> sin cualquier contenido porque es bloqueada por robots.txt. As\u00ed no sabr\u00edamos que usted no quer\u00eda que las p\u00e1ginas sean indexadas-<\/p>\n<p>Si no son bloqueadas por robots.txt puede usar una etiqueta de meta no index en dichas p\u00e1ginas. Si alguien las enlaza y nosotros arrastramos el link y pensamos que es algo \u00fatil sabr\u00edamos que estas p\u00e1ginas no deben ser indexadas y simplemente las saltamos por completo.<\/p>\n<p>Por lo tanto si tiene p\u00e1ginas que no quiere que sean indexadas no las desautorice <strong>sino use las etiquetas noindex<\/strong>.<\/p>\n<h2><a id=\"how\"><\/a>C\u00f3mo Crear y Aditar su archivo Robots.txt de WordPress<\/h2>\n<p>De forma predeterminada, WordPress crea autom\u00e1ticamente un archivo robots.txt virtual para su sitio. As\u00ed que incluso si no levanta ni un dedo, su sitio ya debe tener el archivo robots.txt predeterminado. Puede comprobar si \u00e9ste es el caso, a\u00f1adiendo \u00ab\/robots.txt\u00bb al final de su nombre de dominio. Por ejemplo, \u00abhttps:\/\/staging.kinsta.site\/robots.txt\u00bb abre el archivo robots.txt que utilizamos aqu\u00ed en Kinsta:<\/p>\n<figure id=\"attachment_15550\" aria-describedby=\"caption-attachment-15550\" style=\"width: 899px\" class=\"wp-caption aligncenter\"><img loading=\"lazy\" decoding=\"async\" class=\"wp-image-15550 size-full\" src=\"https:\/\/staging.kinsta.site\/es\/wp-content\/uploads\/sites\/8\/2018\/02\/robots.txt-de-wordpress-2.png\" alt=\"Ejemplo de un archivo robots.txt\" width=\"899\" height=\"140\" srcset=\"https:\/\/staging.kinsta.site\/es\/wp-content\/uploads\/sites\/8\/2018\/02\/robots.txt-de-wordpress-2.png 899w, https:\/\/staging.kinsta.site\/es\/wp-content\/uploads\/sites\/8\/2018\/02\/robots.txt-de-wordpress-2-300x47.png 300w, https:\/\/staging.kinsta.site\/es\/wp-content\/uploads\/sites\/8\/2018\/02\/robots.txt-de-wordpress-2-768x120.png 768w, https:\/\/staging.kinsta.site\/es\/wp-content\/uploads\/sites\/8\/2018\/02\/robots.txt-de-wordpress-2-610x95.png 610w\" sizes=\"auto, (max-width: 899px) 100vw, 899px\" \/><figcaption id=\"caption-attachment-15550\" class=\"wp-caption-text\">Ejemplo de un archivo robots.txt<\/figcaption><\/figure>\n<p>Debido a que este archivo es virtual, sin embargo, no se puede editar. Si desea editar el archivo robots.txt, necesitar\u00e1 crear un archivo f\u00edsico en el servidor que se pueda manipular seg\u00fan sea necesario. Aqu\u00ed est\u00e1n tres maneras sencillas para hacer eso&#8230;<\/p>\n<h3>C\u00f3mo Crear y Editar un Archivo Robots.txt con Yoast SEO<\/h3>\n<p>Si est\u00e1 usando el popular plugin Yoast SEO, usted puede crear (y m\u00e1s tarde editar) el archivo robots.txt desde la interfaz de Yoast. Antes de que usted pueda acceder a \u00e9l, se necesita activar funciones avanzadas de Yoast SEO yendo a <b>SEO \u2192 Panel de Control \u2192 Caracter\u00edsticas <\/b>y encender <b>P\u00e1ginas de configuraci\u00f3n avanzada:<\/b><\/p>\n<figure id=\"attachment_15549\" aria-describedby=\"caption-attachment-15549\" style=\"width: 1024px\" class=\"wp-caption aligncenter\"><img loading=\"lazy\" decoding=\"async\" class=\"wp-image-15549 size-full\" src=\"https:\/\/staging.kinsta.site\/es\/wp-content\/uploads\/sites\/8\/2018\/02\/robots.txt-de-wordpress-3.png\" alt=\"C\u00f3mo habilitar las caracter\u00edsticas avanzadas de Yoast\" width=\"1024\" height=\"630\" srcset=\"https:\/\/staging.kinsta.site\/es\/wp-content\/uploads\/sites\/8\/2018\/02\/robots.txt-de-wordpress-3.png 1024w, https:\/\/staging.kinsta.site\/es\/wp-content\/uploads\/sites\/8\/2018\/02\/robots.txt-de-wordpress-3-300x185.png 300w, https:\/\/staging.kinsta.site\/es\/wp-content\/uploads\/sites\/8\/2018\/02\/robots.txt-de-wordpress-3-768x473.png 768w, https:\/\/staging.kinsta.site\/es\/wp-content\/uploads\/sites\/8\/2018\/02\/robots.txt-de-wordpress-3-610x375.png 610w\" sizes=\"auto, (max-width: 1024px) 100vw, 1024px\" \/><figcaption id=\"caption-attachment-15549\" class=\"wp-caption-text\">C\u00f3mo habilitar las caracter\u00edsticas avanzadas de Yoast<\/figcaption><\/figure>\n<p>Una vez que se active, puede ir a <b>SEO \u2192 Herramientas <\/b>y hacer clic en <b>Editor de Archivo<\/b>:<\/p>\n<figure id=\"attachment_15548\" aria-describedby=\"caption-attachment-15548\" style=\"width: 1024px\" class=\"wp-caption aligncenter\"><img loading=\"lazy\" decoding=\"async\" class=\"wp-image-15548 size-full\" src=\"https:\/\/staging.kinsta.site\/es\/wp-content\/uploads\/sites\/8\/2018\/02\/robots.txt-de-wordpress-4.png\" alt=\"C\u00f3mo acceder al editor de archivo Yoast\" width=\"1024\" height=\"617\" srcset=\"https:\/\/staging.kinsta.site\/es\/wp-content\/uploads\/sites\/8\/2018\/02\/robots.txt-de-wordpress-4.png 1024w, https:\/\/staging.kinsta.site\/es\/wp-content\/uploads\/sites\/8\/2018\/02\/robots.txt-de-wordpress-4-300x181.png 300w, https:\/\/staging.kinsta.site\/es\/wp-content\/uploads\/sites\/8\/2018\/02\/robots.txt-de-wordpress-4-768x463.png 768w, https:\/\/staging.kinsta.site\/es\/wp-content\/uploads\/sites\/8\/2018\/02\/robots.txt-de-wordpress-4-610x368.png 610w\" sizes=\"auto, (max-width: 1024px) 100vw, 1024px\" \/><figcaption id=\"caption-attachment-15548\" class=\"wp-caption-text\">C\u00f3mo acceder al editor de archivo Yoast<\/figcaption><\/figure>\n<p>Asumiendo que todav\u00eda no tiene un archivo f\u00edsico robots.txt, Yoast le dar\u00e1 la opci\u00f3n de <b>crear uno<\/b>:<\/p>\n<figure id=\"attachment_15547\" aria-describedby=\"caption-attachment-15547\" style=\"width: 887px\" class=\"wp-caption aligncenter\"><img loading=\"lazy\" decoding=\"async\" class=\"wp-image-15547 size-full\" src=\"https:\/\/staging.kinsta.site\/es\/wp-content\/uploads\/sites\/8\/2018\/02\/robots.txt-de-wordpress-5.png\" alt=\"C\u00f3mo crear robots.txt en Yoast\" width=\"887\" height=\"470\" srcset=\"https:\/\/staging.kinsta.site\/es\/wp-content\/uploads\/sites\/8\/2018\/02\/robots.txt-de-wordpress-5.png 887w, https:\/\/staging.kinsta.site\/es\/wp-content\/uploads\/sites\/8\/2018\/02\/robots.txt-de-wordpress-5-300x159.png 300w, https:\/\/staging.kinsta.site\/es\/wp-content\/uploads\/sites\/8\/2018\/02\/robots.txt-de-wordpress-5-768x407.png 768w, https:\/\/staging.kinsta.site\/es\/wp-content\/uploads\/sites\/8\/2018\/02\/robots.txt-de-wordpress-5-610x323.png 610w\" sizes=\"auto, (max-width: 887px) 100vw, 887px\" \/><figcaption id=\"caption-attachment-15547\" class=\"wp-caption-text\">C\u00f3mo crear robots.txt en Yoast<\/figcaption><\/figure>\n<p>Y una vez que haga clic en ese bot\u00f3n, podr\u00e1 editar el contenido de su archivo robots.txt directamente desde la interfaz:<\/p>\n<figure id=\"attachment_15546\" aria-describedby=\"caption-attachment-15546\" style=\"width: 925px\" class=\"wp-caption aligncenter\"><img loading=\"lazy\" decoding=\"async\" class=\"wp-image-15546 size-full\" src=\"https:\/\/staging.kinsta.site\/es\/wp-content\/uploads\/sites\/8\/2018\/02\/robots.txt-de-wordpress-6.png\" alt=\"C\u00f3mo editar robots.txt en Yoast\" width=\"925\" height=\"441\" srcset=\"https:\/\/staging.kinsta.site\/es\/wp-content\/uploads\/sites\/8\/2018\/02\/robots.txt-de-wordpress-6.png 925w, https:\/\/staging.kinsta.site\/es\/wp-content\/uploads\/sites\/8\/2018\/02\/robots.txt-de-wordpress-6-300x143.png 300w, https:\/\/staging.kinsta.site\/es\/wp-content\/uploads\/sites\/8\/2018\/02\/robots.txt-de-wordpress-6-768x366.png 768w, https:\/\/staging.kinsta.site\/es\/wp-content\/uploads\/sites\/8\/2018\/02\/robots.txt-de-wordpress-6-610x291.png 610w\" sizes=\"auto, (max-width: 925px) 100vw, 925px\" \/><figcaption id=\"caption-attachment-15546\" class=\"wp-caption-text\">C\u00f3mo editar robots.txt en Yoast<\/figcaption><\/figure>\n<p>A medida que siga leyendo este art\u00edculo, profundizaremos qu\u00e9 tipos de directivas incluir en su archivo robots.txt de WordPress.<\/p>\n<h3>C\u00f3mo Crear y Editar un Archivo Robots.txt con All In One SEO<\/h3>\n<p>Si est\u00e1 utilizando el plugin <b>All in One SEO<\/b> ,casi tan popular como Yoast, tambi\u00e9n puede crear y editar su archivo robots.txt de WordPress desde la interfaz del plugin. Todo lo que necesita hacer es ir a <b>All in One SEO \u2192 Administrador de caracter\u00edsticas <\/b>y <b>activar <\/b>la <b>caracter\u00edstica de robots.txt<\/b>:<\/p>\n<figure id=\"attachment_15545\" aria-describedby=\"caption-attachment-15545\" style=\"width: 1011px\" class=\"wp-caption aligncenter\"><img loading=\"lazy\" decoding=\"async\" class=\"wp-image-15545 size-full\" src=\"https:\/\/staging.kinsta.site\/es\/wp-content\/uploads\/sites\/8\/2018\/02\/robots.txt-de-wordpress-7.png\" alt=\"C\u00f3mo crear robots.txt en All In One SEO\" width=\"1011\" height=\"475\" srcset=\"https:\/\/staging.kinsta.site\/es\/wp-content\/uploads\/sites\/8\/2018\/02\/robots.txt-de-wordpress-7.png 1011w, https:\/\/staging.kinsta.site\/es\/wp-content\/uploads\/sites\/8\/2018\/02\/robots.txt-de-wordpress-7-300x141.png 300w, https:\/\/staging.kinsta.site\/es\/wp-content\/uploads\/sites\/8\/2018\/02\/robots.txt-de-wordpress-7-768x361.png 768w, https:\/\/staging.kinsta.site\/es\/wp-content\/uploads\/sites\/8\/2018\/02\/robots.txt-de-wordpress-7-610x287.png 610w\" sizes=\"auto, (max-width: 1011px) 100vw, 1011px\" \/><figcaption id=\"caption-attachment-15545\" class=\"wp-caption-text\">C\u00f3mo crear robots.txt en All In One SEO<\/figcaption><\/figure>\n<p>A continuaci\u00f3n, podr\u00e1 gestionar su archivo robots.txt yendo a All In One SEO<b> \u2192 robots.txt:<\/b><\/p>\n<figure id=\"attachment_15544\" aria-describedby=\"caption-attachment-15544\" style=\"width: 979px\" class=\"wp-caption aligncenter\"><img loading=\"lazy\" decoding=\"async\" class=\"wp-image-15544 size-full\" src=\"https:\/\/staging.kinsta.site\/es\/wp-content\/uploads\/sites\/8\/2018\/02\/robots.txt-de-wordpress-8.png\" alt=\"C\u00f3mo editar los robots.txt en All In One SEO\" width=\"979\" height=\"531\" srcset=\"https:\/\/staging.kinsta.site\/es\/wp-content\/uploads\/sites\/8\/2018\/02\/robots.txt-de-wordpress-8.png 979w, https:\/\/staging.kinsta.site\/es\/wp-content\/uploads\/sites\/8\/2018\/02\/robots.txt-de-wordpress-8-300x163.png 300w, https:\/\/staging.kinsta.site\/es\/wp-content\/uploads\/sites\/8\/2018\/02\/robots.txt-de-wordpress-8-768x417.png 768w, https:\/\/staging.kinsta.site\/es\/wp-content\/uploads\/sites\/8\/2018\/02\/robots.txt-de-wordpress-8-610x331.png 610w\" sizes=\"auto, (max-width: 979px) 100vw, 979px\" \/><figcaption id=\"caption-attachment-15544\" class=\"wp-caption-text\">C\u00f3mo editar los robots.txt en All In One SEO<\/figcaption><\/figure>\n<h3>C\u00f3mo Crear y Editar un Archivo Robots.txt a V\u00eda FTP<\/h3>\n<p>Si no est\u00e1 usando un plugin de SEO que ofrece funcionalidad de robots.txt, puede crear y administrar su archivo robots.txt mediante SFTP. En primer lugar, utilice cualquier editor de texto para crear un archivo vac\u00edo con el nombre \u00abrobots.txt\u00bb:<\/p>\n<figure id=\"attachment_15543\" aria-describedby=\"caption-attachment-15543\" style=\"width: 962px\" class=\"wp-caption aligncenter\"><img loading=\"lazy\" decoding=\"async\" class=\"wp-image-15543 size-full\" src=\"https:\/\/staging.kinsta.site\/es\/wp-content\/uploads\/sites\/8\/2018\/02\/robots.txt-de-wordpress-9.png\" alt=\"C\u00f3mo crear su propio archivo sobots.txt\" width=\"962\" height=\"554\" srcset=\"https:\/\/staging.kinsta.site\/es\/wp-content\/uploads\/sites\/8\/2018\/02\/robots.txt-de-wordpress-9.png 962w, https:\/\/staging.kinsta.site\/es\/wp-content\/uploads\/sites\/8\/2018\/02\/robots.txt-de-wordpress-9-300x173.png 300w, https:\/\/staging.kinsta.site\/es\/wp-content\/uploads\/sites\/8\/2018\/02\/robots.txt-de-wordpress-9-768x442.png 768w, https:\/\/staging.kinsta.site\/es\/wp-content\/uploads\/sites\/8\/2018\/02\/robots.txt-de-wordpress-9-610x351.png 610w\" sizes=\"auto, (max-width: 962px) 100vw, 962px\" \/><figcaption id=\"caption-attachment-15543\" class=\"wp-caption-text\">C\u00f3mo crear su propio archivo sobots.txt<\/figcaption><\/figure>\n<p>A continuaci\u00f3n, <a href=\"https:\/\/staging.kinsta.site\/es\/base-de-conocimiento\/como-usar-sftp\/\" target=\"_blank\" rel=\"noopener noreferrer\">con\u00e9ctese a su sitio web v\u00eda SFTP<\/a> y cargue ese archivo a la <b>carpeta ra\u00edz <\/b>de su sitio. Puede introducir nuevas modificaciones en el archivo robots.txt al editarlo v\u00eda SFTP o cargar nuevas versiones del archivo.<\/p>\n<h2><a id=\"rules\"><\/a>Qu\u00e9 Poner en Su Archivo Robots.txt<\/h2>\n<p>Ahora tiene un archivo f\u00edsico robots.txt en su servidor que puede modificar seg\u00fan sea necesario. Pero \u00bfqu\u00e9 se puede hacer con ese archivo? Como ya se ha visto en la primera secci\u00f3n, robots.txt le permite controlar c\u00f3mo los robots interact\u00faan con el sitio. Hay que hacerlo con dos comandos principales:<\/p>\n<ul>\n<li><b>Usuario-agente<\/b>: este le permite segmentar los bots. Los agentes de usuario son lo que los bots utilizan para identificarse. Con ellos, por ejemplo, podr\u00eda crear una regla que se aplica a Bing, pero no a Google.<\/li>\n<li><b>Denegar<\/b>&#8211; esto le permite comunicar a los robots que no accedan a ciertas \u00e1reas del sitio.<\/li>\n<\/ul>\n<p>Tambi\u00e9n hay un <b>comando Permitir <\/b>que usted utilizar\u00e1 en situaciones de nicho. De forma predeterminada, todo en su sitio est\u00e1 marcado con<b> Permitir<\/b>, as\u00ed que no es necesario utilizar el comando<b> Permitir <\/b>en el 99% de las situaciones. Pero es pr\u00e1ctico cuando desea <b>Rechazar <\/b>el<b> <\/b>acceso a una carpeta y sus subcarpetas, pero P<b>ermitir <\/b>el<b> <\/b>acceso a una determinada carpeta secundaria.<\/p>\n<p>Usted agrega las reglas especificando primero a qu\u00e9 \u00ab<b>Usuario-agente <\/b>deber\u00eda aplicarse la regla y, a continuaci\u00f3n, hacer una lista qu\u00e9 normas aplicar con <b>Rechazar <\/b>y <b>Permitir<\/b>. Tambi\u00e9n hay otros comandos como <b>Arrastrar-retrasar <\/b>y <b>Mapa de sitio<\/b>, pero estas son:<\/p>\n<ul>\n<li>Ignoradas por la mayor\u00eda de los rastreadores, o se interpretan de muy distintas maneras (en el caso de Arrastrar-retrasar)<\/li>\n<li>Hecho redundante por herramientas como Google Search Console (para mapas de sitio)<\/li>\n<\/ul>\n<p>Vamos a ver algunos casos de uso espec\u00edficos para mostrarle c\u00f3mo todo esto viene junto.<\/p>\n<p>C\u00f3mo Usar Robots.txt para Bloquear el Acceso a Su Sitio Entero<\/p>\n<p>Digamos que usted desea bloquear <b>todo el <\/b>acceso del rastreador a su sitio. Es poco probable que esto ocurra en vivo en un sitio web, pero viene siendo \u00fatil para el desarrollo de un sitio web. Para ello, tendr\u00eda que agregar este c\u00f3digo a su archivo robots.txt de WordPress:<\/p>\n<pre><code>User-agent: *\nDisallow: \/<\/code><\/pre>\n<p>\u00bfQu\u00e9 est\u00e1 pasando en ese c\u00f3digo?<\/p>\n<p>El asterisco (*<b>) <\/b>junto a \u00ab<b>user-agent <\/b>significa \u00abtodos los agentes de usuario\u00bb. El asterisco es un car\u00e1cter comod\u00edn, lo que significa que se aplica a cada agente de usuario. El <b>\/Slash <\/b>junto a <b>Rechazar <\/b>dice que desea prohibir el acceso a <b>todas <\/b>las p\u00e1ginas que contengan \u00abyourdomain.com\/\u00bb (que es cada p\u00e1gina de su sitio web).<\/p>\n<h3>C\u00f3mo Usar Robots.txt para Bloquear que un Solo Bot Acceda a Su Sitio web<\/h3>\n<p>Vamos a cambiar las cosas. En este ejemplo, vamos a simular que no le gusta el hecho de que Bing rastree sus p\u00e1ginas. Es completamente partidario de Google y no desea que Bing rastree su sitio. Para bloquear <b>s\u00f3lo a <\/b>Bing usted podr\u00eda sustituir el car\u00e1cter comod\u00edn<b>*asterisco <\/b>con <b>Bingbot:<\/b><\/p>\n<pre><code>User-agent: Bingbot\nDisallow: \/<\/code><\/pre>\n<p>El c\u00f3digo anterior dice que solo SE aplique la regla Disallow a los bots con el agente de usuario \u00abBingbot\u00bb.. Ahora bien, es poco probable que desee bloquear el acceso a Bing &#8211; pero este escenario es pr\u00e1ctico si existe un bot que no desee que acceda a su sitio.\u00a0<a href=\"http:\/\/www.useragentstring.com\/pages\/useragentstring.php\" target=\"_blank\" rel=\"noopener noreferrer\">Este sitio<\/a> tiene una extensa lista con la mayor\u00eda de los nombres usuario-agente conocidos.<\/p>\n<h3>C\u00f3mo Usar Robots.txt para Bloquear el Acceso a una Carpeta o Archivo Espec\u00edfico<\/h3>\n<p>Para este ejemplo, supongamos que s\u00f3lo desea bloquear el acceso a un archivo o carpeta concreto (y todas las subcarpetas de la carpeta). Para hacer que esto se aplique a WordPress, digamos que desea bloquear:<\/p>\n<ul>\n<li>Toda la carpeta wp-admin<\/li>\n<li>wp-login.php<\/li>\n<\/ul>\n<p>Puede usar los siguientes comandos:<\/p>\n<pre><code>User-agent: *\nDisallow: \/wp-admin\/\nDisallow: \/wp-login.php<\/code><\/pre>\n<h3>C\u00f3mo Usar Robots.txt para Permitir el Acceso a un Archivo Espec\u00edfico en una Carpeta no Permitida<\/h3>\n<p>Digamos que usted desea bloquear una carpeta entera, pero todav\u00eda desea permitir el acceso a un archivo espec\u00edfico dentro de esa carpeta. Aqu\u00ed es donde el <b>comando Permitir <\/b>es pr\u00e1ctico. Y es realmente muy aplicable a WordPress. De hecho, el archivo de robots.txt virtual ilustra perfectamente este ejemplo:<\/p>\n<pre><code>User-agent: *\nDisallow: \/wp-admin\/\nAllow: \/wp-admin\/admin-ajax.php<\/code><\/pre>\n<p>Este fragmento bloquea el acceso a toda la carpeta<b> \/wp-admin\/<\/b>excepto el archivo <b>\/wp-admin\/admin-ajax.php<\/b>.<\/p>\n<h3>C\u00f3mo Usar Robots.txt para Detener a los Bots de Rastrear los Resultados de B\u00fasqueda de WordPress<\/h3>\n<p>Si usted desea evitar que los rastreadores de b\u00fasqueda rastreen las p\u00e1ginas de resultados de b\u00fasqueda existe un ajuste espec\u00edfico de WordPress. Por defecto, WordPress utiliza el par\u00e1metro de consulta \u00ab?s=\u00bb. A fin de bloquear el acceso, todo lo que tiene que hacer es a\u00f1adir la siguiente regla:<\/p>\n<pre><code>User-agent: *\nDisallow: \/?s=\nDisallow: \/search\/<\/code><\/pre>\n<p>Esta puede ser una manera eficaz para detener <a href=\"https:\/\/woorkup.com\/soft-404-errors\/\" target=\"_blank\" rel=\"noopener noreferrer\">errores 404 menores<\/a> si los est\u00e1 obteniendo. Aseg\u00farese de leer nuestra gu\u00eda detallada sobre c\u00f3mo <a href=\"https:\/\/staging.kinsta.site\/es\/blog\/busqueda-wordpress\/\">acelerar la b\u00fasqueda en WordPress<\/a>.<\/p>\n<h3>C\u00f3mo Crear Distintas Reglas para Diferentes Robots en Robots.txt<\/h3>\n<p>Hasta ahora, todos los ejemplos han tratado la regla cada vez. Pero, \u00bfqu\u00e9 ocurre si desea aplicar reglas diferentes a diferentes bots? Usted Simplemente necesita agregar cada conjunto de reglas bajo la declaraci\u00f3n del agente de usuario para cada bot . Por ejemplo, si desea crear una regla que se aplique a <b>todos los bots <\/b>y otra regla que se aplique \u00fanicamente a <b>Bingbot<\/b>, puede hacer lo siguiente:<\/p>\n<pre><code>User-agent: *\nDisallow: \/wp-admin\/\nUser-agent: Bingbot\nDisallow: \/<\/code><\/pre>\n<p>En este ejemplo,<b>todos los bots <\/b>ser\u00e1n bloqueados a acceder a \/wp-admin\/, pero <b>Bingbot <\/b>ser\u00e1 bloqueado de acceder a todo el sitio.<\/p>\n<h2><a id=\"test-robots.txt\"><\/a>Comprobaci\u00f3n de Su Archivo Robots.txt<\/h2>\n<p>Puede comprobar su archivo robots.txt de WordPress en la <a href=\"https:\/\/staging.kinsta.site\/es\/blog\/google-search-console\/\" target=\"_blank\" rel=\"noopener noreferrer\">Google Search Console<\/a> para asegurarse de que se haya configurado correctamente. Simplemente haga clic en su sitio web, y en \u00abrastrear\u00bb, haga clic en Comprobador de \u00abrobots.txt\u00bb. A continuaci\u00f3n, puede enviar cualquier URL, incluida su p\u00e1gina web. Usted debe ver en verde <b>Permitido\/Allowed <\/b>si todo es<b> <\/b>rastreable. Tambi\u00e9n podr\u00eda probar una URL que ha bloqueado para garantizar que en realidad est\u00e9 bloqueada, y\/o <b>Rechazado\/ Disallowed<\/b>.<\/p>\n<figure id=\"attachment_15542\" aria-describedby=\"caption-attachment-15542\" style=\"width: 1024px\" class=\"wp-caption aligncenter\"><img loading=\"lazy\" decoding=\"async\" class=\"wp-image-15542 size-full\" src=\"https:\/\/staging.kinsta.site\/es\/wp-content\/uploads\/sites\/8\/2018\/02\/robots.txt-de-wordpress-10-1.png\" alt=\"Comprobar el archivo robots.txt\" width=\"1024\" height=\"648\"><figcaption id=\"caption-attachment-15542\" class=\"wp-caption-text\">Comprobar el archivo robots.txt<\/figcaption><\/figure>\n<h3>Tenga Cuidado con UTF-8 BOM<\/h3>\n<p>BOM significa marca de orden de bytes y es b\u00e1sicamente un personaje invisible que a veces se agrega a los archivos antiguos por los editores de texto y similares. Si esto le sucede a su archivo robots.txt, Google podr\u00eda no leerlo correctamente. Esta es la raz\u00f3n por la cual es importante verificar si hay errores en su archivo. Por ejemplo, como se ve a continuaci\u00f3n, nuestro expediente ten\u00eda un car\u00e1cter invisible y Google se quejaba por la sintaxis que no se entiende. \u00a1B\u00e1sicamente, esto invalida la primera l\u00ednea de nuestro archivo robots.txt por completo, lo que no es bueno! Glenn Gabe tiene un excelente art\u00edculo sobre c\u00f3mo un <a href=\"https:\/\/www.gsqi.com\/marketing-blog\/utf-8-bom-robots-txt\/\" target=\"_blank\" rel=\"noopener noreferrer\">UTF-8 BOM podr\u00eda matar a sus SEO<\/a>.<\/p>\n<figure id=\"attachment_15541\" aria-describedby=\"caption-attachment-15541\" style=\"width: 1024px\" class=\"wp-caption aligncenter\"><img loading=\"lazy\" decoding=\"async\" class=\"wp-image-15541 size-full\" src=\"https:\/\/staging.kinsta.site\/es\/wp-content\/uploads\/sites\/8\/2018\/02\/robots.txt-de-wordpress-11.png\" alt=\"UTF-8 BOM en el archivo robots.txt\" width=\"1024\" height=\"527\" srcset=\"https:\/\/staging.kinsta.site\/es\/wp-content\/uploads\/sites\/8\/2018\/02\/robots.txt-de-wordpress-11.png 1024w, https:\/\/staging.kinsta.site\/es\/wp-content\/uploads\/sites\/8\/2018\/02\/robots.txt-de-wordpress-11-300x154.png 300w, https:\/\/staging.kinsta.site\/es\/wp-content\/uploads\/sites\/8\/2018\/02\/robots.txt-de-wordpress-11-768x395.png 768w, https:\/\/staging.kinsta.site\/es\/wp-content\/uploads\/sites\/8\/2018\/02\/robots.txt-de-wordpress-11-610x314.png 610w\" sizes=\"auto, (max-width: 1024px) 100vw, 1024px\" \/><figcaption id=\"caption-attachment-15541\" class=\"wp-caption-text\">UTF-8 BOM en el archivo robots.txt<\/figcaption><\/figure>\n<h3>Googlebot Se Basa Principalmente en los EUA<\/h3>\n<p>Tambi\u00e9n es importante no bloquear el Googlebot de los Estados Unidos, incluso si se dirige a una regi\u00f3n local fuera de los Estados Unidos. A veces hacen rastreo local, pero el robot de <strong>Google se basa principalmente en los EE. UU.<\/strong><\/p>\n<blockquote class=\"twitter-tweet\" data-width=\"500\" data-dnt=\"true\">\n<p lang=\"en\" dir=\"ltr\">Googlebot is mostly US-based, but we also sometimes do local crawling. <a href=\"https:\/\/t.co\/9KnmN4yXpe\">https:\/\/t.co\/9KnmN4yXpe<\/a><\/p>\n<p>&mdash; Google Search Central (@googlesearchc) <a href=\"https:\/\/twitter.com\/googlesearchc\/status\/930013394492633088?ref_src=twsrc%5Etfw\">November 13, 2017<\/a><\/p><\/blockquote>\n<p><script async src=\"https:\/\/platform.twitter.com\/widgets.js\" charset=\"utf-8\"><\/script><\/p>\n<h2><a id=\"examples\"><\/a>Qu\u00e9 Ponen Sitios Populares de WordPress en Su Archivo Robots.txt<\/h2>\n<p>Para proporcionar algo de contexto para los puntos arriba mencionados, as\u00ed es c\u00f3mo algunos de los m\u00e1s populares sitios de WordPress est\u00e1n utilizando sus archivos robots.txt.<\/p>\n<h3>TechCrunch<\/h3>\n<figure id=\"attachment_15540\" aria-describedby=\"caption-attachment-15540\" style=\"width: 901px\" class=\"wp-caption aligncenter\"><img loading=\"lazy\" decoding=\"async\" class=\"wp-image-15540 size-full\" src=\"https:\/\/staging.kinsta.site\/es\/wp-content\/uploads\/sites\/8\/2018\/02\/robots.txt-de-wordpress-12.png\" alt=\"Archivo Robots.txt de TechCrunch\" width=\"901\" height=\"487\" srcset=\"https:\/\/staging.kinsta.site\/es\/wp-content\/uploads\/sites\/8\/2018\/02\/robots.txt-de-wordpress-12.png 901w, https:\/\/staging.kinsta.site\/es\/wp-content\/uploads\/sites\/8\/2018\/02\/robots.txt-de-wordpress-12-300x162.png 300w, https:\/\/staging.kinsta.site\/es\/wp-content\/uploads\/sites\/8\/2018\/02\/robots.txt-de-wordpress-12-768x415.png 768w, https:\/\/staging.kinsta.site\/es\/wp-content\/uploads\/sites\/8\/2018\/02\/robots.txt-de-wordpress-12-610x330.png 610w\" sizes=\"auto, (max-width: 901px) 100vw, 901px\" \/><figcaption id=\"caption-attachment-15540\" class=\"wp-caption-text\">Archivo Robots.txt de TechCrunch<\/figcaption><\/figure>\n<p>Adem\u00e1s de restringir el acceso a un n\u00famero de p\u00e1ginas \u00fanicas, TechCrunch notablemente rechaza a los rastreadores:<\/p>\n<ul>\n<li>\/wp-admin\/<\/li>\n<li>\/wp-login.php<\/li>\n<\/ul>\n<p>Asimismo, establecen restricciones especiales sobre dos bots:<\/p>\n<ul>\n<li>Swiftbot<\/li>\n<li>IRLbot<\/li>\n<\/ul>\n<p>En caso de que est\u00e9 interesado, <a href=\"http:\/\/www.useragentstring.com\/pages\/useragentstring.php?name=IRLbot\" target=\"_blank\" rel=\"noopener noreferrer\">IRLbot es un rastreador de Texas A&#038;M University Research Project<\/a>. \u00a1Que extra\u00f1o!<\/p>\n<h3>La Fundaci\u00f3n de Obama<\/h3>\n<figure id=\"attachment_15539\" aria-describedby=\"caption-attachment-15539\" style=\"width: 900px\" class=\"wp-caption aligncenter\"><img loading=\"lazy\" decoding=\"async\" class=\"wp-image-15539 size-full\" src=\"https:\/\/staging.kinsta.site\/es\/wp-content\/uploads\/sites\/8\/2018\/02\/robots.txt-de-wordpress-13.png\" alt=\"Archivo Robots.txt de la Fundaci\u00f3n Obama\" width=\"900\" height=\"273\" srcset=\"https:\/\/staging.kinsta.site\/es\/wp-content\/uploads\/sites\/8\/2018\/02\/robots.txt-de-wordpress-13.png 900w, https:\/\/staging.kinsta.site\/es\/wp-content\/uploads\/sites\/8\/2018\/02\/robots.txt-de-wordpress-13-300x91.png 300w, https:\/\/staging.kinsta.site\/es\/wp-content\/uploads\/sites\/8\/2018\/02\/robots.txt-de-wordpress-13-768x233.png 768w, https:\/\/staging.kinsta.site\/es\/wp-content\/uploads\/sites\/8\/2018\/02\/robots.txt-de-wordpress-13-610x185.png 610w\" sizes=\"auto, (max-width: 900px) 100vw, 900px\" \/><figcaption id=\"caption-attachment-15539\" class=\"wp-caption-text\">Archivo Robots.txt de la Fundaci\u00f3n Obama<\/figcaption><\/figure>\n<p>La Fundaci\u00f3n Obama no ha hecho ninguna adici\u00f3n especial, opta exclusivamente para restringir el acceso a \/wp-admin\/.<\/p>\n<h3>Angry Birds<\/h3>\n<figure id=\"attachment_15537\" aria-describedby=\"caption-attachment-15537\" style=\"width: 900px\" class=\"wp-caption aligncenter\"><img loading=\"lazy\" decoding=\"async\" class=\"wp-image-15537 size-full\" src=\"https:\/\/staging.kinsta.site\/es\/wp-content\/uploads\/sites\/8\/2018\/02\/robots.txt-de-wordpress-15.png\" alt=\"Archivo robots.txt de Angry Birds\" width=\"900\" height=\"172\" srcset=\"https:\/\/staging.kinsta.site\/es\/wp-content\/uploads\/sites\/8\/2018\/02\/robots.txt-de-wordpress-15.png 900w, https:\/\/staging.kinsta.site\/es\/wp-content\/uploads\/sites\/8\/2018\/02\/robots.txt-de-wordpress-15-300x57.png 300w, https:\/\/staging.kinsta.site\/es\/wp-content\/uploads\/sites\/8\/2018\/02\/robots.txt-de-wordpress-15-768x147.png 768w, https:\/\/staging.kinsta.site\/es\/wp-content\/uploads\/sites\/8\/2018\/02\/robots.txt-de-wordpress-15-610x117.png 610w\" sizes=\"auto, (max-width: 900px) 100vw, 900px\" \/><figcaption id=\"caption-attachment-15537\" class=\"wp-caption-text\">Archivo robots.txt de Angry Birds<\/figcaption><\/figure>\n<p>Angry Birds tiene la misma configuraci\u00f3n por defecto como la Fundaci\u00f3n Obama. No se agrega nada especial.<\/p>\n<h3>Drift<\/h3>\n<figure id=\"attachment_15538\" aria-describedby=\"caption-attachment-15538\" style=\"width: 902px\" class=\"wp-caption aligncenter\"><img loading=\"lazy\" decoding=\"async\" class=\"wp-image-15538 size-full\" src=\"https:\/\/staging.kinsta.site\/es\/wp-content\/uploads\/sites\/8\/2018\/02\/robots.txt-de-wordpress-14.png\" alt=\"Archivo Robots.txt de Drift\" width=\"902\" height=\"197\" srcset=\"https:\/\/staging.kinsta.site\/es\/wp-content\/uploads\/sites\/8\/2018\/02\/robots.txt-de-wordpress-14.png 902w, https:\/\/staging.kinsta.site\/es\/wp-content\/uploads\/sites\/8\/2018\/02\/robots.txt-de-wordpress-14-300x66.png 300w, https:\/\/staging.kinsta.site\/es\/wp-content\/uploads\/sites\/8\/2018\/02\/robots.txt-de-wordpress-14-768x168.png 768w, https:\/\/staging.kinsta.site\/es\/wp-content\/uploads\/sites\/8\/2018\/02\/robots.txt-de-wordpress-14-610x133.png 610w\" sizes=\"auto, (max-width: 902px) 100vw, 902px\" \/><figcaption id=\"caption-attachment-15538\" class=\"wp-caption-text\">Archivo Robots.txt de Drift<\/figcaption><\/figure>\n<p>Por \u00faltimo, Drift opta definir sus mapas de sitio en el archivo robots.txt, pero de lo contrario, deja las mismas restricciones predeterminadas como la Fundaci\u00f3n Obama y Angry Birds.<\/p>\n<h2>Utilice el Archivo Robots.txt de Forma Correcta<\/h2>\n<p>Mientras concluimos nuestro gu\u00eda de robots.txt, queremos recordarle una vez m\u00e1s que el uso de un <b>comando Rechazar <\/b>en el archivo robots.txt no es lo mismo que usar una <b>etiqueta noindex<\/b>. Robots.txt bloquea el rastreo, pero no necesariamente la indexaci\u00f3n. Puede usarlo para agregar reglas espec\u00edficas para darle forma a c\u00f3mo los motores de b\u00fasqueda y otros bots interact\u00faan con su sitio web, pero no podr\u00e1 controlar expl\u00edcitamente si su contenido es o no es indexado.<\/p>\n<p>Para la mayor\u00eda de los usuarios casuales de WordPress, no hay una necesidad urgente de modificar el archivo virtual predeterminado de robots.txt. Pero si est\u00e1 teniendo problemas con un bot, o desea cambiar la forma de interactuar de los motores de b\u00fasqueda con un determinado plugin o tema que est\u00e1 usando, es posible que desee agregar sus propias reglas.<\/p>\n<p>Esperamos que haya disfrutado de esta gu\u00eda y aseg\u00farese de dejar un comentario si tiene m\u00e1s preguntas sobre el uso de su archivo robots.txt. de WordPress.<\/p>\n","protected":false},"excerpt":{"rendered":"<p>\u00bfAlguna vez escuch\u00f3 el t\u00e9rmino robots.txt y se pregunt\u00f3 c\u00f3mo se aplica a su sitio web? La mayor\u00eda de los sitios web tienen un archivo robots.txt, &#8230;<\/p>\n","protected":false},"author":38,"featured_media":15551,"comment_status":"open","ping_status":"closed","sticky":false,"template":"","format":"standard","meta":{"_kinsta_gated_content":false,"_kinsta_gated_content_redirect":"","footnotes":""},"tags":[227,172],"topic":[],"class_list":["post-15552","post","type-post","status-publish","format-standard","has-post-thumbnail","hentry","tag-seo","tag-wordpress"],"yoast_head":"<!-- This site is optimized with the Yoast SEO Premium plugin v17.1.2 (Yoast SEO v25.8) - https:\/\/yoast.com\/wordpress\/plugins\/seo\/ -->\n<title>Gu\u00eda de Robots.txt de Wordpress \u2013 \u00bfQu\u00e9 Es y C\u00f3mo Se Utiliza?<\/title>\n<meta name=\"description\" content=\"\u00bfQuiere saber qu\u00e9 es Robots.txt de WordPress y c\u00f3mo se aplica a su sitio? \u00a1En esta publicaci\u00f3n encuentra las respuestas! Aprenda todo sobre el robots.txt de WordPress.\" \/>\n<meta name=\"robots\" content=\"index, follow, max-snippet:-1, max-image-preview:large, max-video-preview:-1\" \/>\n<link rel=\"canonical\" href=\"https:\/\/staging.kinsta.site\/es\/blog\/robots-txt-de-wordpress\/\" \/>\n<meta property=\"og:locale\" content=\"es_ES\" \/>\n<meta property=\"og:type\" content=\"article\" \/>\n<meta property=\"og:title\" content=\"Gu\u00eda de Robots.txt de Wordpress \u2013 \u00bfQu\u00e9 Es y C\u00f3mo Se Utiliza?\" \/>\n<meta property=\"og:description\" content=\"\u00bfQuiere saber qu\u00e9 es Robots.txt de WordPress y c\u00f3mo se aplica a su sitio? \u00a1En esta publicaci\u00f3n encuentra las respuestas! Aprenda todo sobre el robots.txt de WordPress.\" \/>\n<meta property=\"og:url\" content=\"https:\/\/staging.kinsta.site\/es\/blog\/robots-txt-de-wordpress\/\" \/>\n<meta property=\"og:site_name\" content=\"Kinsta\" \/>\n<meta property=\"article:publisher\" content=\"https:\/\/www.facebook.com\/kinsta.es\/\" \/>\n<meta property=\"article:author\" content=\"https:\/\/www.facebook.com\/fm.brianleejackson\" \/>\n<meta property=\"article:published_time\" content=\"2018-02-05T14:46:01+00:00\" \/>\n<meta property=\"article:modified_time\" content=\"2021-01-21T17:14:08+00:00\" \/>\n<meta property=\"og:image\" content=\"https:\/\/staging.kinsta.site\/es\/wp-content\/uploads\/sites\/8\/2018\/11\/kinsta-ES-OG.jpg\" \/>\n\t<meta property=\"og:image:width\" content=\"1920\" \/>\n\t<meta property=\"og:image:height\" content=\"1080\" \/>\n\t<meta property=\"og:image:type\" content=\"image\/jpeg\" \/>\n<meta name=\"author\" content=\"Brian Jackson\" \/>\n<meta name=\"twitter:card\" content=\"summary_large_image\" \/>\n<meta name=\"twitter:description\" content=\"\u00bfQuiere saber qu\u00e9 es Robots.txt de WordPress y c\u00f3mo se aplica a su sitio? \u00a1En esta publicaci\u00f3n encuentra las respuestas! Aprenda todo sobre el robots.txt de WordPress.\" \/>\n<meta name=\"twitter:image\" content=\"https:\/\/staging.kinsta.site\/es\/wp-content\/uploads\/2018\/02\/robots.txt-de-wordpress-1.png\" \/>\n<meta name=\"twitter:creator\" content=\"@brianleejackson\" \/>\n<meta name=\"twitter:site\" content=\"@Kinsta_ES\" \/>\n<meta name=\"twitter:label1\" content=\"Escrito por\" \/>\n\t<meta name=\"twitter:data1\" content=\"Brian Jackson\" \/>\n\t<meta name=\"twitter:label2\" content=\"Tiempo de lectura\" \/>\n\t<meta name=\"twitter:data2\" content=\"15 minutos\" \/>\n<script type=\"application\/ld+json\" class=\"yoast-schema-graph\">{\"@context\":\"https:\/\/schema.org\",\"@graph\":[{\"@type\":\"Article\",\"@id\":\"https:\/\/staging.kinsta.site\/es\/blog\/robots-txt-de-wordpress\/#article\",\"isPartOf\":{\"@id\":\"https:\/\/staging.kinsta.site\/es\/blog\/robots-txt-de-wordpress\/\"},\"author\":{\"name\":\"Brian Jackson\",\"@id\":\"https:\/\/staging.kinsta.site\/es\/#\/schema\/person\/21637e123fca643139de1469fdc39d35\"},\"headline\":\"Gu\u00eda de Robots.txt de WordPress \u2013 \u00bfQu\u00e9 Es y C\u00f3mo Se Utiliza?\",\"datePublished\":\"2018-02-05T14:46:01+00:00\",\"dateModified\":\"2021-01-21T17:14:08+00:00\",\"mainEntityOfPage\":{\"@id\":\"https:\/\/staging.kinsta.site\/es\/blog\/robots-txt-de-wordpress\/\"},\"wordCount\":3076,\"commentCount\":2,\"publisher\":{\"@id\":\"https:\/\/staging.kinsta.site\/es\/#organization\"},\"image\":{\"@id\":\"https:\/\/staging.kinsta.site\/es\/blog\/robots-txt-de-wordpress\/#primaryimage\"},\"thumbnailUrl\":\"https:\/\/staging.kinsta.site\/es\/wp-content\/uploads\/sites\/8\/2018\/02\/robots.txt-de-wordpress-1.png\",\"keywords\":[\"seo\",\"WordPress\"],\"articleSection\":[\"Los mejores tutoriales de WordPress\"],\"inLanguage\":\"es\",\"potentialAction\":[{\"@type\":\"CommentAction\",\"name\":\"Comment\",\"target\":[\"https:\/\/staging.kinsta.site\/es\/blog\/robots-txt-de-wordpress\/#respond\"]}]},{\"@type\":\"WebPage\",\"@id\":\"https:\/\/staging.kinsta.site\/es\/blog\/robots-txt-de-wordpress\/\",\"url\":\"https:\/\/staging.kinsta.site\/es\/blog\/robots-txt-de-wordpress\/\",\"name\":\"Gu\u00eda de Robots.txt de Wordpress \u2013 \u00bfQu\u00e9 Es y C\u00f3mo Se Utiliza?\",\"isPartOf\":{\"@id\":\"https:\/\/staging.kinsta.site\/es\/#website\"},\"primaryImageOfPage\":{\"@id\":\"https:\/\/staging.kinsta.site\/es\/blog\/robots-txt-de-wordpress\/#primaryimage\"},\"image\":{\"@id\":\"https:\/\/staging.kinsta.site\/es\/blog\/robots-txt-de-wordpress\/#primaryimage\"},\"thumbnailUrl\":\"https:\/\/staging.kinsta.site\/es\/wp-content\/uploads\/sites\/8\/2018\/02\/robots.txt-de-wordpress-1.png\",\"datePublished\":\"2018-02-05T14:46:01+00:00\",\"dateModified\":\"2021-01-21T17:14:08+00:00\",\"description\":\"\u00bfQuiere saber qu\u00e9 es Robots.txt de WordPress y c\u00f3mo se aplica a su sitio? \u00a1En esta publicaci\u00f3n encuentra las respuestas! Aprenda todo sobre el robots.txt de WordPress.\",\"breadcrumb\":{\"@id\":\"https:\/\/staging.kinsta.site\/es\/blog\/robots-txt-de-wordpress\/#breadcrumb\"},\"inLanguage\":\"es\",\"potentialAction\":[{\"@type\":\"ReadAction\",\"target\":[\"https:\/\/staging.kinsta.site\/es\/blog\/robots-txt-de-wordpress\/\"]}]},{\"@type\":\"ImageObject\",\"inLanguage\":\"es\",\"@id\":\"https:\/\/staging.kinsta.site\/es\/blog\/robots-txt-de-wordpress\/#primaryimage\",\"url\":\"https:\/\/staging.kinsta.site\/es\/wp-content\/uploads\/sites\/8\/2018\/02\/robots.txt-de-wordpress-1.png\",\"contentUrl\":\"https:\/\/staging.kinsta.site\/es\/wp-content\/uploads\/sites\/8\/2018\/02\/robots.txt-de-wordpress-1.png\",\"width\":1460,\"height\":730,\"caption\":\"robots.txt de wordpress\"},{\"@type\":\"BreadcrumbList\",\"@id\":\"https:\/\/staging.kinsta.site\/es\/blog\/robots-txt-de-wordpress\/#breadcrumb\",\"itemListElement\":[{\"@type\":\"ListItem\",\"position\":1,\"name\":\"Home\",\"item\":\"https:\/\/staging.kinsta.site\/es\/\"},{\"@type\":\"ListItem\",\"position\":2,\"name\":\"Gu\u00eda de Robots.txt de WordPress \u2013 \u00bfQu\u00e9 Es y C\u00f3mo Se Utiliza?\"}]},{\"@type\":\"WebSite\",\"@id\":\"https:\/\/staging.kinsta.site\/es\/#website\",\"url\":\"https:\/\/staging.kinsta.site\/es\/\",\"name\":\"Kinsta\",\"description\":\"Soluciones de alojamiento premium, r\u00e1pidas y seguras\",\"publisher\":{\"@id\":\"https:\/\/staging.kinsta.site\/es\/#organization\"},\"potentialAction\":[{\"@type\":\"SearchAction\",\"target\":{\"@type\":\"EntryPoint\",\"urlTemplate\":\"https:\/\/staging.kinsta.site\/es\/?s={search_term_string}\"},\"query-input\":{\"@type\":\"PropertyValueSpecification\",\"valueRequired\":true,\"valueName\":\"search_term_string\"}}],\"inLanguage\":\"es\"},{\"@type\":\"Organization\",\"@id\":\"https:\/\/staging.kinsta.site\/es\/#organization\",\"name\":\"Kinsta\",\"url\":\"https:\/\/staging.kinsta.site\/es\/\",\"logo\":{\"@type\":\"ImageObject\",\"inLanguage\":\"es\",\"@id\":\"https:\/\/staging.kinsta.site\/es\/#\/schema\/logo\/image\/\",\"url\":\"https:\/\/staging.kinsta.site\/es\/wp-content\/uploads\/sites\/8\/2021\/08\/kinsta.png\",\"contentUrl\":\"https:\/\/staging.kinsta.site\/es\/wp-content\/uploads\/sites\/8\/2021\/08\/kinsta.png\",\"width\":580,\"height\":580,\"caption\":\"Kinsta\"},\"image\":{\"@id\":\"https:\/\/staging.kinsta.site\/es\/#\/schema\/logo\/image\/\"},\"sameAs\":[\"https:\/\/www.facebook.com\/kinsta.es\/\",\"https:\/\/x.com\/Kinsta_ES\"]},{\"@type\":\"Person\",\"@id\":\"https:\/\/staging.kinsta.site\/es\/#\/schema\/person\/21637e123fca643139de1469fdc39d35\",\"name\":\"Brian Jackson\",\"image\":{\"@type\":\"ImageObject\",\"inLanguage\":\"es\",\"@id\":\"https:\/\/staging.kinsta.site\/es\/#\/schema\/person\/image\/\",\"url\":\"https:\/\/secure.gravatar.com\/avatar\/f8755f5f77cf5d0320ed098a38c02c3780a68cb36b7554f3fb120b17622bdc02?s=96&d=mm&r=g\",\"contentUrl\":\"https:\/\/secure.gravatar.com\/avatar\/f8755f5f77cf5d0320ed098a38c02c3780a68cb36b7554f3fb120b17622bdc02?s=96&d=mm&r=g\",\"caption\":\"Brian Jackson\"},\"description\":\"Brian has a huge passion for WordPress, has been using it for over a decade, and even develops a couple of premium plugins. Brian enjoys blogging, movies, and hiking. Connect with Brian on Twitter.\",\"sameAs\":[\"https:\/\/www.facebook.com\/fm.brianleejackson\",\"https:\/\/www.linkedin.com\/in\/brianleejackson\",\"https:\/\/x.com\/brianleejackson\"],\"url\":\"https:\/\/staging.kinsta.site\/es\/blog\/author\/brianjackson\/\"}]}<\/script>\n<!-- \/ Yoast SEO Premium plugin. -->","yoast_head_json":{"title":"Gu\u00eda de Robots.txt de Wordpress \u2013 \u00bfQu\u00e9 Es y C\u00f3mo Se Utiliza?","description":"\u00bfQuiere saber qu\u00e9 es Robots.txt de WordPress y c\u00f3mo se aplica a su sitio? \u00a1En esta publicaci\u00f3n encuentra las respuestas! Aprenda todo sobre el robots.txt de WordPress.","robots":{"index":"index","follow":"follow","max-snippet":"max-snippet:-1","max-image-preview":"max-image-preview:large","max-video-preview":"max-video-preview:-1"},"canonical":"https:\/\/staging.kinsta.site\/es\/blog\/robots-txt-de-wordpress\/","og_locale":"es_ES","og_type":"article","og_title":"Gu\u00eda de Robots.txt de Wordpress \u2013 \u00bfQu\u00e9 Es y C\u00f3mo Se Utiliza?","og_description":"\u00bfQuiere saber qu\u00e9 es Robots.txt de WordPress y c\u00f3mo se aplica a su sitio? \u00a1En esta publicaci\u00f3n encuentra las respuestas! Aprenda todo sobre el robots.txt de WordPress.","og_url":"https:\/\/staging.kinsta.site\/es\/blog\/robots-txt-de-wordpress\/","og_site_name":"Kinsta","article_publisher":"https:\/\/www.facebook.com\/kinsta.es\/","article_author":"https:\/\/www.facebook.com\/fm.brianleejackson","article_published_time":"2018-02-05T14:46:01+00:00","article_modified_time":"2021-01-21T17:14:08+00:00","og_image":[{"width":1920,"height":1080,"url":"https:\/\/staging.kinsta.site\/es\/wp-content\/uploads\/sites\/8\/2018\/11\/kinsta-ES-OG.jpg","type":"image\/jpeg"}],"author":"Brian Jackson","twitter_card":"summary_large_image","twitter_description":"\u00bfQuiere saber qu\u00e9 es Robots.txt de WordPress y c\u00f3mo se aplica a su sitio? \u00a1En esta publicaci\u00f3n encuentra las respuestas! Aprenda todo sobre el robots.txt de WordPress.","twitter_image":"https:\/\/staging.kinsta.site\/es\/wp-content\/uploads\/2018\/02\/robots.txt-de-wordpress-1.png","twitter_creator":"@brianleejackson","twitter_site":"@Kinsta_ES","twitter_misc":{"Escrito por":"Brian Jackson","Tiempo de lectura":"15 minutos"},"schema":{"@context":"https:\/\/schema.org","@graph":[{"@type":"Article","@id":"https:\/\/staging.kinsta.site\/es\/blog\/robots-txt-de-wordpress\/#article","isPartOf":{"@id":"https:\/\/staging.kinsta.site\/es\/blog\/robots-txt-de-wordpress\/"},"author":{"name":"Brian Jackson","@id":"https:\/\/staging.kinsta.site\/es\/#\/schema\/person\/21637e123fca643139de1469fdc39d35"},"headline":"Gu\u00eda de Robots.txt de WordPress \u2013 \u00bfQu\u00e9 Es y C\u00f3mo Se Utiliza?","datePublished":"2018-02-05T14:46:01+00:00","dateModified":"2021-01-21T17:14:08+00:00","mainEntityOfPage":{"@id":"https:\/\/staging.kinsta.site\/es\/blog\/robots-txt-de-wordpress\/"},"wordCount":3076,"commentCount":2,"publisher":{"@id":"https:\/\/staging.kinsta.site\/es\/#organization"},"image":{"@id":"https:\/\/staging.kinsta.site\/es\/blog\/robots-txt-de-wordpress\/#primaryimage"},"thumbnailUrl":"https:\/\/staging.kinsta.site\/es\/wp-content\/uploads\/sites\/8\/2018\/02\/robots.txt-de-wordpress-1.png","keywords":["seo","WordPress"],"articleSection":["Los mejores tutoriales de WordPress"],"inLanguage":"es","potentialAction":[{"@type":"CommentAction","name":"Comment","target":["https:\/\/staging.kinsta.site\/es\/blog\/robots-txt-de-wordpress\/#respond"]}]},{"@type":"WebPage","@id":"https:\/\/staging.kinsta.site\/es\/blog\/robots-txt-de-wordpress\/","url":"https:\/\/staging.kinsta.site\/es\/blog\/robots-txt-de-wordpress\/","name":"Gu\u00eda de Robots.txt de Wordpress \u2013 \u00bfQu\u00e9 Es y C\u00f3mo Se Utiliza?","isPartOf":{"@id":"https:\/\/staging.kinsta.site\/es\/#website"},"primaryImageOfPage":{"@id":"https:\/\/staging.kinsta.site\/es\/blog\/robots-txt-de-wordpress\/#primaryimage"},"image":{"@id":"https:\/\/staging.kinsta.site\/es\/blog\/robots-txt-de-wordpress\/#primaryimage"},"thumbnailUrl":"https:\/\/staging.kinsta.site\/es\/wp-content\/uploads\/sites\/8\/2018\/02\/robots.txt-de-wordpress-1.png","datePublished":"2018-02-05T14:46:01+00:00","dateModified":"2021-01-21T17:14:08+00:00","description":"\u00bfQuiere saber qu\u00e9 es Robots.txt de WordPress y c\u00f3mo se aplica a su sitio? \u00a1En esta publicaci\u00f3n encuentra las respuestas! Aprenda todo sobre el robots.txt de WordPress.","breadcrumb":{"@id":"https:\/\/staging.kinsta.site\/es\/blog\/robots-txt-de-wordpress\/#breadcrumb"},"inLanguage":"es","potentialAction":[{"@type":"ReadAction","target":["https:\/\/staging.kinsta.site\/es\/blog\/robots-txt-de-wordpress\/"]}]},{"@type":"ImageObject","inLanguage":"es","@id":"https:\/\/staging.kinsta.site\/es\/blog\/robots-txt-de-wordpress\/#primaryimage","url":"https:\/\/staging.kinsta.site\/es\/wp-content\/uploads\/sites\/8\/2018\/02\/robots.txt-de-wordpress-1.png","contentUrl":"https:\/\/staging.kinsta.site\/es\/wp-content\/uploads\/sites\/8\/2018\/02\/robots.txt-de-wordpress-1.png","width":1460,"height":730,"caption":"robots.txt de wordpress"},{"@type":"BreadcrumbList","@id":"https:\/\/staging.kinsta.site\/es\/blog\/robots-txt-de-wordpress\/#breadcrumb","itemListElement":[{"@type":"ListItem","position":1,"name":"Home","item":"https:\/\/staging.kinsta.site\/es\/"},{"@type":"ListItem","position":2,"name":"Gu\u00eda de Robots.txt de WordPress \u2013 \u00bfQu\u00e9 Es y C\u00f3mo Se Utiliza?"}]},{"@type":"WebSite","@id":"https:\/\/staging.kinsta.site\/es\/#website","url":"https:\/\/staging.kinsta.site\/es\/","name":"Kinsta","description":"Soluciones de alojamiento premium, r\u00e1pidas y seguras","publisher":{"@id":"https:\/\/staging.kinsta.site\/es\/#organization"},"potentialAction":[{"@type":"SearchAction","target":{"@type":"EntryPoint","urlTemplate":"https:\/\/staging.kinsta.site\/es\/?s={search_term_string}"},"query-input":{"@type":"PropertyValueSpecification","valueRequired":true,"valueName":"search_term_string"}}],"inLanguage":"es"},{"@type":"Organization","@id":"https:\/\/staging.kinsta.site\/es\/#organization","name":"Kinsta","url":"https:\/\/staging.kinsta.site\/es\/","logo":{"@type":"ImageObject","inLanguage":"es","@id":"https:\/\/staging.kinsta.site\/es\/#\/schema\/logo\/image\/","url":"https:\/\/staging.kinsta.site\/es\/wp-content\/uploads\/sites\/8\/2021\/08\/kinsta.png","contentUrl":"https:\/\/staging.kinsta.site\/es\/wp-content\/uploads\/sites\/8\/2021\/08\/kinsta.png","width":580,"height":580,"caption":"Kinsta"},"image":{"@id":"https:\/\/staging.kinsta.site\/es\/#\/schema\/logo\/image\/"},"sameAs":["https:\/\/www.facebook.com\/kinsta.es\/","https:\/\/x.com\/Kinsta_ES"]},{"@type":"Person","@id":"https:\/\/staging.kinsta.site\/es\/#\/schema\/person\/21637e123fca643139de1469fdc39d35","name":"Brian Jackson","image":{"@type":"ImageObject","inLanguage":"es","@id":"https:\/\/staging.kinsta.site\/es\/#\/schema\/person\/image\/","url":"https:\/\/secure.gravatar.com\/avatar\/f8755f5f77cf5d0320ed098a38c02c3780a68cb36b7554f3fb120b17622bdc02?s=96&d=mm&r=g","contentUrl":"https:\/\/secure.gravatar.com\/avatar\/f8755f5f77cf5d0320ed098a38c02c3780a68cb36b7554f3fb120b17622bdc02?s=96&d=mm&r=g","caption":"Brian Jackson"},"description":"Brian has a huge passion for WordPress, has been using it for over a decade, and even develops a couple of premium plugins. Brian enjoys blogging, movies, and hiking. Connect with Brian on Twitter.","sameAs":["https:\/\/www.facebook.com\/fm.brianleejackson","https:\/\/www.linkedin.com\/in\/brianleejackson","https:\/\/x.com\/brianleejackson"],"url":"https:\/\/staging.kinsta.site\/es\/blog\/author\/brianjackson\/"}]}},"acf":[],"_links":{"self":[{"href":"https:\/\/staging.kinsta.site\/es\/wp-json\/wp\/v2\/posts\/15552","targetHints":{"allow":["GET"]}}],"collection":[{"href":"https:\/\/staging.kinsta.site\/es\/wp-json\/wp\/v2\/posts"}],"about":[{"href":"https:\/\/staging.kinsta.site\/es\/wp-json\/wp\/v2\/types\/post"}],"author":[{"embeddable":true,"href":"https:\/\/staging.kinsta.site\/es\/wp-json\/wp\/v2\/users\/38"}],"replies":[{"embeddable":true,"href":"https:\/\/staging.kinsta.site\/es\/wp-json\/wp\/v2\/comments?post=15552"}],"version-history":[{"count":11,"href":"https:\/\/staging.kinsta.site\/es\/wp-json\/wp\/v2\/posts\/15552\/revisions"}],"predecessor-version":[{"id":39276,"href":"https:\/\/staging.kinsta.site\/es\/wp-json\/wp\/v2\/posts\/15552\/revisions\/39276"}],"alternate":[{"embeddable":true,"hreflang":"en","title":"English","href":"https:\/\/staging.kinsta.site\/es\/wp-json\/kinsta\/v1\/posts\/15552\/translations\/en"},{"embeddable":true,"hreflang":"es","title":"Spanish","href":"https:\/\/staging.kinsta.site\/es\/wp-json\/kinsta\/v1\/posts\/15552\/translations\/es"},{"embeddable":true,"hreflang":"pt","title":"Portuguese","href":"https:\/\/staging.kinsta.site\/es\/wp-json\/kinsta\/v1\/posts\/15552\/translations\/pt"},{"embeddable":true,"hreflang":"fr","title":"French","href":"https:\/\/staging.kinsta.site\/es\/wp-json\/kinsta\/v1\/posts\/15552\/translations\/fr"},{"embeddable":true,"hreflang":"de","title":"German","href":"https:\/\/staging.kinsta.site\/es\/wp-json\/kinsta\/v1\/posts\/15552\/translations\/de"},{"embeddable":true,"hreflang":"nl","title":"Dutch","href":"https:\/\/staging.kinsta.site\/es\/wp-json\/kinsta\/v1\/posts\/15552\/translations\/nl"},{"href":"https:\/\/staging.kinsta.site\/es\/wp-json\/kinsta\/v1\/posts\/15552\/tree"}],"wp:featuredmedia":[{"embeddable":true,"href":"https:\/\/staging.kinsta.site\/es\/wp-json\/wp\/v2\/media\/15551"}],"wp:attachment":[{"href":"https:\/\/staging.kinsta.site\/es\/wp-json\/wp\/v2\/media?parent=15552"}],"wp:term":[{"taxonomy":"post_tag","embeddable":true,"href":"https:\/\/staging.kinsta.site\/es\/wp-json\/wp\/v2\/tags?post=15552"},{"taxonomy":"topic","embeddable":true,"href":"https:\/\/staging.kinsta.site\/es\/wp-json\/wp\/v2\/topic?post=15552"}],"curies":[{"name":"wp","href":"https:\/\/api.w.org\/{rel}","templated":true}]}}