WordPress genera autom\u00e1ticamente un archivo robots.txt virtual si nunca creas uno f\u00edsico, y la mayor\u00eda de los propietarios de sitios web desconocen su contenido. Este archivo predeterminado suele ser suficiente para un blog peque\u00f1o, pero quienes utilizan WooCommerce, plugins de membres\u00eda o una gran biblioteca de contenido necesitan un mayor control que el que ofrece por defecto.<\/p>\n
WordPress genera un archivo robots.txt virtual en yoursite.com\/robots.txt incluso sin un archivo f\u00edsico en el directorio ra\u00edz. Esta versi\u00f3n predeterminada suele bloquear \/wp-admin\/ pero permite el acceso a admin-ajax.php, y desaparece en el momento en que subes un archivo robots.txt real para reemplazarla.<\/p>\n
Puedes comprobar esta configuraci\u00f3n predeterminada accediendo directamente al archivo robots.txt de tu sitio web en un navegador. Si nunca lo has modificado, lo que ves es la versi\u00f3n integrada del n\u00facleo de WordPress, no algo configurado por un plugin o un desarrollador.<\/p>\n
La mayor\u00eda de los plugins SEO m\u00e1s importantes para WordPress, como Yoast SEO y Rank Math, incluyen un editor de robots.txt integrado en sus herramientas. Este es el m\u00e9todo m\u00e1s sencillo para usuarios sin conocimientos t\u00e9cnicos, ya que no requiere subir archivos ni acceso FTP y guarda los cambios directamente desde el panel de control de WordPress.<\/em><\/p>\n El complemento escribe un archivo robots.txt f\u00edsico en el servidor la primera vez que guardas los cambios a trav\u00e9s de su editor, reemplazando permanentemente el archivo virtual predeterminado.<\/p>\n Con\u00e9ctate a tu servidor con un cliente FTP, navega hasta la carpeta ra\u00edz donde se encuentra wp-config.php y edita el archivo robots.txt existente o crea un nuevo archivo de texto plano con ese mismo nombre. Este m\u00e9todo funciona independientemente de los plugins instalados y te da control total sobre el contenido.<\/p>\n Por experiencia, esta es la ruta que sigo siempre que el editor de plugins SEO de un cliente presenta fallos o cuando necesito distribuir un archivo id\u00e9ntico a varias instalaciones de WordPress a la vez durante una limpieza general de la agencia. La carga directa del archivo elimina cualquier problema espec\u00edfico del plugin.<\/p>\n Adem\u00e1s del bloqueo predeterminado \/wp-admin\/, los sitios de WordPress suelen beneficiarse al impedir las URL de resultados de b\u00fasqueda internos, los enlaces de respuesta a comentarios con par\u00e1metros de seguimiento y las variantes de feeds exclusivas para administradores. Ninguna de estas rutas aporta valor a la b\u00fasqueda, y bloquearlas ayuda a los rastreadores a dedicar m\u00e1s tiempo al contenido real.<\/p>\n Evite bloquear la carpeta \/wp-content\/ por completo, ya que esa ruta contiene los archivos de recursos del tema y del plugin que Google necesita para renderizar las p\u00e1ginas correctamente.<\/p>\n Las tiendas WooCommerce suelen beneficiarse al bloquear las rutas de carrito, pago y mi cuenta en robots.txt, ya que estas p\u00e1ginas son espec\u00edficas del usuario y no aportan valor SEO. Los plugins de membres\u00eda y de pago a menudo generan URL similares vinculadas a la cuenta que conviene excluir de la misma manera.<\/p>\n El 91% de las p\u00e1ginas no reciben tr\u00e1fico org\u00e1nico de Google, seg\u00fan Ahrefs<\/a>, a menudo porque las p\u00e1ginas que compiten por ese tr\u00e1fico son escasas, duplicadas o simplemente no son el tipo de contenido que la gente busca, que es precisamente la categor\u00eda en la que se incluyen las p\u00e1ginas del carrito de compra y de la cuenta.<\/p>\n Si administras una tienda WooCommerce y quieres comprobar el rendimiento de tus p\u00e1ginas de productos en cuanto a se\u00f1ales de autoridad a gran escala, Nuestro comprobador DA PA a granel<\/a> Administra hasta 50 dominios o rutas en una sola pasada.<\/p>\n Despu\u00e9s de guardar cualquier cambio en robots.txt en WordPress, pruebe el archivo en vivo visitando yoursite.com\/robots.txt directamente en un navegador y luego ejecute algunas p\u00e1ginas clave a trav\u00e9s de la herramienta de inspecci\u00f3n de URL de Google Search Console para confirmar que no est\u00e9n bloqueadas inesperadamente.<\/p>\n Por experiencia, los sitios de WordPress que m\u00e1s sufren las consecuencias son aquellos que utilizan migraciones automatizadas o herramientas de sincronizaci\u00f3n entre el entorno de prueba y el de producci\u00f3n, donde un archivo robots.txt editado para un entorno de desarrollo se traslada silenciosamente al entorno de producci\u00f3n sin que nadie lo revise en la lista de verificaci\u00f3n de implementaci\u00f3n.<\/p>\n Los backlinks siguen siendo uno de los tres principales factores de clasificaci\u00f3n de Google, y un despliegue defectuoso del archivo robots.txt en un sitio de WordPress puede echar por tierra meses de trabajo de backlinks con un solo error al guardar. La autoridad de dominio, la puntuaci\u00f3n de Moz de 1 a 100, se basa en gran medida en esas mismas se\u00f1ales de enlaces entrantes.<\/a>Es una de las m\u00e9tricas m\u00e1s f\u00e1ciles de observar para detectar se\u00f1ales de alerta temprana de un problema de rastreo. Siempre verifique antes de continuar.<\/p>\n No, ambos complementos incluyen un editor de robots.txt integrado, por lo que no es necesario un complemento dedicado aparte.<\/p>\n S\u00ed, al eliminar el archivo f\u00edsico se restaura autom\u00e1ticamente la versi\u00f3n virtual predeterminada del n\u00facleo de WordPress.<\/p>\n En general no, ya que el n\u00facleo moderno de WordPress ya no necesita que esto est\u00e9 bloqueado, y algunos recursos dentro de \u00e9l pueden ser necesarios para la renderizaci\u00f3n.<\/p>\n S\u00ed, y deber\u00edas hacerlo, ya que los sitios de prueba suelen funcionar mejor si se bloquean completamente con `Disallow: \/` hasta el lanzamiento, y luego se cambian al conjunto de reglas de producci\u00f3n.<\/p>\n Visita yoursite.com\/robots.txt directamente en cualquier navegador. Si aparecen tus reglas personalizadas en lugar de las predeterminadas de WordPress, el archivo est\u00e1 activo.<\/p>\n Nuestro generador de archivos Robots.txt<\/a> crea un archivo listo para WordPress a partir de selecciones simples, sin necesidad de FTP ni configuraci\u00f3n de complementos. Para el seguimiento continuo de la autoridad en los sitios de los clientes, nuestra herramienta DA PA gratuita<\/a> cubre hasta 50 dominios a la vez y nuestro consultor experto en SEO<\/a> Si desea una segunda opini\u00f3n, nuestro servicio puede auditar toda su configuraci\u00f3n t\u00e9cnica.\n
Edici\u00f3n manual del archivo Robots.txt mediante FTP<\/h2>\n
Rutas espec\u00edficas de WordPress que vale la pena bloquear<\/h2>\n
User-agent: *\r\nDisallow: \/wp-admin\/\r\nDisallow: \/?s=\r\nDisallow: \/search\/\r\nAllow: \/wp-admin\/admin-ajax.php\r\nSitemap: https:\/\/example.com\/sitemap_index.xml<\/pre>\n
Consideraciones sobre WooCommerce y los plugins de membres\u00eda<\/h2>\n
Prueba tus cambios sin da\u00f1ar el sitio.<\/h2>\n
Preguntas frecuentes<\/h2>\n
\u00bfNecesito un plugin para robots.txt si ya uso Yoast o Rank Math?<\/h3>\n
\u00bfEliminar mi archivo robots.txt personalizado restaurar\u00e1 la configuraci\u00f3n predeterminada de WordPress?<\/h3>\n
\u00bfDebo bloquear \/wp-includes\/ en el archivo robots.txt de WordPress?<\/h3>\n
\u00bfPuedo tener reglas diferentes para el archivo robots.txt en un sitio de WordPress de prueba?<\/h3>\n
\u00bfC\u00f3mo puedo comprobar si mi archivo robots.txt de WordPress est\u00e1 realmente activo?<\/h3>\n
Crea un archivo Robots.txt m\u00e1s seguro para tu sitio WordPress.<\/h2>\n
\n