Ubicación del archivo robots.txt de WordPress
@SeryozhaK Usted o su desarrollador puede escribir un código personalizado para recuperar todas las páginas de la etiqueta, contar el número de puestos para la etiqueta y el uso de las dos piezas crear una lista de páginas de la etiqueta con 1 puesto. Una vez que tengas esa lista puedes usar el código anterior para escribir una etiqueta noindex.
¿Puedes confirmar que poner $robots en false sigue siendo la forma correcta de filtrar los robots? Veo que al hacerlo no se produce ninguna etiqueta. Actualizar mi filtro para establecer robots a una cadena ‘noindex, nofollow’ parece funcionar.
Este no es el lugar adecuado para solicitar ayuda. Por favor, consulte nuestra extensa sección de ayuda o visite el foro de soporte gratuito. Si necesita más ayuda, la actualización a nuestra versión premium le proporciona acceso a nuestro equipo de soporte.
LE: De hecho, el espacio final parece romper una funcionalidad importante en el plugin Yoast SEO – en el primer caso, cuando devuelve ‘noindex,follow’, la etiqueta de enlace canónico no se elimina automáticamente de la página. Cuando se devuelve ‘noindex, follow’ la etiqueta canónica se elimina correctamente.
Falta el editor de archivos Yoast
Si estás en un nicho altamente competitivo con un sitio grande, probablemente. Sin embargo, si estás empezando tu primer blog, la construcción de enlaces a tu contenido y la creación de muchos artículos de alta calidad son prioridades mayores.
El archivo Robots.txt suele estar en la carpeta raíz del sitio. Tendrás que conectarte a tu sitio usando un cliente FTP o usando el administrador de archivos de tu cPanel para verlo. Es un archivo de texto ordinario que puede abrir con el Bloc de notas.
Si no tiene un archivo robots.txt en el directorio raíz de su sitio, puede crear uno. Todo lo que tiene que hacer es crear un nuevo archivo de texto en su ordenador y guardarlo como robots.txt. A continuación, cárguelo en la carpeta raíz de su sitio.
Ten en cuenta que si utilizas un plugin como Yoast o All in One SEO, puede que no necesites añadir la sección del mapa del sitio, ya que intentan hacerlo automáticamente. Si falla, puedes añadirlo manualmente como en el ejemplo anterior.
Sin embargo, le recomiendo que no permita el archivo readme.html en su archivo robots.txt. Este archivo readme puede ser utilizado por alguien que intente averiguar qué versión de WordPress está utilizando. Si se trata de una persona, puede acceder fácilmente al archivo simplemente navegando hasta él. Además, poner una etiqueta disallow puede bloquear ataques maliciosos.
Retraso en el arrastre: 10
La parte «User-agent» del archivo dicta qué tipo de robot debe escuchar la información que sigue. En este caso, el uso de un asterisco indica que la información es relevante para cualquier tipo de robot que visite el sitio web.
La parte «Permitir» del archivo le dice al robot a dónde puede ir. A menudo se ignora la parte «allow» de un archivo robots.txt y, en su lugar, se utilizan simplemente reglas «disallow» para filtrar los sitios que puede visitar un robot. En este caso, la línea «allow» de nuestro robots.txt permite que todas las páginas sean visibles para todos los tipos de robots.
Sin embargo, la parte «Disallow» del archivo muestra los archivos a los que no se puede acceder. En este caso, la línea «/admin» indica que esta URL no debe ser accesible – presumiblemente, un área de administración que no sería accesible al público de todos modos.
Tenga en cuenta que utilizar la regla «Disallow» en un archivo robots.txt no es un método seguro para ocultar una página a los usuarios finales. Un archivo robots.txt puede ser visto por cualquiera, y las páginas, incluso si están «desautorizadas», siguen siendo accesibles para un usuario normal. Oculte adecuadamente las páginas detrás de las áreas de acceso, por ejemplo, si su contenido está destinado a ser privado.
Relacionados
