Posicionamiento web en Coyoacán
Restingir a los rastreadores (bots) donde
no sea necesario con el robots.txt
Posicionamiento web en Coyoacán el archivo “robots.txt” les dice a los motores de búsqueda a qué
partes de tu sitio pueden acceder y consecuentemente
rastrear. Este archivo se debe llamar “robots.txt”, y tiene que
estar en el directorio raíz de tu sitio SEO.
Puede que haya algunas páginas de tu sitio que no quieras que
sean rastreadas si no van a ser útiles para los usuarios cuando las
encuentren en los resultados de búsqueda. Si quieres evitar que
los motores de búsqueda rastreen tus páginas, las Herramientas
para webmasters de Google tienen un sencillo generador de robots.
txt para ayudarte a crear el archivo. Hay que tener en cuenta que
si tu sitio usa subdominios y quieres que algunas páginas no sean
rastreadas para ese subdominio, tendrás que crear un archivo SEO Df
robots.txt específico de ese subdominio. Para más información
sobre robots.txt, te recomendamos esta guía del Centro de
asistencia: cómo usar los archivos robots.txt.
Hay unas cuantas maneras más de impedir que tu contenido
aparezca en los resultados de búsqueda, como por ejemplo añadir
la metaetiqueta “NOINDEX”, usar .htaccess para proteger
directorios con contraseña o usar las Herramientas para SEO Guadalajara
Usa métodos más seguros para el contenido
delicado
No deberías quedarte tranquilo bloqueando solo con robots.txt material delicado o confidencial. Una
de las razones es porque los motores de búsqueda aún podrían hacer referencia a esas URL que posicionamiento web
están bloqueadas (mostrando solamente la URL, sin título ni descripción) si hay enlaces a esas URL
en alguna parte de Internet (registro de remitentes – referrer logs-). Además, los motores de
búsqueda que no siguen las normas de Robots Exclusion Standard podrían desobedecer las
instrucciones de tu robots.txt. Por último, un usuario curioso podría estudiar los directorios y
subdominios en tu robots.txt y adivinar la URL del contenido que no quieres que sea visto. Hay
alternativas más seguras como encriptar el contenido o protegerlo con una contraseña en .htaccess. SEO Zapopan