¿Tú página web no aparece en las búsquedas de Google?
Como bloquear la indexación de tu pagina web en Google
Por:
a19:00
miércoles octubre 29, 2014
A pesar de tus esfuerzos, ¿tú página web no aparece en las búsquedas de Google? Los factores que bloquean el posicionamiento de una página web en Google pueden ser muchos, pero vamos a analizar cuáles son los principales.
En primer lugar, podría pasar que se está bloqueando el rastreo de Google de tu página web sin saberlo. Esto significa que el sitio es realizado correctamente, pero que existen bloques de programación que impiden que Google indexe todas las páginas de tu web.
En este artículo aprenderás a cómo poder bloquear la opción de que Google indexe tu página web y a cómo evitar que esto suceda accidentalmente.
1. Error en el archivo robots.txt
Un archivo robot.txt es un archivo de texto que proporciona información sobre los motores de búsqueda de alguna (o de todas) las páginas de tu web. Este archivo es esencialmente una lista de comandos, cómo permitir y no permitir, que comunican el rastreador con la URL que puede o no puede recuperarse.
Por lo tanto, si una URL está configurada como no permitida en el archivo robots.txt, la URL y los contenidos, no aparecen en los resultados de búsqueda de Google.
La directiva rechazar en el archivo robots.txt es una forma sencilla para excluir archivos individuales o carpetas enteras de tu página web indexada por Google. Para excluir archivos individuales, sólo tienes que añadir las siguientes líneas en el archivo robots.txt:
Para excluir un directorio completo, sólo tienes que utilizar:
*Nota: si tu página web tiene un archivo robots.txt se recomienda que lo compruebes de nuevo para asegurarte de que no están excluidos los directorios que quieres ver en los resultados de búsqueda de Google.
Si quieres comprobar si hay un archivo robots.txt en la página web sólo tienes que escribir la URL de tu web y /robots.txt, por ejemplo: www.mipáginaweb.com/robots.txt. Si este archivo está presente mostrará una variedad de información sobre el mismo, de lo contrario se mostrará el mensaje: ''página URL no encontrada''.
Tienes que tener en cuenta que los que visitan la página web todavía pueden ver la página excluida por Google a través del archivo robots.txt.
2. Utilizo Meta tags que el robot no indexa
El tag no index meta robots permite indicar a los motores de búsqueda que una página en particular no debe de ser indexada. Para excluir una página web a partir de los resultados de búsqueda tienes que agregar el siguiente código en la sección <head> de la página web:
En este caso, los motores de búsqueda no indexan la página web y siguen los enlaces que figuran. Si quieres decirle a los motores de búsqueda que sigan los enlaces de la página web, vas a tener que utilizar este tag:
La página web no aparecerá en la página de resultados de Google, pero el motor de búsqueda seguirá los enlaces proporcionados y se procederá a indexar sus páginas (al menos que escribas el tag para no indexar). Si se quiere que Google indexe todas las páginas será suficiente con eliminar los meta tags.
El tag de los robots no indexados afecta solo a los robots de los motores de búsqueda. Los visitantes habituales de tu página web todavía podrán ver la página.
3. Tu servidor web devuelve un código de estado HTTP erróneo
Un servidor web, cuando se le pregunta, devuelve un código de estado, que proporciona al usuario información sobre el estado del recurso solicitado. Así que si tú escribes una dirección URL en un navegador, se consulta al servidor que devuelve un código de estado. Si la página (o más bien el recurso) existe, el servidor web solicita un código de estado ''200 OK'', código en relación con el funcionamiento de la página. Por ejemplo, puedes utilizar, conscientemente, este tipo de código para el estado del servidor:
301 moved permanently: todas las solicitudes futuras deben rastrearse en una nueva URL.
403 forbidden: el servidor se niega a responder a la solicitud.
A los efectos de la optimización adecuada para los motores de búsqueda, un tipo de redirección 301, sólo se debe utilizar en el caso que quieras que tus visitantes se redirijan automáticamente a la nueva página de tu página web.
Por lo tanto, un código de estado no correcto, puede indicar al motor de búsqueda que la página no es correcta (por ejemplo, en el caso de las páginas web que se cambian o mueven). Por lo tanto, debes revisar los errores de escaneo de tu página web para comprobar si hay errores en los códigos de estado.
4. Página protegida con contraseña
Si proteges la página web con una contraseña, sólo los visitantes que conocen la contraseña podrán ver el contenido. Esto sucede, por ejemplo, si algunos contenidos de la página web se encuentran en una zona restringida, con acceso a partir de nombre de usuario y contraseña. Cada recurso está protegido por la autenticación, por lo tanto no sería visible a los motores de búsqueda. En este caso, los robots de los motores de búsqueda no serán capaces de acceder a las páginas y el contenido no será indexado por Google.
5. Páginas que requieren Cookies o Java Script
Cookies y el código Java Script puede impedir que los robots de motores de búsqueda rastreen o indexen la página web correctamente. Por ejemplo, puedes ocultar el contenido haciéndolo accesible solo a la gente que acepte las cookies.
También puedes usar archivos Java Script para generar contenido complejo o para navegar por las páginas. La mayoría de los robots de motores de búsqueda no están ejecutando códigos de Java Script complejos y por lo tanto no van a ser capaz de leer las páginas.
Conclusión
¿Tú página web no está posicionada correctamente en Google o tienes dificultades para tener una buena visibilidad en los motores de búsqueda? Se recomienda, en primer lugar, verificar las 5 cuestiones mencionadas anteriormente.
La utilización de Google Webmaster Tool es muy recomendable, ya que es una herramienta que te permite comprobar los 5 puntos nombrados.
Si la página web continua siendo no visible en Google, te proponemos que te pongas en contacto con nosotros para recibir asesoramiento, estaremos encantados de ayudarte a sacar el máximo rendimiento a tu página web.