Otro de los inconvenientes que previenen a las arañas de Google indexar contenido de un sitio web es el contenido oculto tras código Java no rastreable.
Se refiere a contenido que se crea dinámicamente con objetos Javascript en función de eventos de navegación del usuario, que no pueden ser creados por ningún robot de ningún buscador.
Una forma de contrarrestar esto es insertando el tag “noscript” en el código para crear una página Html valedera con contenido estático el cual será válido para calcular relevancia del sitio web.
Un problema más que tienen los robots son las urls de un sitio web a donde solamente se llega por medio de código Javascript.
¿Dónde puede encontrarse esto? Por ejemplo en menúes de navegación. ¿La solución al problema?: ofrecer una ruta alternativa de acceso a las páginas ocultas mediante un sitemap.
No olvidar incluir una referencia a dicho mapa en el archivo robotx.txt en caso de que éste sea inaccesible para los spiders.