En casi todas las páginas web existen ocultas unas etiquetas de código (“meta tags”) que proporcionan información relevante para indexadores de contenidos. Una de esas etiquetas es “ROBOTS”. Las etiquetas “ROBOTS” indican a Google, Yahoo, Bing y cualquier otro buscador si el dueño de la página web quiere que su página se liste en uno [...]