Para decirle a los robots que revisan la página (los de los buscadores, por ejemplo) que deben hacer. pocos robots lo soportan en este momento (google si)
<meta name="robots" content="index, follow">
index quiere decir que la página debe ser indexada. (si no se desea que se agregue a los índices, poner "noindex") follow, que el robot debe seguir todos los links en la página. (si no se desea, poner "nofollow") "all" significa lo mismo que "index, follow" y "none" lo mismo que "noindex,nofollow"