¿Cuál es la diferencia entre “noindex” y el “robot.txt” para los usuarios? ¿Ambos resultados son omitidos también en la página web o solo...

Para ser mas específicos. Con el robot.txt le indicas a que URL no puede ingresar. Ejemplo si bloqueas la carpeta /ejemplo y esta tiene 10 paginas dentro. Estas 10 paginas no serán indexadas por Google.

En cambio si tu en la pagina ejemplo1/articulo le especificas en la etiqueta meta robot como no índex solo esta pagina no será indexada.

Pero hay q tener claro que las Meta Robot Google las tomas como una recomendación mas no un factor que va a seguir al pie de la letra. Por ellos es recomendable tener configurado bien el Robot.txt. O usar ambas opciones.

el noindex se coloca en una metaetiqueta en una pagina especifica. el archivo robots viene siendo el archivo general y aqui en un solo archivo decides que se indexa y que no.

Con esto le dices a los buscadores que mostrar y que no mostrar en los buscadores