Que es la Herramienta generadora de Robots.txt?
Es un archivo de texto que se aloja en la raíz del servidor, y este sirve para tener el control sobre las paginas del sitio web que pueden ser indexadas por los motores de búsquedas y cuáles no deben ser indexadas ni visitadas por lo mismos.