Archivo robots.txt ¿Qué es y para que sirve?
Archivo robots.txt. Descubre todo lo que puede hacer por ti El robots.txt es imprescindible para los que trabajamos en este mundo. ¿Y por qué estaréis pensando? Como muchos sabréis, Google y el resto de buscadores utilizan robots para leer, franquear…