Archives for posts tagged ‘bender’

Alguien puso un robot en su robot.txt

El estándar de exclusión de robots… de búsqueda en la web –e.g., el Googlebot– exige la creación de un archivo robots.txt. Donde además de establecer las reglas de penetración del sitio, algunos añaden un robot ASCII para dar una calurosa bienvenida. Vía Reddit Tweet