web crawler - robots - Cómo configurar un robot.txt que solo permite la página predeterminada de un

files - ruby string include - edu.lat

string - read - En Perl, ¿cómo puedo leer un archivo completo en una cadena?