Desarrollando Arañas WEB

Hace proximadamente 7 mese , me propuse desarrollar un programa que indexara sitios de internet, comence con elementos de bajadas de paginas mediante aplicaciones a nivel de clientes.

Luego sigue analizando documentacion y encontre diferente lenguajes que ayudaron, PERL, RUBY etc...

Seleccione a Ruby , mi pequeña araña ha podido gestarse , utilizando a Linux + bibliotecas de Ruby