robotstxt 0.5.4

Robotstxt Parser allows you to the check the accessibility of URLs and get other data. Full support for the robots.txt RFC, wildcards and Sitemap: rules.

Gemfile:
=

instalar:
=

Versiones:

0.5.4 February 13, 2010 (7,5 KB)
0.5.3 February 13, 2010 (7,5 KB)
0.5.2 December 19, 2009 (7,5 KB)
0.5.1 December 06, 2009 (5 KB)
0.5.0 December 06, 2009 (5 KB)

dependencias de Development (2):

echoe ~> 3.1

rake ~> 0.8

Mostrar toda la cadena de dependencias

Propietarios:

Autores:

Simone Rinzivillo

SHA 256 checksum:

=

Total de descargas 30.564

Para esta versión 16.762

Versión publicada:
February 13, 2010 8:43pm

Licencias:
N/A

Versión de Ruby requerida: Ninguno

Versión de Rubygems requerida: >= 1.2

Enlace:

Página Código fuente Descarga Revisar cambios Badge RSS Reportar abusos Dependencias inversas