rdaneel 0.0.0
Add robots.txt support on top of em-http-request
Gemfile:
=
Copy to clipboard
Copied!
Installeer:
=
Runtime afhankelijkheden (2):
em-http-request
>= 0.2.10
robot_rules
>= 0.9.1
Development afhankelijkheden (1):
rspec
>= 1.2.9