RubyGems Navigation menu

robotstxt 0.5.4

Robotstxt Parser allows you to the check the accessibility of URLs and get other data. Full support for the robots.txt RFC, wildcards and Sitemap: rules.

Gemfile:
=

安装:
=

版本列表:

  1. 0.5.4 February 13, 2010 (7.5 KB)
  2. 0.5.3 February 13, 2010 (7.5 KB)
  3. 0.5.2 December 19, 2009 (7.5 KB)
  4. 0.5.1 December 06, 2009 (5.0 KB)
  5. 0.5.0 December 06, 2009 (5.0 KB)

Development 依赖 (2):

echoe ~> 3.1
rake ~> 0.8
显示所有传递性依赖

所有者:

作者:

  • Simone Rinzivillo

SHA 256 校验和:

=
← 以前的版本

下载总量 30,738

这个版本 16,828

版本发布:

许可:

无

需要的 Ruby 版本: 无

需要的 RubyGems 版本: >= 1.2

链接:

主页 源代码 下载 审查变更 徽章 订阅 RSS 举报投诉 反向依赖