NAME
Gungho::Component::RobotRules::Rule - robots.txtルール
SYNOPSIS
use Gungho::Component::RobotRules::Rule;
my $rule = Gungho::Component::RobotRules::Rule->new(
'UserAgent A' => [ '/foo', '/bar' ],
'UserAgent B' => [ '/baz', '/quux' ],
);
DESCRIPTION
特定のホストのrobots.txtルールを保存します。
METHODS
new
新規にルールオブジェクトを作成します。
setup
オブジェクトを初期化します。
allowed($c, $uri)
$url
で指定されたURLが取得を許可されていれば正を返します。
is_me($c,$string)
$string
が$c
のuser_agent
にマッチすれば正を返します。