alla flaggor
wheezy  ] [  jessie  ] [  stretch  ] [  buster  ] [  sid  ]
[ Källkod: libwww-robotrules-perl  ]

Paket: libwww-robotrules-perl (6.01-1)

Länkar för libwww-robotrules-perl



Hämta källkodspaketet libwww-robotrules-perl:


Externa resurser:

Liknande paket:

database of robots.txt-derived permissions

WWW::RobotRules parses /robots.txt files as specified in "A Standard for Robot Exclusion", at <>. Webmasters can use the /robots.txt file to forbid conforming robots from accessing parts of their web site.

The parsed files are kept in a WWW::RobotRules object, and this object provides methods to check if access to a given URL is prohibited. The same WWW::RobotRules object can be used for one or more parsed /robots.txt files on any number of hosts.

Märken: Software Development: Perl Development, Bibliotek, Implemented in: Perl

Andra paket besläktade med libwww-robotrules-perl

  • beror
  • rekommenderar
  • föreslår
  • enhances

Hämta libwww-robotrules-perl

Hämtningar för alla tillgängliga arkitekturer
Arkitektur Paketstorlek Installerad storlek Filer
all 14,0 kbyte80,0 kbyte [filförteckning]