Page 286 - HTTP权威指南

• http://www.searchengineworld.com
搜索引擎世界——搜索引擎和机器人的相关资源。

• http://www.searchtools.com
Web 站点和内部网络的搜索工具——搜索工具和机器人的相关资源。

• http://search.cpan.org/doc/ILYAZ/perl_ste/WWW/RobotRules.pm
RobotRules 的 Perl 语言资源。

• http://www.conman.org/people/spc/robots2.html
拒绝机器人访问的扩展标准。

• Managing Gigabytes: Compressing and Indexing Documents and Images（《海量数
据管理——文档和图像的压缩与索引》）
Witten, I.、Moffat, A. 和 Bell, T. 编写，Morgan Kaufmann 公司出版。 246

Web机器人 ｜ 259