ROBOTStxt 1.0

ROBOTStxt是一个应用程序来无论是从WWW上的远程位置,或从本地磁盘打开现有的robots.txt文件。那么你就可以开始添加条目。要删除条目,只需右键单击它,然后单击删除。 。robots.txt文件应该驻留在你的网站的根目录和机器人应该被命名为robots.txt来找到它 要求:...