PHPCrawl 0.83 可以以书面的搜索爬虫（蜘蛛），地雷网页的各种信息进行使用。PHPCrawl收购它被配置来获取信息，并通过它进行进一步处理，以更强大的应用 特点： 在过滤器URL和内容类型的数据定义的方式来处理cookie 定义的方式来处理的robots.txt文件在限制它的活动以各种方式在多处理模式 什么在此版本中是新的： 在修正错误：现在，正确编码在链接被部分进行了urlencoded和部分没有得到重建/。从PHPCrawlerRobotsTxtParser.class.php... 1 Mar 15 在 开发工具脚本, 搜索引擎和链接索引脚本 Web 阅读更多
