PHPCrawl 0.83

可以以书面的搜索爬虫(蜘蛛),地雷网页的各种信息进行使用。PHPCrawl收购它被配置来获取信息,并通过它进行进一步处理,以更强大的应用 特点: 在过滤器URL和内容类型的数据定义的方式来处理cookie 定义的方式来处理的robots.txt文件在限制它的活动以各种方式在多处理模式 什么在此版本中是新的: 在修正错误:现在,正确编码在链接被部分进行了urlencoded和部分没有得到重建/。从PHPCrawlerRobotsTxtParser.class.php...