snoopy——PHP版的网络客户端

MagpieRss乱码问题

使用snoopy提交数据实现登陆

大 | 中 | 小

[2007/01/05 16:06 | 分类: PHP高级技术 » PHP面对对象 | by feifengxlq ]

magpierss中就用到了snoopy，这让我有点兴趣去研究下这个咚咚。再SF上，找到了这个源代码。居然就是一个类，但不要笑看哦，功能可是很强大的。

官方的简介，我翻译了下（汗。。。最近老是充当翻译的角色）

snoopy是一个php类，用来模仿web浏览器的功能，它能完成获取网页内容和发送表单的任务。
下面是它的一些特征：
1、方便抓取网页的内容
2、方便抓取网页的文字（去掉HTML代码）
3、方便抓取网页的链接
4、支持代理主机
5、支持基本的用户/密码认证模式
6、支持自定义用户agent,referer,cookies和header内容
7、支持浏览器转向，并能控制转向深度
8、能把网页中的链接扩展成高质量的url（默认）
9、方便提交数据并且获取返回值
10、支持跟踪HTML框架（v0.92增加）
11、支持再转向的时候传递cookies

下面是简单的例子，比如说我们抓取我的blog的文字




<?

include "Snoopy.class.php";

$snoopy = new Snoopy;

$snoopy->fetchtext("http://www.phpobject.net/blog");

echo $snoopy->results;

?>

^_^，不错把，在比如抓取链接




<?

include "Snoopy.class.php";

$snoopy = new Snoopy;

$snoopy->fetchlinks("http://www.phpobject.net/blog");

print_r($snoopy->results);

?>

嘿嘿，效果不错把，而且全部都是我们需要的url，而没有那种/blog/read.php/85.htm那种东西。

另外提交数据那些稍后测试。。。

Tags: snoopy , magpierss

评论(8) | 引用(657) | 阅读(12320)

KKK Says:

2008/09/29 07:12

能处理js吗?

当然可以

feifengxlq 回复于 2008/10/11 09:34

leon Says:

2008/06/06 17:09

学习

van Says:

2008/01/26 11:16

我想请教一个问题
我在用snoopy类读取blog站点内容时，发现如果是wordpress程序的站点（例如www.hecaitou.net），每次snoopy发出请求后，wp返回302 HTTP重定向，但重定向的网址还是我请求的url，这就造成一个死循环，导致snoopy一直请求同一个url，不知道有什么方法可以解决。用file_get_contents函数就能够得到正常的结果。谢谢

van Says:

2008/01/22 10:07

我在sf下载的snoopy类，也有提示语法错误，原因是以下代码出现乱码：
chr(128),
"?,
"?,

在文件的第722行和729行之间，谁知道实际上应该是多少

cargo Says: