技术文章 订阅所有【技术文章】的日志

在PHP中使用Curl

作者:admin 日期:2012-04-25

字体大小: 小 中 大

你可能在你的编写PHP脚本代码中会遇到这样的问题：怎么样才能从其他站点获取内容呢？这里有几个解决方式；最简单的就是在php中使用fopen()函数，但是fopen函数没有足够的参数来使用，比如当你想构建一个“网络爬虫”，想定义爬虫的客户端描述(IE,firefox),通过不同的请求方式来获取内容，比如POST,GET；等等这些需求是不可能用fopen()函数实现的。

 

为了解决我们上面提出的问题，我们可以使用PHP的扩展库-Curl，这个扩展库通常是默认在安装包中的,你可以它来获取其他站点的内容，也可以来干别的。

在这篇文章中，我们一起来看看如何使用curl库，并看看它的其他用处，但是接下来，我们要从最基本的用法开始

基本用法：

第一步，我们通过函数curl_init()创建一个新的curl会话,代码如下：

PHP代码
  1. <?php  
  2. // create a new curl resource  
  3. $ch = curl_init();  
  4. ?>  

 

我们已经成功创建了一个curl会话，如果需要获取一个URL的内容，那么接下的一步，传递一个URL给curl_setopt()函数，代码：

PHP代码
  1. <?php  
  2. // set URL and other appropriate options  
  3. curl_setopt($ch, CURLOPT_URL, “http://www.google.com/”);  
  4. ?>  

 

做完上一步工作，curl的准备工作做完了，curl将会获取URL站点的内容，并打印出来。代码：

PHP代码
  1. <?php  
  2. // grab URL and pass it to the browser  
  3. curl_exec($ch);  
  4. ?>  

 

最后，关闭当前的curl会话

PHP代码
  1. <?php  
  2. //close curl resource, and free up system resources  
  3. curl_close($ch);  
  4. ?>  

 

下面我们来看看完成的实例代码：

PHP代码
  1. <?php  
  2.   
  3. // create a new curl resource  
  4. $ch = curl_init();  
  5. // set URL and other appropriate options  
  6. curl_setopt($ch, CURLOPT_URL, “http://www.google.nl/”);  
  7. // grab URL and pass it to the browser  
  8. curl_exec($ch);  
  9. // close curl resource, and free up system resources  
  10. curl_close($ch);  
  11. ?>  

我们刚刚把另外一个站点的内容，获取过来以后自动输出到浏览器，我们有没有其他的方式组织获取的信息，然后控制其输出的内容呢？完全没有问题，在curl_setopt()函数的参数中，如果希望获得内容但不输出,使用CURLOPT_RETURNTRANSFER参数,并设为非0值/true!，完整代码请看：

PHP代码
  1. <?php  
  2.   
  3. // create a new curl resource  
  4. $ch = curl_init();  
  5. // set URL and other appropriate options  
  6. curl_setopt($ch, CURLOPT_URL, “http://www.google.nl/”);  
  7. curl_setopt($ch, CURLOPT_RETURNTRANSFER, true);  
  8. // grab URL, and return output  
  9. $output = curl_exec($ch);  
  10. // close curl resource, and free up system resources  
  11. curl_close($ch);  
  12. // Replace ‘Google’ with ‘PHPit’  
  13. $output = str_replace(’Google’, ‘PHPit’, $output);  
  14. // Print output  
  15. echo $output;  
  16. ?>  

在上面的2个实例中，你可能注意到通过设置函数curl_setopt()的不同参数，可以获得不同结果，这正是curl强大的原因，下面我们来看看这些参数的含义。

CURL的相关选项：

如果你看过php手册中的curl_setopt()函数，你可以注意到了，它下面长长的参数列表，我们不可能一一介绍，更多的内容请查看PHP手册，这里只介绍常用的和有的一些参数。

第一个很有意思的参数是 CURLOPT_FOLLOWLOCATION ,当你把这个参数设置为true时，curl会根据任何重定向命令更深层次的获取转向路径，举个例子：当你尝试获取一个PHP的页面，然后这个PHP的页面中有一段跳转代码 <?php header(”Location:http://new_url”);….?>,curl将从http://new_url获取内容，而不是返回跳转代码。完整的代码如下：

PHP代码
  1. <?php  
  2.   
  3. // create a new curl resource  
  4. $ch = curl_init();  
  5. // set URL and other appropriate options  
  6. curl_setopt($ch, CURLOPT_URL, “http://www.google.com/”);  
  7. curl_setopt($ch, CURLOPT_FOLLOWLOCATION, true);  
  8. // grab URL, and print  
  9. curl_exec($ch);  
  10. ?>  

如果Google发送一个转向请求，上面的例子将根据跳转的网址继续获取内容，和这个参数有关的两个选项是CURLOPT_MAXREDIRS和CURLOPT_AUTOREFERER .
参数CURLOPT_MAXREDIRS选项允许你定义跳转请求的最大次数，超过了这个次数将不再获取其内容。如果CURLOPT_AUTOREFERER 设置为true时，curl会自动添加Referer header在每一个跳转链接，可能它不是很重要，但是在一定的案例中却非常的有用。

下一步介绍的参数是CURLOPT_POST,这是一个非常有用的功能，因为它可以让您这样做POST请求，而不是GET请求，这实际上意味着你可以提交
其他形式的页面，无须其实在表单中填入。下面的例子表明我的意思：

PHP代码
  1. <?php  
  2. // create a new curl resource  
  3. $ch = curl_init();  
  4. // set URL and other appropriate options  
  5. curl_setopt($ch, CURLOPT_URL,”http://projects/phpit/content/using%20curl%20php/demos/handle_form.php”);  
  6. // Do a POST  
  7. $data = array(’name’ => ‘Dennis’, ’surname’ => ‘Pallett’);  
  8. curl_setopt($ch, CURLOPT_POST, true);  
  9. curl_setopt($ch, CURLOPT_POSTFIELDS, $data);  
  10. // grab URL, and print  
  11. curl_exec($ch);  
  12. ?>  

And the handle_form.php file:

PHP代码
  1. <?php  
  2. echo ‘<h3>Form variables I received: </h3>’;  
  3. echo ‘<pre>’;  
  4. print_r ($_POST);  
  5. echo ‘</pre>’;  
  6. ?>  

正如你可以看到，这使得它真的很容易提交形式，这是一个伟大的方式来测试您的所有形式，而不以填补他们在所有的时间。
参数CURLOPT_CONNECTTIMEOUT 通常用来设置curl尝试请求链接的时间，这是一个非常重要的选项，如果你把这段时间设置的太短了，可能会导致curl请求失败。
但是如果你把它设置的时间太长了，可能PHP脚本将死掉。和这个参数相关的一个选项是 CURLOPT_TIMEOUT，这是用来设置curl允许执行的时间需求。如果您设置这一个很小的值，它可能会导下载的网页上是不完整的，因为他们需要一段时间才能下载。
最后一个选项是 CURLOPT_USERAGENT，它允许你自定义请求是的客户端名称，比如webspilder或是IE6.0.示例代码如下：

PHP代码
  1. <?php  
  2. // create a new curl resource  
  3. $ch = curl_init();  
  4. // set URL and other appropriate options  
  5. curl_setopt($ch, CURLOPT_URL, “http://www.useragent.org/”);  
  6. curl_setopt($ch, CURLOPT_USERAGENT, ‘My custom web spider/0.1′);  
  7. curl_setopt($ch, CURLOPT_FOLLOWLOCATION, true);  
  8. // grab URL, and print  
  9. curl_exec($ch);  
  10. ?>  

现在我们把最有意思的一个参数都介绍过了，下面我们来介绍一个curl_getinfo() 函数，看看它能为我们做些什么。

获取页面的信息：

函数curl_getinfo()可以使得我们获取接受页面各种信息，你能编辑这些信息通过设定选项的第二个参数，你也可以传递一个数组的形式。就像下面的例子：

PHP代码
  1. <?php  
  2. // create a new curl resource  
  3. $ch = curl_init();  
  4. // set URL and other appropriate options  
  5. curl_setopt($ch, CURLOPT_URL, “http://www.google.com”);  
  6. curl_setopt($ch, CURLOPT_FOLLOWLOCATION, true);  
  7. curl_setopt($ch, CURLOPT_RETURNTRANSFER, true);  
  8. curl_setopt($ch, CURLOPT_FILETIME, true);  
  9. // grab URL  
  10. $output = curl_exec($ch);  
  11. // Print info  
  12. echo ‘<pre>’;  
  13. print_r (curl_getinfo($ch));  
  14. echo ‘</pre>’;  
  15. ?>  

大部分返回的信息是请求本身的，像：这个请求花的时间，返回的头文件信息，当然也有一些页面的信息，像页面内容的大小，最后修改的时间。

那些全是关于curl_getinfo（）函数的，现在让我们看看它的实际用途。

实际用途：

curl库的第一用途可以查看一个URL页面是否存在，我们可以通过查看这个URL的请求返回的代码来判断比如404代表这个页面不存在，我们来看一些例子：

PHP代码
  1. <?php  
  2. // create a new curl resource  
  3. $ch = curl_init();  
  4. // set URL and other appropriate options  
  5. curl_setopt($ch, CURLOPT_URL, “http://www.google.com/does/not/exist”);  
  6. curl_setopt($ch, CURLOPT_RETURNTRANSFER, true);  
  7. // grab URL  
  8. $output = curl_exec($ch);  
  9. // Get response code  
  10. $response_code = curl_getinfo($ch, CURLINFO_HTTP_CODE);  
  11. // Not found?  
  12. if ($response_code == ‘404′) {  
  13. echo ‘Page doesn\’t exist’;  
  14. } else {  
  15. echo $output;  
  16. }  
  17. ?>  

其他的用户可能是创建一个自动检查器，验证每个请求的页面是否存在。
我们可以用curl库来写和google类似的网页蜘蛛(web spider)，或是其他的网页蜘蛛。这篇文章不是关于如何写一个网页蜘蛛的，因此所以我们没有讲任何关于网页蜘蛛的细节问题，但是以后在PHPit 将会介绍用 curl来构造一个web spider.

结论：

在这篇文章我已经表明，如何使用php中的curl库和其大部分的选项。

为最基本的任务，只想获得一个网页，你可能不会需要CURL库，但是，一旦你想要做任何事情稍微先进的，您可能会想要使用curl库。

在近未来，我会告诉您究竟如何建立自己的网络蜘蛛，类似Google的网络蜘蛛，敬请期待，以phpit。

 

 

 

 



上一篇: php实现动转静生成纯静态页面的方法
下一篇: 利用php创建打印文字gif动画效果
文章来自: 本站原创
引用通告: 查看所有引用 | 我要引用此文章
Tags: php curl
相关日志:
评论: 0 | 引用: 0 | 查看次数: 2047
发表评论
昵　称:
密　码: 游客发言不需要密码.
邮　箱: 邮件地址支持Gravatar头像,邮箱地址不会公开.
网　址: 输入网址便于回访.
内　容:
验证码:
选　项:
虽然发表评论不用注册，但是为了保护您的发言权，建议您注册帐号.
字数限制 1000 字 | UBB代码 开启 | [img]标签 关闭

 广告位

↑返回顶部↑