PHP-CURL庫常用功能概述

 

使用PHP的cURL庫可以簡單和有效地去抓網頁。你只需要運行一個腳本，然後分析一下你所抓取的網頁，然後就可以以程序的方式得到你想要的數據 了。無論是你想從從一個鏈接上取部分數據，或是取一個XML文件並把其導入數據庫，那怕就是簡單的獲取網頁內容，cURL 是一個功能強大的PHP庫。

PHP中的CURL函數庫（Client URL Library Function）

curl_close — 關閉一個curl會話
curl_copy_handle — 拷貝一個curl連接資源的所有內容和參數
curl_errno — 返回一個包含當前會話錯誤信息的數字編號
curl_error — 返回一個包含當前會話錯誤信息的字符串
curl_exec — 執行一個curl會話
curl_getinfo — 獲取一個curl連接資源句柄的信息
curl_init — 初始化一個curl會話
curl_multi_add_handle — 向curl批處理會話中添加單獨的curl句柄資源
curl_multi_close — 關閉一個批處理句柄資源
curl_multi_exec — 解析一個curl批處理句柄
curl_multi_getcontent — 返回獲取的輸出的文本流
curl_multi_info_read — 獲取當前解析的curl的相關傳輸信息
curl_multi_init — 初始化一個curl批處理句柄資源
curl_multi_remove_handle — 移除curl批處理句柄資源中的某個句柄資源
curl_multi_select — Get all the sockets associated with the cURL extension, which can then be "selected"
curl_setopt_array — 以數組的形式為一個curl設置會話參數
curl_setopt — 為一個curl設置會話參數
curl_version — 獲取curl相關的版本信息

curl_init()函數的作用初始化一個curl會話，curl_init()函數唯一的一個參數是可選的，表示一個url地址。
curl_exec()函數的作用是執行一個curl會話，唯一的參數是curl_init()函數返回的句柄。
curl_close()函數的作用是關閉一個curl會話，唯一的參數是curl_init()函數返回的句柄。

例

代碼如下

1. ﹤?php
2. // 初始化一個 cURL 對象
3. $curl = curl_init();
4.  
5. // 設置你需要抓取的URL
6. curl_setopt($curl, CURLOPT_URL, 'http://www.cmx8.cn');
7.  
8. // 設置header
9. curl_setopt($curl, CURLOPT_HEADER, 1);
10.  
11. // 設置cURL 參數，要求結果保存到字符串中還是輸出到屏幕上。
12. curl_setopt($curl, CURLOPT_RETURNTRANSFER, 1);
13.  
14. // 運行cURL，請求網頁
15. $data = curl_exec($curl);
16.  
17. // 關閉URL請求
18. curl_close($curl);
19.  
20. // 顯示獲得的數據
21. var_dump($data);
22.  
23. ?>

例子二: POST數據
Curl 模擬登錄 discuz 程序,適合DZ7.0,將username改成你的用戶名,userpass改成你的密碼就可以了.
代碼如下

1. <?php  
2. /**  
3. * Curl 模擬登錄 discuz 程序  
4. * 尚未實現開啟驗證碼的的論壇登錄功能  
5. */  
6.  
7. !extension_loaded('curl') && die('The curl extension is not loaded.');  
8.  
9. $discuz_url = 'http://www.lxvoip.com';//論壇地址  
10. $login_url = $discuz_url .'/logging.php?action=login';//登錄頁地址  
11. $get_url = $discuz_url .'/my.php?item=threads'; //我的帖子  
12.  
13. $post_fields = array();  
14. //以下兩項不需要修改  
15. $post_fields['loginfield'] = 'username';  
16. $post_fields['loginsubmit'] = 'true';  
17. //用戶名和密碼，必須填寫  
18. $post_fields['username'] = 'lxvoip';  
19. $post_fields['password'] = '88888888';  
20. //安全提問  
21. $post_fields['questionid'] = 0;  
22. $post_fields['answer'] = '';  
23. //@todo驗證碼  
24. $post_fields['seccodeverify'] = '';  
25.  
26. //獲取表單FORMHASH  
27. $ch = curl_init($login_url);  
28. curl_setopt($ch, CURLOPT_HEADER, 0);  
29. curl_setopt($ch, CURLOPT_RETURNTRANSFER, 1);  
30. $contents = curl_exec($ch);  
31. curl_close($ch);  
32. preg_match('/<inputs*type="hidden"s*name="formhash"s*value="(.*?)"s*/>/i', $contents, $matches);  
33. if(!empty($matches)) {  
34.     $formhash = $matches[1];  
35. } else {  
36.     die('Not found the forumhash.');  
37. }  
38.  
39. //POST數據，獲取COOKIE  
40. $cookie_file = dirname(__FILE__) . '/cookie.txt';  
41. //$cookie_file = tempnam('/tmp');  
42. $ch = curl_init($login_url);  
43. curl_setopt($ch, CURLOPT_HEADER, 0);  
44. curl_setopt($ch, CURLOPT_RETURNTRANSFER, 1);  
45. curl_setopt($ch, CURLOPT_POST, 1);  
46. curl_setopt($ch, CURLOPT_POSTFIELDS, $post_fields);  
47. curl_setopt($ch, CURLOPT_COOKIEJAR, $cookie_file);  
48. curl_exec($ch);  
49. curl_close($ch);  
50.  
51. //帶著上面得到的COOKIE獲取需要登錄後才能查看的頁面內容  
52. $ch = curl_init($get_url);  
53. curl_setopt($ch, CURLOPT_HEADER, 0);  
54. curl_setopt($ch, CURLOPT_RETURNTRANSFER, 0);  
55. curl_setopt($ch, CURLOPT_COOKIEFILE, $cookie_file);  
56. $contents = curl_exec($ch);  
57. curl_close($ch);  
58.  
59. var_dump($contents);  
60. ?>

　抓取和分析一個文件是非常簡單的事。這個教程將通過一個例子帶領你一步一步地去實現它。讓我們開
始吧！

首先，我首必須決定我們將抓取的URL地址。可以通過在腳本中設定或通過$QUERY_STRING傳遞。為了簡
單起見，讓我們將變量直接設在腳本中。

<?
$url = 'http://www.php.net';
?>;

第二步，我們抓取指定文件，並且通過file()函數將它存在一個數組裡。

<?
$url = 'http://www.php.net';
$lines_array = file($url);
?>;

好了，現在在數組裡已經有了文件了。但是，我們想分析的文本可能不全在一行裡面。為了解決這個文
件，我們可以簡單地將數組$lines_array轉化成一個字符串。我們可以使用implode(x,y)函數來實現它。如
果在後面你想用explode(將字符串變量數組)，將x設成"|"或"!"或其它類似的分隔符可能會更好。但是出於
我們的目的，最好將x設成空格。y是另一個必要的參數，因為它是你想用implode()處理的數組。

<?
$url = 'http://www.php.net';
$lines_array = file($url);
$lines_string = implode('', $lines_array);
?>;

現在，抓取工作就做完了，下面該進行分析了。出於這個例子的目的，我們想得到在<head>;到</head>;
之間的所有東西。為了分析出字符串，我們還需要叫做正規表達式的東西。

<?
$url = 'http://www.php.net';
$lines_array = file($url);
$lines_string = implode('', $lines_array);
eregi("<head>;(.*)</head>;", $lines_string, $head);
?>;

讓我們看一下代碼。正如你所見，eregi()函數按下面的格式執行：

eregi("<head>;(.*)</head>;", $lines_string, $head);

"(.*)"表示所有東西，可以解釋為，"分析在<head>;和</head>;間的所以東西"。$lines_string是我們正
在分析的字符串，$head是分析後的結果存放的數組。

最後，我們可以輸數據。因為僅在<head>;和</head>;間存在一個實例，我們可以安全的假設數組中僅存
在著一個元素，而且就是我們想要的。讓我們把它打印出來吧。

<?
$url = 'http://www.php.net';
$lines_array = file($url);
$lines_string = implode('', $lines_array);
eregi("<head>;(.*)</head>;", $lines_string, $head);
echo $head[0];
?>;

這就是全部的代碼了。

 

代碼如下

1. ﹤?php
2. $phoneNumber　=　'13812345678';
3. $message　=　'This　message　was　generated　by　curl　and　php';
4. $curlPost　=　'pNUMBER='　.　urlencode($phoneNumber)　.　'&MESSAGE='　.　urlencode($message)　.　'&SUBMIT=Send';
5. $ch　=　curl_init();
6. curl_setopt($ch,　CURLOPT_URL,　'http://www.lxvoip.com/sendSMS.php');
7. curl_setopt($ch,　CURLOPT_HEADER,　1);
8. curl_setopt($ch,　CURLOPT_RETURNTRANSFER,　1);
9. curl_setopt($ch,　CURLOPT_POST,　1);
10. curl_setopt($ch,　CURLOPT_POSTFIELDS,　$curlPost);
11. $data　=　curl_exec();
12. curl_close($ch);
13. ?﹥

例子三:使用代理服務器
例子四: 模擬登錄