這篇文章主要介紹了PHP獲取網頁所有連接的方法,涉及PHP基于curl針對網頁的操作技巧,并帶附demo源碼供讀者下載參考,需要的朋友可以參考下

本文實例講述了PHP獲取網頁所有連接的方法。分享給大家供大家參考，具體如下：
 

1. function getHtml($url, $charset='utf-8') 
2. { 
3.   $curl = curl_init(); 
4.   //curl_setopt($curl, CURLOPT_HTTPHEADER, array('X-FORWARDED-FOR:192.168.168.1', 'CLIENT-IP:192.168.168.1'));//IP 
5.   curl_setopt($curl, CURLOPT_URL, $url); 
6.   curl_setopt($curl, CURLOPT_REFERER, "");  //來路 
7.   $user_agent = isset($_SERVER['HTTP_USER_AGENT']) ? $_SERVER['HTTP_USER_AGENT'] : 'Mozilla/5.0 (Windows NT 5.1) AppleWebKit/537.31 (KHTML, like Gecko) Chrome/26.0.1410.43 Safari/537.31'; 
8.   curl_setopt($curl, CURLOPT_USERAGENT, $user_agent); 
9.   // 只需返回HTTP header 
10.   // curl_setopt($curl, CURLOPT_HEADER, 1); 
11.   // 頁面內容我們并不需要 
12.   // curl_setopt($curl, CURLOPT_NOBODY, 1); 
13.   // 返回結果，而不是輸出它 
14.   curl_setopt($curl, CURLOPT_RETURNTRANSFER, 1); 
15.   $html = curl_exec($curl); 
16.   //$info = curl_getinfo($curl); 
17.   //echo var_dump($info); 
18.   if ($html === false) { 
19.     //echo "cURL Error: " . curl_error($ch); 
20.     return ''; 
21.   } 
22.   curl_close($curl); 
23.   if ($charset != 'utf-8') 
24.   { 
25.     $html = iconv($charset, "UTF-8", $html); 
26.   } 
27.   return $html; 
28. } 
29. header("Content-type: text/html; charset=utf-8"); 
30. include('simple_html_dom.php'); 
31. // 要打開 extension=php_mbstring.dll 
32. //$url = 'http://www.baidu.com/s?wd=kaka'; 
33. $url = 'http://www.163.com/'; 
34. $str_html = getHtml($url, 'gbk'); 
35. $html = str_get_html($str_html); 
36. $links = $html->find('a'); 
37. foreach($links as $link) 
38. { 
39.   $txt = trim($link->plaintext); 
40.   echo $link->href . '[' . $txt . ']<br>'; 
41. } 
42. $html = null; 

完整實例代碼點擊此處本站下載。