亚洲香蕉成人av网站在线观看_欧美精品成人91久久久久久久_久久久久久久久久久亚洲_热久久视久久精品18亚洲精品_国产精自产拍久久久久久_亚洲色图国产精品_91精品国产网站_中文字幕欧美日韩精品_国产精品久久久久久亚洲调教_国产精品久久一区_性夜试看影院91社区_97在线观看视频国产_68精品久久久久久欧美_欧美精品在线观看_国产精品一区二区久久精品_欧美老女人bb

首頁 > 開發 > PHP > 正文

PHP CURL或file_get_contents獲取網頁標題的代碼及兩者效率的穩定性問題

2024-05-04 23:40:38
字體:
來源:轉載
供稿:網友
PHP CURL與file_get_contents函數都可以獲取遠程服務器上的文件保存到本地,但在性能上面兩者完全不在同一個級別,下面通過一個例子給大家介紹PHP CURL或file_get_contents獲取網頁標題的代碼及兩者效率的穩定性問題,需要的朋友參考下
 

PHP CURL與file_get_contents函數都可以獲取遠程服務器上的文件保存到本地,但在性能上面兩者完全不在同一個級別,下面我先來介紹PHP CURL或file_get_contents函數應用例子,然后再簡單的給各位介紹一下它們的一些小區別吧。

推薦方法 CURL獲取

<?php$c = curl_init();$url = 'www.49028c.com';curl_setopt($c, CURLOPT_URL, $url);curl_setopt($c, CURLOPT_RETURNTRANSFER, 1);$data = curl_exec($c);curl_close($c);$pos = strpos($data,'utf-8');if($pos===false){$data = iconv("gbk","utf-8",$data);}preg_match("/<title>(.*)<\/title>/i",$data, $title);echo $title[1];?>

使用file_get_contents

<?php$content=file_get_contents("http://www.49028c.com/");$pos = strpos($content,'utf-8');if($pos===false){$content = iconv("gbk","utf-8",$content);}$postb=strpos($content,'<title>')+7;$poste=strpos($content,'</title>');$length=$poste-$postb;echo substr($content,$postb,$length);?>

看看file_get_contents性能

1)fopen/file_get_contents 每次請求遠程URL中的數據都會重新做DNS查詢,并不對DNS信息進行緩存。但是CURL會自動對DNS信息進行緩存。對同一域名下的網頁或者圖片的請求只需要一次DNS 查詢。這大大減少了DNS查詢的次數。所以CURL的性能比fopen/file_get_contents 好很多。
2)fopen/file_get_contents在請求HTTP時,使用的是http_fopen_wrapper,不會keeplive。而curl卻可以。這樣在多次請求多個鏈接時,curl效率會好一些。(設置header頭應該可以)
3)fopen/file_get_contents函數會受到php.ini文件中allow_url_open選項配置的影響。如果該配置關閉了,則該函數也就失效了。而curl不受該配置的影響。
4)curl可以模擬多種請求,例如:POST數據,表單提交等,用戶可以按照自己的需求來定制請求。而fopen/file_get_contents只能使用get方式獲取數據。
5)fopen/file_get_contents 不能正確下載二進制文件
6)fopen/file_get_contents 不能正確處理ssl請求
7)curl 可以利用多線程
8)使用 file_get_contents 的時候如果 網絡出現問題, 很容易堆積一些進程在這里
9)如果是要打一個持續連接,多次請求多個頁面。那么file_get_contents就會出問題。取得的內容也可能會不對。所以做一些類似采集工作的時候,肯定就有問題了。對做采集抓取的用curl,如果還有同不相信下面我們再做個測試

curl與file_get_contents性能對比PHP源代碼如下:

1829.php

<?php/*** 通過淘寶IP接口獲取IP地理位置* @param string $ip* @return: string**/function getCityCurl($ip){ $url="http://ip.taobao.com/service/getIpInfo.php?ip=".$ip; $ch = curl_init(); $timeout = 5; curl_setopt ($ch, CURLOPT_URL, $url); curl_setopt ($ch, CURLOPT_RETURNTRANSFER, 1); curl_setopt ($ch, CURLOPT_CONNECTTIMEOUT, $timeout); $file_contents = curl_exec($ch); curl_close($ch); $ipinfo=json_decode($file_contents); if($ipinfo->code=='1'){  return false; } $city = $ipinfo->data->region.$ipinfo->data->city; return $city;}function getCity($ip){ $url="http://ip.taobao.com/service/getIpInfo.php?ip=".$ip; $ipinfo=json_decode(file_get_contents($url)); if($ipinfo->code=='1'){  return false; } $city = $ipinfo->data->region.$ipinfo->data->city; return $city;}// for file_get_contents$startTime=explode(' ',microtime());$startTime=$startTime[0] + $startTime[1];for($i=1;$i<=10;$i++){ echo getCity("121.207.247.202")."</br>";}$endTime = explode(' ',microtime());$endTime = $endTime[0] + $endTime[1];$totalTime = $endTime - $startTime;echo 'file_get_contents:'.number_format($totalTime, 10, '.', "")." seconds</br>";//for curl$startTime2=explode(' ',microtime());$startTime2=$startTime2[0] + $startTime2[1];for($i=1;$i<=10;$i++){ echo getCityCurl('121.207.247.202')."</br>";}$endTime2 = explode(' ',microtime());$endTime2=$endTime2[0] + $endTime2[1];$totalTime2 = $endTime2 - $startTime2;echo "curl:".number_format($totalTime2, 10, '.', "")." seconds";?>

測試訪問

file_get_contents速度:4.2404510975 seconds
curl速度:2.8205530643 seconds
curl比file_get_contents速度快了30%左右,最重要的是服務器負載更低.

ps:php函數file_get_contents與curl效率及穩定性問題

習慣了使用方便快捷的file_get_contents函數抓取別家網站內容,但是總是會遇到獲取失敗的問題,盡管按照手冊中的例子設置了超時,可多數時候不好使:

$config['context'] = stream_context_create(array('http' => array('method' => "GET",'timeout' => 5)));  
'timeout' => 5//這個超時時間不穩定,經常不好使。這時候,看一下服務器的連接池,會發現一堆類似下面的錯誤,讓你頭疼萬分:

file_get_contents(http://***): failed to open stream… 

不得已,安裝了curl庫,寫了一個函數替換:

function curl_get_contents($url) {  $ch = curl_init();  curl_setopt($ch, CURLOPT_URL, $url);   //設置訪問的url地址  //curl_setopt($ch,CURLOPT_HEADER,1);   //是否顯示頭部信息  curl_setopt($ch, CURLOPT_TIMEOUT, 5);   //設置超時  curl_setopt($ch, CURLOPT_USERAGENT, _USERAGENT_); //用戶訪問代理 User-Agent  curl_setopt($ch, CURLOPT_REFERER,_REFERER_);  //設置 referer  curl_setopt($ch,CURLOPT_FOLLOWLOCATION,1);  //跟蹤301  curl_setopt($ch, CURLOPT_RETURNTRANSFER, 1);  //返回結果  $r = curl_exec($ch);  curl_close($ch);  return $r; } 

如此,除了真正的網絡問題外,沒再出現任何問題。

這是別人做過的關于curl和file_get_contents的測試:

file_get_contents抓取google.com需用秒數:

2.31319094   
2.30374217   
2.21512604   
3.30553889   
2.30124092 

curl使用的時間:

0.68719101   
0.64675593   
0.64326   
0.81983113   
0.63956594  

差距很大吧?呵呵,從我使用的經驗來說,這兩個工具不只是速度有差異,穩定性也相差很大。建議對網絡數據抓取穩定性要求比較高的朋友使用上面的 curl_file_get_contents函數,不但穩定速度快,還能假冒瀏覽器欺騙目標地址哦!



注:相關教程知識閱讀請移步到PHP教程頻道。
發表評論 共有條評論
用戶名: 密碼:
驗證碼: 匿名發表
亚洲香蕉成人av网站在线观看_欧美精品成人91久久久久久久_久久久久久久久久久亚洲_热久久视久久精品18亚洲精品_国产精自产拍久久久久久_亚洲色图国产精品_91精品国产网站_中文字幕欧美日韩精品_国产精品久久久久久亚洲调教_国产精品久久一区_性夜试看影院91社区_97在线观看视频国产_68精品久久久久久欧美_欧美精品在线观看_国产精品一区二区久久精品_欧美老女人bb
国内免费久久久久久久久久久| 国产主播在线一区| 92版电视剧仙鹤神针在线观看| 欧美一级在线亚洲天堂| 这里精品视频免费| 疯狂做受xxxx欧美肥白少妇| 欧美丝袜一区二区三区| 欧洲永久精品大片ww免费漫画| 国产精品第3页| 久久精品视频导航| 国产成人精品视频在线观看| 2019中文字幕在线| 久久人人爽人人爽人人片av高请| 欧美日韩一区二区在线| 成人国产精品一区| 色悠久久久久综合先锋影音下载| 国产欧美欧洲在线观看| 久久在精品线影院精品国产| 国产婷婷色综合av蜜臀av| 在线丨暗呦小u女国产精品| 国产日本欧美一区二区三区| 狠狠躁夜夜躁人人躁婷婷91| 亚洲精品免费网站| 高清一区二区三区日本久| 91av在线播放| 九九九热精品免费视频观看网站| 亚洲成人a级网| 亚洲电影第1页| 亚洲人成在线免费观看| 欧美大片在线看| 一本一本久久a久久精品综合小说| 欧美国产精品va在线观看| 69国产精品成人在线播放| 亚洲韩国青草视频| 日本一区二区三区四区视频| 久久影院模特热| 欧美在线性爱视频| 人人做人人澡人人爽欧美| 91色视频在线导航| 午夜剧场成人观在线视频免费观看| 亚洲视频综合网| 欧美国产日韩免费| 欧美日韩亚洲成人| 中文字幕av一区二区三区谷原希美| 精品国产拍在线观看| 一区三区二区视频| 国产69精品久久久久99| 国产成人av在线| 久久久国产成人精品| 亚洲精品免费av| 国产综合在线看| 欧美激情视频在线免费观看 欧美视频免费一| 一区国产精品视频| 国产国产精品人在线视| 成人综合国产精品| 综合国产在线观看| 亚洲男人天堂2023| 欧美日韩高清在线观看| 久久中文精品视频| 亚洲欧美国产va在线影院| 久久精品国产欧美激情| 欧美一级电影久久| 亚洲欧美在线播放| 中文字幕在线看视频国产欧美在线看完整| 久久99精品久久久久久青青91| 亚洲一区二区三区乱码aⅴ| 精品国产精品自拍| 91在线看www| 精品久久久av| 国产精品日韩av| 亚洲香蕉av在线一区二区三区| 国产日产欧美a一级在线| 91系列在线观看| 精品无码久久久久久国产| 国产亚洲xxx| 亚洲老头老太hd| 国产精品自拍网| 久久伊人精品视频| xvideos亚洲人网站| 91中文在线观看| 国产精品jvid在线观看蜜臀| 45www国产精品网站| 欧美一区二三区| 亚洲字幕一区二区| 91高潮在线观看| 亚洲精美色品网站| 国产剧情日韩欧美| 欧美日韩成人在线播放| 亚洲精品动漫久久久久| 国产日韩精品视频| 98精品国产自产在线观看| 日本电影亚洲天堂| 国产亚洲美女精品久久久| 国产免费亚洲高清| 九九综合九九综合| 国产精品视频一区二区高潮| 88国产精品欧美一区二区三区| 国产+人+亚洲| 亚洲free性xxxx护士hd| 黑人巨大精品欧美一区二区| 亚洲a∨日韩av高清在线观看| 国产99久久精品一区二区 夜夜躁日日躁| 国产欧美一区二区三区久久人妖| 中文字幕自拍vr一区二区三区| 麻豆精品精华液| 最近中文字幕2019免费| 国产91精品久久久久| 欧美大成色www永久网站婷| 久久夜色精品国产亚洲aⅴ| 78色国产精品| 中文字幕亚洲欧美日韩高清| 精品国产乱码久久久久久婷婷| 欧美日韩加勒比精品一区| www.日韩.com| 奇米4444一区二区三区| 亚洲国产精彩中文乱码av| 在线播放日韩专区| 欧美在线精品免播放器视频| 亚洲毛片在线观看.| 国产精品自拍小视频| 亚洲精品福利在线| 国产99久久久欧美黑人| 在线观看视频99| 欧美精品一二区| 人人爽久久涩噜噜噜网站| 国产一区二区日韩精品欧美精品| 久久久久久免费精品| 亚洲xxx自由成熟| 欧美黄色片在线观看| 国内精品久久久久影院优| 亚洲肉体裸体xxxx137| 精品综合久久久久久97| 成人日韩av在线| 欧美日韩国产va另类| 亚洲视频专区在线| 久久精品国产2020观看福利| 国产在线不卡精品| 久久久av一区| 色噜噜国产精品视频一区二区| 欧美精品videosex牲欧美| 亚洲精品国产欧美| 国产精品高潮在线| 亚洲综合日韩中文字幕v在线| 欧美在线一级视频| 色噜噜狠狠狠综合曰曰曰88av| www.久久撸.com| 美女国内精品自产拍在线播放| 欧美体内谢she精2性欧美| 国模精品视频一区二区| 亚洲最大av网| 成人免费观看49www在线观看| 一本一本久久a久久精品牛牛影视| 亚洲午夜久久久久久久| 欧美电影在线观看完整版| 国产视频精品免费播放| 永久免费精品影视网站| 欧美人在线观看| 亚洲人成网站777色婷婷| 91免费福利视频| 岛国av一区二区在线在线观看| 韩国视频理论视频久久| 国产欧美精品一区二区三区-老狼| 亚洲欧美一区二区三区久久| 亚洲一级一级97网|