亚洲香蕉成人av网站在线观看_欧美精品成人91久久久久久久_久久久久久久久久久亚洲_热久久视久久精品18亚洲精品_国产精自产拍久久久久久_亚洲色图国产精品_91精品国产网站_中文字幕欧美日韩精品_国产精品久久久久久亚洲调教_国产精品久久一区_性夜试看影院91社区_97在线观看视频国产_68精品久久久久久欧美_欧美精品在线观看_国产精品一区二区久久精品_欧美老女人bb

首頁 > 學院 > 開發設計 > 正文

搜索引擎技術核心揭密 

2019-11-18 20:18:05
字體:
來源:轉載
供稿:網友
編者按:這是一篇精彩的編程教學文章,不但詳細地剖析了搜索引擎的原理,也提供了筆者自己對使用PHP編制搜索引擎的一些思路。整篇文章深入淺出,相信無論是高手還是菜鳥,都能從中得到不少的啟發。

  談到網頁搜索引擎時,大多數人都會想到雅虎。的確,雅虎開創了一個互聯網絡的搜索時代。然而,雅虎目前用于搜索網頁的技術卻并非該公司原先自己開發的。2000年8月,雅虎采用了Google(www.google.com)這家由斯坦福大學學生創建的風險公司的技術。理由非常簡單,Google的搜索引擎比雅虎先前使用的技術能更快、更準確搜索到所需要的信息。

  讓我們自己來設計、開發一個強勁、高效的搜索引擎和數據庫恐怕短時間內在技術、資金等方面是不可能的,不過,既然雅虎都在使用別人的技術,那么我們是不是也可以使用別人現成的搜索引擎網站呢?

剖析編程思路

  我們可以這樣設想:模擬一個查詢,向某個搜索引擎網站發出相應格式的搜索命令,然后傳回搜索結果,對結果的HTML代碼進行分析,剝離多余的字符和代碼,最后按所需要的格式顯示在我們自己的網站頁面里。

  這樣,問題的關鍵就在于,我們要選定一個搜索信息準確(這樣我們的搜索才會更有意義?。?、速度快(因為我們分析搜索結果并顯示需要額外的時間),搜索結果簡潔(便于進行HTML源代碼分析和剝離)的搜索網站,由于新一代搜索引擎Google的各種優良特性,這里我們選擇它為例,來看看用php怎樣實現后臺對Google(www.google.com)搜索、前臺個性化顯示這一過程。

  我們先來看看Google的查詢命令的構成。進入www.google.com網站,在查詢欄中輸入“abcd”,點擊查詢按鈕,我們可以發現瀏覽器的地址欄變成:"http://www.google.com/search?q=abcd&btnG=Google%CB%D1%CB%F7&hl=zh-CN&lr=",可見,Google是通過表單的get方式來傳遞查詢參數并遞交查詢命令的。我們可以使用PHP中的file()函數來模擬這個查詢過程。

了解File()函數

  語法: array file(string filename);

  返回值為數組,將文件全部讀入數組變量中。這里的文件可以是本地的,也可以是遠程的,遠程文件必須指明所使用的協議。例如: result=file(“http://www.google.com/search?q=abcd&btnG=Google%CB%D1%CB%F7&hl=zh-CN&lr=”),該語句將模擬我們在Google上查詢單詞“abcd”的過程,并將搜索結果以每行為元素,傳回到數組變量 result中。因為這里讀取的文件是遠程的,所以協議名“http://”不能缺少。

  如果要讓用戶輸入搜索字符進行任意搜索,我們可以做一個輸入文本框和提交按鈕,并將上文中的被搜索字符“abcd”用變量替換:
echo '
'; //沒有參數的form,默認提交方式為get,提交到本身
echo ''; //構造一個文本輸入框
echo ''; //構造一個提交查詢按鈕
echo '
';

if (isset( keyWords)) //提交后PHP會生成變量 kwywords,即要求下面的程序在提交后運行
{
urlencode( keywords); //對用戶輸入內容進行URL編碼
result=file("http://www.google.com/search?q=". keywords."&btnG=Google%CB%D1%CB%F7&hl=zh-CN&lr=");
//對查詢語句進行變量替換,將查詢結果保存在數組變量 result中
result_string=join(" ", result); //將數組$result合并成字符串,各數組元素之間用空格粘和
... //進一步處理
}
?>

  上面的這段程序已經能按用戶輸入內容進行查詢,并將返回的結果合成一個字符串變量$result_string。請注意要使用urlencode()函數將用戶輸入內容進行URL編碼,才可以正常地對輸入的漢字、空格以及其他特殊字符進行查詢,這樣做也是盡可能逼真地模擬Google的查詢命令,保證搜索結果的正確性。

對Google的分析

  為了便于理解,現在假設我們所真正需要的東西是:搜索結果的標題。網址和簡介等,這是一個簡潔而典型的需求。這樣,我們所要做的便是:去除Google搜索結果的臺頭和腳注,包括一個Google的標志、再次搜索的輸入框和搜索結果說明等,并且在剩余的搜索結果各項條目中剝離原來的HTML格式標記,替換成我們想要的格式。

  要做到這一點,我們必須仔細地分析Google搜索結果的HTML源碼,找到其中的規律。不難發現,在Google的搜索結果的正文總是包含在源碼的第一個

標記和倒數第二個

標記之間,并且倒數第二個

標記后緊跟table字符,而且這個組合“


  以下所有程序均依次接續在上文程序的“進一步處理”處。

  result_string = strstr( result_string, "

"); //取 result_string從第一個

開始后的字符串,以去除Google臺頭
position= strpos( result_string,"

table符號的位置
result_string= substr( result_string,0, position);//截取第一個

table符號之前的字符串,以去除腳注

應用與實現

  OK,現在我們已經得到有用的HTML源碼主干了,剩下的問題是如何自主地顯示這些內容。我們再分析一下這些搜索結果條目,發現每個條目之間也是很有規律的用
分隔,也就是各成一個段落,按這個特點我們用explode()函數把每個條目切開:

  語法:explode(string separator, string string);

  返回一個數組,按separator切開后的各個小字串被保存在數組中。

  于是:
result_array=explode("

", result_string); //用字串"

"把結果切開

  我們就得到一個數組 result_array,其中每個元素都是一個搜索結果條目。我們所要做的僅僅是研究每個條目及其HTML顯示格式代碼,然后按要求替換就行了。下面用循環來處理 result_array中的每個條目。
for( i=0; i {
... //處理每個條目
}

  對于每個條目,我們也很容易找到一些特點:每個條目都由標題、摘要、簡介、類別、網址等組成,每個部分都換行,即包含
標記,于是再次分割:(以下處理程序放在上文的循環中)
every_item=explode("
", result_array[ i]);

  這樣我們得到一個數組 every_item,其中 every_item[0]就是標題, every_item[1]和 every_item[2]兩行為摘要, every_item[3]和 every_item[4]等等的頭部如果包含“簡介:”、“< font size=-1 color=#6f6f6f>類別:< /font>”字符,則是簡介或類別(因為有的結果條目沒有該項),如果頭部包含“< font color=green>”則肯定就是網址啦,這種對比判斷我們常使用正則表達式(略),如果要替換也很方便,比如包含標題的$every_item[0],其本身是有鏈接的,我們希望修改這個鏈接屬性,讓它在新窗口打開鏈接:
echo eregi_replace(' {
... //處理每個條目中除去第一項(第一項為標題,已經顯示)的每一項
... //更多格式修改
}

  這樣就修改了鏈接屬性,其余很多顯示格式的修改、剝離、替換都能用正則替換eregi_replace()來完成。

  至此我們已經得到了每個搜索條目的每一項,并能任意修改每項的格式,甚至可以給他套上漂亮的表格。然而一個好的程序應該能適應各種運行環境的,這里也不例外,我們其實還只是討論了搜索結果的HTML剝離的一種框架方法,真正要做得完美,還要考慮很多內容,比如要顯示一共搜索出多少結果,分成多少頁等等,甚至還可以刨除與Google相關的那些“類別”、“簡介”等代碼,讓客戶根本看不到原始網站。不過這些內容和要求我們都能通過分析HTML進行剝離得到?,F在大家完全能自己動手,做個極富個性化的搜索引擎啦。

摘自:http://tech.163.com/tm/010228/010228_15747.html
作者:maxid


發表評論 共有條評論
用戶名: 密碼:
驗證碼: 匿名發表
亚洲香蕉成人av网站在线观看_欧美精品成人91久久久久久久_久久久久久久久久久亚洲_热久久视久久精品18亚洲精品_国产精自产拍久久久久久_亚洲色图国产精品_91精品国产网站_中文字幕欧美日韩精品_国产精品久久久久久亚洲调教_国产精品久久一区_性夜试看影院91社区_97在线观看视频国产_68精品久久久久久欧美_欧美精品在线观看_国产精品一区二区久久精品_欧美老女人bb
国产精品自产拍在线观看中文| 日韩精品高清在线| www欧美xxxx| 在线成人中文字幕| 国产欧美日韩中文字幕在线| 黑人巨大精品欧美一区二区免费| 中文字幕视频一区二区在线有码| 久久国产精品久久久久久| 国产欧美日韩中文字幕| www.欧美精品| 欧美电影免费观看| 亚洲香蕉av在线一区二区三区| 亚洲国产女人aaa毛片在线| 色偷偷偷综合中文字幕;dd| 欧美三级免费观看| 久久手机精品视频| 色视频www在线播放国产成人| 色中色综合影院手机版在线观看| 欧美一级片久久久久久久| 日本精品视频网站| 欧美日韩亚洲国产一区| 成人黄色网免费| 中文字幕视频在线免费欧美日韩综合在线看| 啪一啪鲁一鲁2019在线视频| 久久久久这里只有精品| 精品久久久久久久久久| 欧日韩在线观看| 亚洲人成电影在线观看天堂色| 午夜精品久久久久久久久久久久久| 日韩亚洲精品电影| 欧美肥老太性生活视频| 最新国产成人av网站网址麻豆| 日韩中文字幕在线观看| 日韩激情视频在线| 亚洲精品av在线| 国产精品中文在线| 欧美福利视频在线| 亚洲欧美日韩国产成人| 亚洲成人精品视频在线观看| 日本午夜在线亚洲.国产| 97视频在线观看视频免费视频| 欧美日韩在线视频首页| 国产精品久久久久久久一区探花| 国产男女猛烈无遮挡91| 亚洲电影免费观看高清完整版在线观看| 日韩中文在线中文网三级| 亚洲香蕉av在线一区二区三区| 国产成人av在线播放| 日韩精品视频在线观看网址| 久久久噜噜噜久久中文字免| 亚洲影影院av| 在线亚洲欧美视频| 国产精品扒开腿做爽爽爽的视频| 青青草原一区二区| 亚洲欧美国产日韩中文字幕| 亚洲女人天堂网| 久久亚洲精品一区| 日本在线观看天堂男亚洲| 国产精品狼人色视频一区| 中文字幕亚洲欧美日韩高清| 一本一本久久a久久精品牛牛影视| 亚洲欧美另类国产| 91精品久久久久久久久久久| 孩xxxx性bbbb欧美| 久久久久久久香蕉网| 久久人人97超碰精品888| 日韩天堂在线视频| 成人动漫网站在线观看| 欧美极品少妇与黑人| 欧美性猛交xxxx乱大交蜜桃| 国产精品自在线| 久久中文字幕一区| 韩国三级电影久久久久久| 欧美激情网站在线观看| 在线一区二区日韩| 亚洲第一视频网站| 亚洲最大成人网色| 亚洲人成电影网站色…| 久久久精品国产网站| 黑人狂躁日本妞一区二区三区| 亚洲性生活视频在线观看| 九九热视频这里只有精品| 亚洲黄色在线观看| 美女啪啪无遮挡免费久久网站| 一区二区三区视频免费在线观看| 亚洲欧洲视频在线| 91福利视频网| 岛国av在线不卡| 国产在线精品一区免费香蕉| 日本欧美中文字幕| 日韩av在线影院| 久久国产精品久久久久久久久久| 久久国产精品亚洲| 日韩理论片久久| 91亚洲国产成人久久精品网站| 91精品久久久久久久久| 狠狠躁夜夜躁人人爽天天天天97| 久久69精品久久久久久久电影好| 精品国产一区久久久| 日韩小视频网址| 色妞在线综合亚洲欧美| 国产一区二区三区精品久久久| 久久精品国产免费观看| 国产精品美女网站| 亚洲一区免费网站| 中国人与牲禽动交精品| 亚洲国产成人精品久久| 日韩精品中文字幕在线播放| 欧美裸体xxxx极品少妇| 日本国产高清不卡| 久久久精品一区二区| 国产婷婷成人久久av免费高清| 成人亚洲欧美一区二区三区| 久久国产精品网站| 精品久久久久久亚洲国产300| 久久亚洲成人精品| 麻豆国产精品va在线观看不卡| 精品国产福利视频| 国产ts人妖一区二区三区| 亚洲美女免费精品视频在线观看| 人人做人人澡人人爽欧美| 亚洲女在线观看| 久久伊人免费视频| 日韩精品在线视频美女| 国产精品入口日韩视频大尺度| 日本亚洲欧洲色| 国产专区欧美专区| 欧美xxxx18国产| 国产精品久久久久久久久久免费| 热久久这里只有精品| 欧美黄色小视频| 国内精品久久久久久影视8| 亚洲美女中文字幕| 久久99亚洲热视| 欧美日韩一区二区三区| 欧美日韩一区二区在线| 国产精品扒开腿做| 中文字幕日韩电影| 亚洲精品一区av在线播放| 午夜精品在线观看| 911国产网站尤物在线观看| 日韩美女在线播放| 国产欧洲精品视频| 国产精品99久久久久久久久| 激情成人在线视频| 亚洲精品97久久| 欧美激情精品久久久| 最近2019年好看中文字幕视频| 国产v综合ⅴ日韩v欧美大片| 欧美专区在线播放| 热门国产精品亚洲第一区在线| 欧美野外wwwxxx| 日韩精品高清视频| 欧美最猛性xxxxx(亚洲精品)| 欧美色播在线播放| 久久九九热免费视频| 欧美色xxxx| 欧美性xxxxxx| 亚洲第一福利在线观看| 欧美国产高跟鞋裸体秀xxxhd| 欧美日韩亚洲成人| 91精品国产高清自在线| 国内精品久久久久影院 日本资源| 中文字幕亚洲一区在线观看|