亚洲香蕉成人av网站在线观看_欧美精品成人91久久久久久久_久久久久久久久久久亚洲_热久久视久久精品18亚洲精品_国产精自产拍久久久久久_亚洲色图国产精品_91精品国产网站_中文字幕欧美日韩精品_国产精品久久久久久亚洲调教_国产精品久久一区_性夜试看影院91社区_97在线观看视频国产_68精品久久久久久欧美_欧美精品在线观看_国产精品一区二区久久精品_欧美老女人bb

首頁 > 開發 > 綜合 > 正文

在一個千萬級的數據庫中查詢,如何提高查詢效率

2024-07-21 02:51:53
字體:
來源:轉載
供稿:網友

在一個千萬級的數據庫查尋中,如何提高查詢效率?

1)數據庫設計方面: a. 對查詢進行優化,應盡量避免全表掃描,首先應考慮在 where 及 order by 涉及的列上建立索引。 b. 應盡量避免在 where 子句中對字段進行 null 值判斷,否則將導致引擎放棄使用索引而進行全表掃描,如: select id from t where num is null 可以在num上設置默認值0,確保表中num列沒有null值,然后這樣查詢: select id from t where num=0

c. 并不是所有索引對查詢都有效,SQL是根據表中數據來進行查詢優化的,當索引列有大量數據重復時,查詢可能不會去利用索引,如一表中有字段sex,male、female幾乎各一半,那么即使在sex上建了索引也對查詢效率起不了作用。

d. 索引并不是越多越好,索引固然可以提高相應的 select 的效率,但同時也降低了 insert 及 update 的效率,因為 insert 或 update 時有可能會重建索引,所以怎樣建索引需要慎重考慮,視具體情況而定。一個表的索引數最好不要超過6個,若太多則應考慮一些不常使用到的列上建的索引是否有必要。

e. 應盡可能的避免更新索引數據列,因為索引數據列的順序就是表記錄的物理存儲順序,一旦該列值改變將導致整個表記錄的順序的調整,會耗費相當大的資源。若應用系統需要頻繁更新索引數據列,那么需要考慮是否應將該索引建為索引。

f. 盡量使用數字型字段,若只含數值信息的字段盡量不要設計為字符型,這會降低查詢和連接的性能,并會增加存儲開銷。這是因為引擎在處理查詢和連接時會逐個比較字符串中每一個字符,而對于數字型而言只需要比較一次就夠了。

g. 盡可能的使用 varchar/nvarchar 代替 char/nchar ,因為首先變長字段存儲空間小,可以節省存儲空間,其次對于查詢來說,在一個相對較小的字段內搜索效率顯然要高些。

h. 盡量使用表變量來代替臨時表。如果表變量包含大量數據,請注意索引非常有限(只有主鍵索引)。

i. 避免頻繁創建和刪除臨時表,以減少系統表資源的消耗。

j. 臨時表并不是不可使用,適當地使用它們可以使某些例程更有效,例如,當需要重復引用大型表或常用表中的某個數據集時。但是,對于一次性事件,最好使用導出表。

k. 在新建臨時表時,如果一次性插入數據量很大,那么可以使用 select into 代替 create table,避免造成大量 log ,以提高速度;如果數據量不大,為了緩和系統表的資源,應先create table,然后insert。

l. 如果使用到了臨時表,在存儲過程的最后務必將所有的臨時表顯式刪除,先 truncate table ,然后 drop table ,這樣可以避免系統表的較長時間鎖定。

2)SQL語句方面:

a. 應盡量避免在 where 子句中使用!=或<>操作符,否則將引擎放棄使用索引而進行全表掃描。

b. 應盡量避免在 where 子句中使用 or 來連接條件,否則將導致引擎放棄使用索引而進行全表掃描,如: select id from t where num=10 or num=20 可以這樣查詢: select id from t where num=10 union all select id from t where num=20

c. in 和 not in 也要慎用,否則會導致全表掃描,如: select id from t where num in(1,2,3) 對于連續的數值,能用 between 就不要用 in 了: select id from t where num between 1 and 3

d. 下面的查詢也將導致全表掃描: select id from t where name like ‘%abc%’

e. 如果在 where 子句中使用參數,也會導致全表掃描。因為SQL只有在運行時才會解析局部變量,但優化程序不能將訪問計劃的選擇推遲到運行時;它必須在編譯時進行選擇。然而,如果在編譯時建立訪問計劃,變量的值還是未知的,因而無法作為索引選擇的輸入項。如下面語句將進行全表掃描: select id from t where num=@num 可以改為強制查詢使用索引: select id from t with(index(索引名)) where num=@num

f. 應盡量避免在 where 子句中對字段進行表達式操作,這將導致引擎放棄使用索引而進行全表掃描。如: select id from t where num/2=100 應改為: select id from t where num=100*2

g. 應盡量避免在where子句中對字段進行函數操作,這將導致引擎放棄使用索引而進行全表掃描。如: select id from t where substring(name,1,3)=’abc’–name以abc開頭的id select id from t where datediff(day,createdate,’2005-11-30′)=0–‘2005-11-30’生成的id 應改為: select id from t where name like ‘abc%’ select id from t where createdate>=’2005-11-30′ and createdate<’2005-12-1′

h. 不要在 where 子句中的“=”左邊進行函數、算術運算或其他表達式運算,否則系統將可能無法正確使用索引。

i. 不要寫一些沒有意義的查詢,如需要生成一個空表結構: select col1,col2 into #t from t where 1=0 這類代碼不會返回任何結果集,但是會消耗系統資源的,應改成這樣: create table #t(…)

j. 很多時候用 exists 代替 in 是一個好的選擇: select num from a where num in(select num from b) 用下面的語句替換: select num from a where exists(select 1 from b where num=a.num)

k. 任何地方都不要使用 select * from t ,用具體的字段列表代替“*”,不要返回用不到的任何字段。

l. 盡量避免使用游標,因為游標的效率較差,如果游標操作的數據超過1萬行,那么就應該考慮改寫。

m. 盡量避免向客戶端返回大數據量,若數據量過大,應該考慮相應需求是否合理。

n. 盡量避免大事務操作,提高系統并發能力。

3)java方面:重點內容

a.盡可能的少造對象。

b.合理擺正系統設計的位置。大量數據操作,和少量數據操作一定是分開的。大量的數據操作,肯定不是ORM框架搞定的。,

c.使用jDBC鏈接數據庫操作數據

d.控制好內存,讓數據流起來,而不是全部讀到內存再處理,而是邊讀取邊處理;

e.合理利用內存,有的數據要緩存

如何優化數據庫,如何提高數據庫的性能?

解答:

1) 硬件調整性能 最有可能影響性能的是磁盤和網絡吞吐量,解決辦法擴大虛擬內存,并保證有足夠可以擴充的空間;把數據庫服務器上的不必要服務關閉掉;把數據庫服務器和主域服務器分開;把SQL數據庫服務器的吞吐量調為最大;在具有一個以上處理器的機器上運行SQL。

2)調整數據庫

若對該表的查詢頻率比較高,則建立索引;建立索引時,想盡對該表的所有查詢搜索操作, 按照where選擇條件建立索引,盡量為整型鍵建立為有且只有一個簇集索引,數據在物理上按順序在數據頁上,縮短查找范圍,為在查詢經常使用的全部列建立非簇集索引,能最大地覆蓋查詢;但是索引不可太多,執行UPDATE DELETE INSERT語句需要用于維護這些索引的開銷量急劇增加;避免在索引中有太多的索引鍵;避免使用大型數據類型的列為索引;保證每個索引鍵值有少數行。

3)使用存儲過程

應用程序的實現過程中,能夠采用存儲過程實現的對數據庫的操作盡量通過存儲過程來實現,因為存儲過程是存放在數據庫服務器上的一次性被設計、編碼、測試,并被再次使用,需要執行該任務的應用可以簡單地執行存儲過程,并且只返回結果集或者數值,這樣不僅可以使程序模塊化,同時提高響應速度,減少網絡流量,并且通過輸入參數接受輸入,使得在應用中完成邏輯的一致性實現。

4)應用程序結構和算法

建立查詢條件索引僅僅是提高速度的前提條件,響應速度的提高還依賴于對索引的使用。因為人們在

使用SQL時往往會陷入一個誤區,即太關注于所得的結果是否正確,特別是對數據量不是特別大的數據庫操作時,是否建立索引和使用索引的好壞對程序的響應速度并不大,因此程序員在書寫程序時就忽略了不同的實現方法之間可能存在的性能差異,這種性能差異在數據量特別大時或者大型的或是復雜的數據庫環境中(如聯機事務處理OLTP或決策支持系統DSS)中表現得尤為明顯。在工作實踐中發現,不良的SQL往往來自于不恰當的索引設計、不充份的連接條件和不可優化的where子句。在對它們進行適當的優化后,其運行速度有了明顯地提高!


發表評論 共有條評論
用戶名: 密碼:
驗證碼: 匿名發表
亚洲香蕉成人av网站在线观看_欧美精品成人91久久久久久久_久久久久久久久久久亚洲_热久久视久久精品18亚洲精品_国产精自产拍久久久久久_亚洲色图国产精品_91精品国产网站_中文字幕欧美日韩精品_国产精品久久久久久亚洲调教_国产精品久久一区_性夜试看影院91社区_97在线观看视频国产_68精品久久久久久欧美_欧美精品在线观看_国产精品一区二区久久精品_欧美老女人bb
久久久久五月天| 亚洲欧美中文日韩在线| 成人a视频在线观看| 欧美精品免费在线观看| 欧美高清视频在线观看| 色综合天天综合网国产成人网| 国产成人精品一区二区在线| 精品精品国产国产自在线| 欧美在线性视频| 青青草成人在线| 亚洲成年人影院在线| 中文字幕亚洲无线码a| 成人免费在线视频网址| 国产成人一区二区三区| 亚洲电影免费观看高清完整版| 91精品国产综合久久香蕉| 中文字幕日韩有码| 2021久久精品国产99国产精品| 日本一区二区三区四区视频| 亚洲精品av在线| 一本色道久久综合亚洲精品小说| 亚洲综合日韩在线| 亚洲国产成人爱av在线播放| 欧美天堂在线观看| 久久久噜久噜久久综合| 欧美极品少妇xxxxⅹ裸体艺术| 国产精品成人观看视频国产奇米| 中日韩美女免费视频网址在线观看| 精品国产欧美一区二区三区成人| 国产精品主播视频| 精品女厕一区二区三区| 国产精品影片在线观看| 日韩美女免费视频| 在线亚洲欧美视频| 伊人成人开心激情综合网| 欧洲成人免费视频| 亚洲一区二区三区乱码aⅴ蜜桃女| 亚洲精品小视频在线观看| 97色在线播放视频| 国产精品极品尤物在线观看| 久久久国产精品一区| 91免费看片网站| 国产91|九色| 国产精品国产亚洲伊人久久| 亚洲人成人99网站| 欧美成在线视频| 精品国产一区二区三区久久| 91av在线免费观看视频| 91视频免费在线| 亚洲欧美另类在线观看| 国产一区二区三区在线观看网站| 国产中文日韩欧美| 亚洲第一中文字幕| 久久夜色精品国产亚洲aⅴ| 国产成人亚洲综合91| 91精品综合久久久久久五月天| 91网站免费观看| 亚洲免费av网址| 亚洲视频在线免费看| 欧美一区二区三区……| 成人精品在线观看| 91综合免费在线| 亚洲人成电影网站色xx| 日本成人在线视频网址| 久久精品亚洲94久久精品| 亚洲免费视频一区二区| 久久99国产精品久久久久久久久| 亚洲免费视频网站| 欧美午夜精品久久久久久浪潮| 在线观看精品自拍私拍| 日韩精品在线观看网站| 久久久欧美一区二区| 欧日韩在线观看| 国产成人福利夜色影视| 久久成人综合视频| 在线精品播放av| 色诱女教师一区二区三区| 国产91色在线| 久久夜精品va视频免费观看| 欧美亚洲午夜视频在线观看| 日韩av一区二区在线| 国产精品久久av| 91视频免费网站| 国产精品夜色7777狼人| 日韩精品中文字幕在线播放| 久久精品久久精品亚洲人| 岛国av一区二区三区| 亚洲国产成人av在线| 日本成人黄色片| 国产91精品久久久久久久| 欧美一区二区三区图| 欧美视频中文字幕在线| 日韩av在线免费看| 精品小视频在线| 亚洲精品资源美女情侣酒店| 18性欧美xxxⅹ性满足| 91精品国产综合久久久久久蜜臀| 欧美巨乳美女视频| 亚洲国产另类 国产精品国产免费| 日韩成人av在线播放| 日韩av中文字幕在线免费观看| 国产69精品久久久久99| 国产精品中文字幕在线| 91中文精品字幕在线视频| 欧美三级免费观看| 欧美日韩一二三四五区| 国产一区二区三区日韩欧美| 成人字幕网zmw| 亚洲成人av中文字幕| 91欧美激情另类亚洲| 国产一区二区激情| 国产欧美精品一区二区三区介绍| 欧美一区二区.| 成人中心免费视频| 久久精品国产69国产精品亚洲| 久久视频在线免费观看| 亚洲欧美激情在线视频| 狠狠躁18三区二区一区| 日av在线播放中文不卡| 国产精品久久久久久中文字| 亚洲国产精品小视频| 国产一区二区激情| 粗暴蹂躏中文一区二区三区| 国产日韩精品在线| 久久精品人人爽| 久久男人av资源网站| 日韩第一页在线| 黑人巨大精品欧美一区二区三区| 欧美日韩加勒比精品一区| 不卡av在线播放| 最近2019免费中文字幕视频三| 亚洲欧美中文在线视频| 亚洲欧美中文日韩v在线观看| 午夜精品久久久久久久99热| 九九热这里只有精品6| 欧美丰满片xxx777| 97久久精品国产| 欧美老少做受xxxx高潮| 狠狠综合久久av一区二区小说| 亚洲经典中文字幕| 国产在线98福利播放视频| 亚洲理论电影网| 欧美视频在线观看 亚洲欧| 国产精品一区二区在线| 亚洲午夜久久久久久久| 91福利视频在线观看| 亚洲人成在线一二| 亚洲片av在线| 精品久久久久久久久久国产| 在线播放日韩欧美| 亚洲欧美国产精品专区久久| 国产裸体写真av一区二区| 亚洲天堂av在线免费| 欧美最顶级的aⅴ艳星| 亚洲欧美国产一本综合首页| 久久99国产精品自在自在app| 精品久久久久国产| 欧美人在线视频| www.欧美免费| 性亚洲最疯狂xxxx高清| 成人疯狂猛交xxx| 97精品久久久| 久久亚洲电影天堂| 伊人精品在线观看|