亚洲香蕉成人av网站在线观看_欧美精品成人91久久久久久久_久久久久久久久久久亚洲_热久久视久久精品18亚洲精品_国产精自产拍久久久久久_亚洲色图国产精品_91精品国产网站_中文字幕欧美日韩精品_国产精品久久久久久亚洲调教_国产精品久久一区_性夜试看影院91社区_97在线观看视频国产_68精品久久久久久欧美_欧美精品在线观看_国产精品一区二区久久精品_欧美老女人bb

首頁 > 數據庫 > SQL Server > 正文

SQL Server統計信息更新時采樣百分比對數據預估準確性的影響詳解

2024-08-31 01:05:26
字體:
來源:轉載
供稿:網友

為什么要寫統計信息

最近看到園子里有人寫統計信息,樓主也來湊熱鬧。

話說經常做數據庫的,尤其是做開發的或者優化的,統計信息造成的性能問題應該說是司空見慣。

當然解決辦法也并非一成不變,“一招鮮吃遍天”的做法已經行不通了(題外話:整個時代不都是這樣子嗎)

當然,還是那句話,既然寫了就不能太俗套,寫點不一樣的,本文通過分析一個類似實際案例來解讀統計信息的更新的相關問題。

對于實際問題,不但要解決問題,更重要的是要從理論上深入分析,才能更好地駕馭數據庫。

何時更新統計信息

(1)查詢執行緩慢,或者查詢語句突然執行緩慢。這種場景很可能是由于統計信息沒有及時更新而遭遇了參數嗅探的問題。

(2)當大量數據更新(INSERT/DELETE/UPDATE)到升序或者降序的列時,這種情況下,統計信息直方圖可能沒有及時更新。

(3)建議在除索引維護(當你重建、整理碎片或者重組索引時,數據分布不會改變)外的維護工作之后更新統計信息。

(4)數據庫的數據更改頻繁,建議最低限度每天更新一次統計信息。數據倉庫可以適當降低更新統計信息的頻率。

(5)當執行計劃出現統計信息缺失警告時,需要手動建立統計信息

統計信息基礎

首先說一個老掉牙的話題,統計信息的更新閾值:

1,表格從沒有數據變成有大于等于1條數據。

2,對于數據量小于500行的表格,當統計信息的第一個字段數據累計變化量大于500以后。

3,對于數據量大于500行的表格,當統計信息的第一個字段數據累計變化量大于500 + (20%×表格數據總量)以后。

SQLServer,統計信息,數據預估

做個查詢,觸發統計信息更新,rowmodct歸0(繼續累積直到下一個觸發的閾值,觸發更新之后再次歸0)

SQLServer,統計信息,數據預估

關于統計信息“過期”的問題

下面開始正文,網絡上很多關于統計信息的文章,提到統計信息,很多都是統計信息過期的問題,然后跟新之后怎么怎么樣

尤其在觸發統計信息自動更新閾值的第三個區間:也就是說數據累計變化超過20%之后才能自動觸發統計信息的更新

這一點對于大表來說通常影響是比較大的,比如1000W的表,變化超過20%也+500也就是200W+500行之后才觸發統計信息更新,這個閾值區間的自動觸發閾值,絕大多數情況是不能接受的,于是對于統計信息的診斷就變成了是否“過期”

SQLServer,統計信息,數據預估

判斷統計信息是否過期,然后通過更新統計信息來促使執行計劃更加準確地預估行數,這一點本無可厚非

但是,問題也就出在這里了:那么怎么更新統計信息?一成不變的做法是否可行,這才是問題的重點。

當然肯定有人說,我就是按照默認方式更新的,更新完之后SQL也變得更加優化了什么的

通過update statistics TableName StatisticName更新某一個索引的統計信息,

或者update statistics TableName更新全表的統計信息

這種情況下往往是小表上可以這么做,當然對于大表或者小表沒有一個標準值,一切要結合事實來說明問題

下面開始本文的主題:

抽象并簡化出業務中的一個實際案例,創建這么一張表,類似于訂單和訂單明細表(主子表),

這里你可以想象成是一個訂單表的子表,Id字段是唯一的,有一個ParentID字段,是非唯一的,

ParentID類似于主表的Id,測試數據按照一個主表Id對應50條子表明細的規律插入數據

CREATE TABLE [dbo].[TestStaitisticsSample]( [Id] [int] IDENTITY(1,1) NOT NULL, [ParentId] [int] NULL, [OtherColumn] [varchar](50) NULL) declare @i int=0while(@i<100000000)begin insert into [TestStaitisticsSample](ParentId,OtherColumn)values(@i,NEWID()) /* 中間插入50條,也即一個主表Id對應50條子表明細 */ insert into [TestStaitisticsSample](ParentId,OtherColumn)values(@i,NEWID()) set @i=@i+1endgocreate nonclustered index [idx_ParentId] ON [dbo].[TestStaitisticsSample]( [ParentId] )go

本來打算插入1億條的,中間我讓他執行我睡午覺去了,醒來之后發現SSMS掛掉了,掛掉了算了,數據也接近1億了,能說明問題就夠了

現在數據分布的非常明確,就是一個ParentId有50條數據,這一點首先要澄清。

測試數據寫入,以及所創建完成之后來更新idx_ParentId 索引上的統計信息,就按照默認的方式來更新,然后來觀察統計信息

默認方式更新統計信息(未指定采樣密度)

表里現在是8000W多一點記錄,默認更新統計信息時取樣行數是462239行,那么這個統計信息靠譜嗎?

上面說了,造數據的時候,我一個ParentId對應的是50行記錄,這一點非常明確,他這里統計出來的多少?

1,對于取樣的RANG_HI_Key值,比如51632,預估了862.212行

2,對于AVG_RANG_ROW,比如45189到51632之間的每個Id的數據對應的數據行,預估是6682.490行

之前造數據的時候每個Id都是50行,這里的預估靠譜嗎,這個誤差是無法接受的,

很多時候,對于大表,采用默認(未指定采樣密度)的情況下,默認的采樣密度并不足以準確地描述數據分布情況

SQLServer,統計信息,數據預估

指定一個采樣密度的方式更新統計信息(20%采樣)

這一次用20%的采樣密度,可以看到取樣的行數是15898626行

1,對于取樣的RANG_HI_Key值,比如216305,他給我預估了24.9295行

2,對于AVG_RANG_ROW,比如186302到216305之間的每個Id的行數,預估是197.4439行

觀察比如上面默認的取樣密度,這一次不管是RANG_HI_Key還是AVG_RANG_ROW得預估,都有不一個非常高的下降,開始趨于接近于真實的數據分布(每個Id有50行數據)

整體上看,但是這個誤差還是比較大的,如果繼續提高采樣密度,看看有什么變化?

SQLServer,統計信息,數據預估

指定一個采樣密度的方式更新統計信息(70%采樣) 

這一次用70%的采樣密度,可以看到取樣行數是55962290行

1,對于取樣的RANG_HI_Key值,比如1978668,預估了71.15906行

2,對于AVG_RANG_ROW,比如1124024到1978668之間的每個Id,預估為61.89334行

可以說,對于絕大多數值得預估(AVG_RANG_ROW),都愈發接近于真實值

  SQLServer,統計信息,數據預估

指定一個采樣密度的方式更新統計信息(100%采樣)

可以看到,取樣行數等于總行數,也就是所謂的全部(100%)取樣

看一下預估結果:

比如Id=3981622,預估是50行,3981622與4131988之間的Id的行數,預估為49.99874行,基本上等于真實數據分布

這個就不做過多解釋了,基本上跟真實值是一樣的,只是AVG_RANG_ROW有一點非常非常小的誤差。

SQLServer,統計信息,數據預估

取樣密度高低與統計信息準確性的關系

至于為什么默認取樣密度和較低取樣密度情況下,誤差很大的情況我簡單解釋一下,也非常容易理解,因為“子表”中存儲主表ID的ParentId值允許重復,在存在重復值的情況下,如果采樣密度不夠,極有可能造成“以偏概全”的情況

比如對10W行數據取樣1W行,原本10W行數劇中有2000個不重復的ParentId值,如果是10%的取樣,在1W行取樣數據中,因為密度不夠大,只找到了20個不重復的ParentId值,那么就會認為每一行ParentId對應500行數據,這根實際的分布的每個ParentId有一個非常大的誤差范圍

如果提高采樣密度,那么這個誤差就會越來越小?! ?/p>

更新統計信息的時候,高比例的取樣是否可?。尚校?/p>

因此在觀察統計信息是否過期,決定更新統計信息的時候,一定要注意取樣的密度,就是說表中有多少行數據,統計信息更新的時候取了多少采樣行,密度有多高。

當然,肯定有人質疑,那你說采樣密度越高,也就是取樣行數越高越準確,那么我就100%取樣。

這樣行不行?

還要分情況看,對于幾百萬或者十幾萬的小表來說,當然沒有問題,這也是為什么數據庫越小,表數據越少越容易掩蓋問題的原因。

對于大表,上億的,甚至是十幾億的,你按照100%采樣試一試? 

舉個實際例子:

我這里對一個稍微大一點的表做個全表統計信息的更新,測試環境,服務器沒負載,存儲是比普通的機械硬盤要強很多的SAN存儲

采用full scan,也就是100%采樣的更新操作,看一下,僅僅這一樣表的update statistic操作就花費了51分鐘

試想一下,對一個數百GB甚至數TB的庫來說,你敢這么搞一下。

  SQLServer,統計信息,數據預估

扯一句,這個中秋節過的,折騰了大半天,話說做測試過程中電腦有開始有點卡,

做完測試之后停掉SQLServer服務,瞬間內存釋放了7個G,可見這些個操作還是比較耗內存的

 SQLServer,統計信息,數據預估  

總結:

本文通過對于某些場景下,在對較大的表的索引統計信息更新時,采樣密度的分析,闡述了不同采樣密度下,對統計信息預估的準確性的影響。

當然對于小表,一些都好說。

隨著單表數據量的增加,統計信息的更新策略也要做相應的調整,

不光要看統計信息是否“過期”,更重要的是注意統計信息更新時究竟取樣了全表的多少行數據做統計。

對于大表,采用FULL SCAN或者100%采樣往往是不可行的,這時候就需要做出權衡,做到既能準確地預估,又能夠以合理的代價執行。

好了,以上就是這篇文章的全部內容了,希望本文的內容對大家的學習或者工作具有一定的參考學習價值,如果有疑問大家可以留言交流,謝謝大家對VeVb武林網的支持


注:相關教程知識閱讀請移步到MSSQL教程頻道。
發表評論 共有條評論
用戶名: 密碼:
驗證碼: 匿名發表
亚洲香蕉成人av网站在线观看_欧美精品成人91久久久久久久_久久久久久久久久久亚洲_热久久视久久精品18亚洲精品_国产精自产拍久久久久久_亚洲色图国产精品_91精品国产网站_中文字幕欧美日韩精品_国产精品久久久久久亚洲调教_国产精品久久一区_性夜试看影院91社区_97在线观看视频国产_68精品久久久久久欧美_欧美精品在线观看_国产精品一区二区久久精品_欧美老女人bb
国语自产偷拍精品视频偷| 欧美成人在线网站| 欧美高清视频免费观看| 一区二区三区视频免费在线观看| 久久婷婷国产麻豆91天堂| 国产精品老女人视频| 日本国产精品视频| 91国产精品91| 国产aaa精品| 日本欧美中文字幕| 欧美性猛交xxxx免费看| 日日摸夜夜添一区| 日韩欧美在线国产| 久久久人成影片一区二区三区观看| 亚洲欧美精品中文字幕在线| 在线视频日韩精品| 91亚洲精华国产精华| 国产一区二区三区在线观看视频| 97热在线精品视频在线观看| 国产精品久久久久久久久久免费| 国产日韩欧美在线视频观看| 欧美黄色片免费观看| 久久久成人av| 国产美女精品视频| 国产91精品视频在线观看| 国产热re99久久6国产精品| 亚洲国产天堂网精品网站| 国产精品自产拍在线观看| 欧美日韩电影在线观看| 国产99久久精品一区二区| 久久影视电视剧凤归四时歌| 午夜精品在线观看| 在线播放亚洲激情| 欧美视频精品一区| 亚洲精选在线观看| 亚洲欧洲国产精品| 久久免费视频这里只有精品| 国内成人精品视频| 一区二区三区精品99久久| 欧美激情中文字幕在线| 亚洲第一福利网| 国产精品美女午夜av| 国产精品久久久久免费a∨| 亚洲欧美成人一区二区在线电影| 欧美日韩亚洲一区二区三区| 欧美精品在线网站| 国产一区二区色| 国产欧美久久一区二区| 美女国内精品自产拍在线播放| 成人看片人aa| 欧美性猛交xxxxx水多| 国产成人精品在线观看| 欧美成人一区二区三区电影| 国产精品av网站| 97精品视频在线| 九九热这里只有在线精品视| 国产精品极品尤物在线观看| 久久精品国产96久久久香蕉| 欧美性猛交99久久久久99按摩| 久久久久久久97| 91免费电影网站| 日韩av中文字幕在线播放| 97热精品视频官网| 国产精品18久久久久久首页狼| 国产中文字幕日韩| 国产婷婷97碰碰久久人人蜜臀| 亚洲精品自拍第一页| 欧美精品一本久久男人的天堂| 98精品国产自产在线观看| www日韩中文字幕在线看| 国产精品一区=区| 国产国语videosex另类| 亚洲女人天堂网| 亚洲成人黄色在线| 91精品中国老女人| 国产精品久久久久久久久久久久| 欧美日本亚洲视频| 欧美性生交大片免费| 日韩成人高清在线| www.日本久久久久com.| 国产精品视频一区二区高潮| 欧美激情区在线播放| 亚洲香蕉伊综合在人在线视看| 久久精品中文字幕| 色一情一乱一区二区| 日韩中文娱乐网| 日韩精品小视频| 久久精品国产亚洲一区二区| 成人网中文字幕| 免费91在线视频| 亚洲国产精品成人精品| 俺去亚洲欧洲欧美日韩| 狠狠做深爱婷婷久久综合一区| 欧美风情在线观看| 久久精品中文字幕免费mv| 国产亚洲精品美女久久久| 精品久久香蕉国产线看观看亚洲| 日韩视频亚洲视频| 亚洲综合精品伊人久久| 欧美日韩在线免费| 国产美女高潮久久白浆| 国产大片精品免费永久看nba| 日本精品久久久久久久| 亚洲精品永久免费精品| 久久亚洲精品国产亚洲老地址| 久久久久久成人精品| 中文字幕亚洲一区二区三区| 欧美大片在线免费观看| 久久久中精品2020中文| 久久久精品视频在线观看| 91免费看片网站| 97视频在线播放| 精品国内亚洲在观看18黄| 亚洲最新av网址| 日韩精品免费视频| 久久精品国产视频| 亚洲精品美女视频| 亚洲天堂成人在线视频| 欧美在线一级视频| 国产区精品视频| 日韩欧美大尺度| 欧美美最猛性xxxxxx| 97国产精品视频人人做人人爱| 欧美一二三视频| 91香蕉嫩草神马影院在线观看| 97在线视频免费| 亚洲第一免费网站| 性色av一区二区三区| 日韩精品黄色网| 精品视频在线播放色网色视频| 国产精品日本精品| 中文字幕日韩av电影| 久久久这里只有精品视频| 色老头一区二区三区| 一区二区三区高清国产| 国产精品一区av| 国产一区二区三区在线看| 亚洲欧洲日本专区| 在线精品国产成人综合| 久久免费福利视频| 中文字幕亚洲一区二区三区五十路| 久久国产精品久久国产精品| 在线观看欧美成人| 高清一区二区三区四区五区| 国产一区二区三区丝袜| 色偷偷88888欧美精品久久久| 亚洲综合视频1区| 97超碰蝌蚪网人人做人人爽| 欧美成人免费一级人片100| 亚洲国产精品悠悠久久琪琪| 精品日韩中文字幕| 亚洲区中文字幕| 丰满岳妇乱一区二区三区| 亚洲色图第三页| 色七七影院综合| 91成人在线观看国产| 欧美日韩免费区域视频在线观看| 波霸ol色综合久久| 国产精品视频播放| 一本色道久久88综合日韩精品| 国产精品美女呻吟| 亚洲91av视频| 精品国产区一区二区三区在线观看| 狠狠色狠狠色综合日日小说|