如何提高百萬條的資料庫查詢速度

巴扎黑
發布: 2017-05-22 14:05:42
原創
1864 人瀏覽過

1、對查詢進行最佳化,應盡量避免全表掃描,首先應考慮在 where 及 order by 涉及的欄位上建立索引。

2、應盡量避免在where 子句中對欄位進行null 值判斷,否則將導致引擎放棄使用索引而進行全表掃描,如:  

select id from t where num is null
登入後複製

可以在num上設置預設值0,確保表中num列沒有null值,然後這樣查詢: 

select id from t where num=0
登入後複製

3、應盡量避免在 where 子句中使用!=或<>操作符,否則將引擎放棄使用索引而進行全表掃描。

4.應盡量避免在where 子句中使用or 來連接條件,否則將導致引擎放棄使用索引而進行全表掃描,如:  

select id from t where num=10 or num=20
登入後複製

可以這樣查詢:  

select id from t where num=10
  union all
  select id from t where num=20
登入後複製

5、in 和not in 也要慎用,否則會導致全表掃描,如:  

select id from t where num in(1,2,3)
登入後複製

對於連續的數值,能用between 就不要用in 了:

select id from t where num between 1 and 3
登入後複製

6.下面的查詢也會導致全表掃描:  

select id from t where name like &#39;%abc%&#39;
登入後複製

若要提高效率,可以考慮全文檢索。

7.如果在 where 子句中使用參數,也會導致全表掃描。因為SQL只有在運行時才會解析局部變量,但最佳化程序不能將存取計劃的選擇推遲到運行時;它必須在編譯時進行選擇。然而,如果在編譯時建立存取計劃,變數的值還是未知的,因而無法作為索引選擇的輸入項。如下面語句將進行全表掃描:  

select id from t where num=@num
登入後複製

可以改為強制查詢使用索引:  

select id from t with(index(索引名)) where num=@num
登入後複製

8、應盡量避免在 where 子句中對欄位進行表達式操作,這將導致引擎放棄使用索引而進行全表掃描。如: 

 select id from t where num/2=100
登入後複製

應改為: 

select id from t where num=100*2
登入後複製

9.應盡量避免在where子句中對欄位進行函數操作,這將導致引擎放棄使用索引而進行全表掃描。如:  

select id from t where substring(name,1,3)=&#39;abc&#39;--name以abc开头的id
  select id from t where datediff(day,createdate,&#39;2005-11-30&#39;)=0--‘2005-11-30’生成的id
登入後複製

  應改為:  

select id from t where name like &#39;abc%&#39;
  select id from t where createdate>=&#39;2005-11-30&#39; and createdate<&#39;2005-12-1&#39;
登入後複製

10、不要在 where 子句中的「=」左邊進行函數、算術運算或其他表達式運算,否則系統將可能無法正確使用索引。

11、在使用索引欄位作為條件時,如果該索引是複合索引,那麼必須使用到該索引中的第一個欄位作為條件時才能保證系統使用該索引,否則該索引將不會被使用,並且應盡可能的讓欄位順序與索引順序相符。

12.不要寫一些沒有意義的查詢,如需要產生一個空表結構:  

select col1,col2 into #t from t where 1=0
登入後複製
  這類程式碼不會回傳任何結果集,但是會消耗系統資源的,應改成這樣: 

 create table #t(...)
登入後複製
13.很多時候用 exists 取代 in 是個好的選擇: 

 select num from a where num in(select num from b)
登入後複製
  用下面的語句取代:  

select num from a where exists(select 1 from b where num=a.num)\
登入後複製
14、並不是所有索引對查詢都有效,SQL是根據表中資料來進行查詢優化的,當索引列有大量資料重複時,SQL查詢可能不會去利用索引,如一表中有字段sex,male、 female幾乎各一半,那麼即使在sex上建了索引也對查詢效率起不了作用。

15.索引並不是越多越好,索引固然可以提高對應的select 的效率,但同時也降低了insert 及update 的效率,因為insert 或update 時有可能會重建索引,所以怎麼建索引需要慎重考慮,視具體情況而定。一個表的索引數最好不要超過6個,若太多則應考慮一些不常使用到的列上建的索引是否有必要。

16.應盡可能的避免更新 clustered 索引資料列,因為 clustered 索引資料列的順序就是表記錄的實體儲存順序,一旦該列值改變將導致整個表記錄的順序的調整,會耗費相當大的資源。若套用系統需要頻繁更新 clustered 索引資料列,那麼需要考慮是否應將索引建置為 clustered 索引。

17.盡量使用數字型字段,若只含數值資訊的字段盡量不要設計為字元型,這會降低查詢和連接的效能,並會增加儲存開銷。這是因為引擎在處理查詢和連接時會逐個比較字串中每一個字符,而對於數字型而言只需要比較一次就夠了。 ###

18.盡可能的使用 varchar/nvarchar 代替 char/nchar ,因為首先變長字段存儲空間小,可以節省存儲空間,其次對於查詢來說,在一個相對較小的字段內搜索效率顯然要高些。

19.任何地方都不要使用 select * from t ,用特定的欄位清單取代“*”,不要傳回任何用不到的欄位。

20.盡量使用表變數來代替臨時表。如果表變數包含大量數據,請注意索引非常有限(只有主鍵索引)。

21.避免頻繁建立和刪除臨時表,以減少系統表資源的消耗。

22.臨時表並不是不可用,適當地使用它們可以使某些例程更有效,例如,當需要重複引用大型表或常用表中的某個資料集時。但是,對於一次性事件,最好使用匯出表。

23.在新建臨時表時,如果一次性插入資料量很大,那麼可以使用select into 代替create table,避免造成大量log ,以提高速度;如果資料量不大,為了緩和系統表的資源,應先create table,然後insert。

24.如果使用到了臨時表,在預存程序的最後務必將所有的臨時表明確刪除,先 truncate table ,然後 drop table ,這樣可以避免系統表的較長時間鎖定。

25.盡量避免使用遊標,因為遊標的效率較差,如果遊標操作的資料超過1萬行,那麼就應該考慮改寫。

26、使用基於遊標的方法或臨時表方法之前,應先尋找基於集的解決方案來解決問題,基於集的方法通常更有效。

27.與臨時表一樣,遊標並不是不可用。對小型資料集使用 FAST_FORWARD 遊標通常要優於其他逐行處理方法,尤其是在必須引用幾個表才能獲得所需的資料時。在結果集中包含「合計」的例程通常比使用遊標執行的速度快。如果開發時間允許,基於遊標的方法和基於集的方法都可以嘗試一下,看看哪一種方法的效果更好。

28.在所有的預存程序和觸發器的開始處設定 SET NOCOUNT ON ,在結束時設定 SET NOCOUNT OFF 。無需在執行預存程序和觸發器的每個語句後向客戶端發送 DONE_IN_PROC 訊息。

29.盡量避免大事務操作,提高系統並發能力。

30.盡量避免向客戶端傳回大數據量,若資料量過大,應考慮相應需求是否合理。

【相關推薦】

1. Mysql免費影片教學

2. 5個常犯的資料庫設計錯誤

3. 怎麼讓Mysql在保持現有內容的基礎上在後面增加內容的sql語句

4. 對MySQL常用SQL語句寫法總結

5. 使用MySQL產生隨機數字並且連接字串的方法詳解

以上是如何提高百萬條的資料庫查詢速度的詳細內容。更多資訊請關注PHP中文網其他相關文章!

來源:php.cn
本網站聲明
本文內容由網友自願投稿,版權歸原作者所有。本站不承擔相應的法律責任。如發現涉嫌抄襲或侵權的內容,請聯絡admin@php.cn
熱門教學
更多>
最新下載
更多>
網站特效
網站源碼
網站素材
前端模板