日日操夜夜添-日日操影院-日日草夜夜操-日日干干-精品一区二区三区波多野结衣-精品一区二区三区高清免费不卡

公告:魔扣目錄網為廣大站長提供免費收錄網站服務,提交前請做好本站友鏈:【 網站目錄:http://www.ylptlb.cn 】, 免友鏈快審服務(50元/站),

點擊這里在線咨詢客服
新站提交
  • 網站:51998
  • 待審:31
  • 小程序:12
  • 文章:1030137
  • 會員:747

要是問大家,知道怎么從MySQL數據庫中drop掉業務表,很多人肯定會說,so easy,用drop table t_test語句不就完事了,這是初生牛犢不怕虎,你要是如此簡單,去線上業務庫中drop掉一張1TB大小的表,造成長時間的業務無法訪問數據庫,更嚴重,導致數據庫崩潰,宕機都是可能的。

下面就先聊聊,drop table語句背后的事情,語句執行之后,主要做2兩件事情

1、清除Buffer Pool緩沖

在drop table時,innodb引擎會清理該表在每個buffer pool實例中中對應的數據塊頁面,為了避免對系統的影響,這里的清除操作并不是真正的flush,而是將涉及到的頁面從flush隊列中摘除。但在摘除過程中,刪除進程會持有每個buffer pool的全局鎖,然后搜索這個buffer pool里對應的頁面以便從flush list中刪除。如果在buffer pool中需要被搜索并刪除的頁面過多,那么遍歷時間就會增大,這就導致了其他事務操作被阻塞,嚴重時可導致數據庫鎖住。

在這里還需要注意一件事情,如果數據庫的buffer pool設置的很大,就會導致遍歷時間變長
清理buffer pool時,還包含清理AHI包含此表的數據,AHI的功能在這里就不多說了,主要是當b+tree的層級變高時,為避免b+tree逐層搜索,AHI能根據某個檢索條件,直接查詢到對應的數據頁,跳過逐層定位的步驟。其次AHI會占用1/16的buffer pool的大小,如果線上表數據不是特別大,不是超高并發,不建議將開啟AHI,可以考慮關閉AHI功能

mysql> SHOW GLOBAL VARIABLES LIKE 'innodb_adaptive_hash_index';
+----------------------------+-------+
| Variable_name                   | Value |
+----------------------------+-------+
| innodb_adaptive_hash_index | ON    |
+----------------------------+-------+
1 row in set (0.01 sec)

mysql> SET GLOBAL innodb_adaptive_hash_index=OFF;
Query OK, 0 rows affected (0.00 sec)

mysql> SHOW GLOBAL VARIABLES LIKE 'innodb_adaptive_hash_index';
+----------------------------+-------+
| Variable_name                   | Value |
+----------------------------+-------+
| innodb_adaptive_hash_index | OFF   |
+----------------------------+-------+
1 row in set (0.01 sec)

2、刪除對應的磁盤數據文件ibd

在刪除數據文件時,如果數據文件過大,刪除過程會產生大量的IO并耗費更多的時間,造成磁盤IO開銷飆升,CPU負載過高,影響其他程序運行。我的一個好伙伴,就曾在線上庫刪除了一張1TB大小的表,結果20分鐘,數據庫無響應,最后庫崩潰,重啟了。

既然知道drop table做了2件事情,那就針對以上2個事情進行優化

在清除Buffer Pool緩沖上,為減少當個buffer pool的大小,可以合理設置innodb_buffer_pool_instances參數,減少buffer pool數據塊列表掃描時間,同時關閉AHI功能

在步驟2上,可以巧妙的利用linux的硬連接特性,延遲刪除真正的物理文件。
首先看看linux系統的硬鏈接示意圖

優雅的drop掉mysql庫中1TB大表

 

當多個文件名同時指向同一個INODE時,這個INODE的引用數N>1, 刪除其中任何一個文件名都會很快.因為其直接的物理文件塊沒有被刪除.只是刪除了一個指針而已;當INODE的引用數N=1時, 刪除文件需要去把這個文件相關的所有數據塊清除,所以會比較耗時;

如果給數據庫表的.ibd文件創建一個硬鏈接,當刪除表時,刪除物理文件時,其實刪除的就是物理文件的一個指針,所以刪除操作響應速度會非常快,大約不到1秒左右

下面就來演示一下具體的操作

先創建表文件的硬鏈接
ln t_test.ibd t_test.ibd.bak
刪除表
drop table t_test;

最后就是要真正刪除掉物理文件,釋放文件所占用的磁盤空間,那么問題來了,如果優雅的刪除物理文件呢,在這里推薦大家coreutils工具集中的truncate命令

當然需要你先安裝相關的軟件包

wget http://ftp.gnu.org/gnu/coreutils/coreutils-8.29.tar.xz

使用非root進行解壓
tar -xvJf coreutils-8.29.tar.xz
cd coreutils-8.29
./configure
make
使用root進行make install

安裝好之后,就可以寫一個腳本,非常優雅的分布刪除大文件,${i}G 表示,每次刪除10G

#!/bin/bash

TRUNCATE=/usr/local/bin/truncate
for i in `seq 2194 -10 10 `; 
do 
  sleep 2
  $TRUNCATE -s ${i}G /data/mysql/t_test.ibd.hdlk 
done
rm -rf /data/mysql/t_test.ibd.hdlk ;

最后,給大家一個建議,不要在業務高峰期做drop table操作,一定要在業務低峰期做。

分享到:
標簽:mysql
用戶無頭像

網友整理

注冊時間:

網站:5 個   小程序:0 個  文章:12 篇

  • 51998

    網站

  • 12

    小程序

  • 1030137

    文章

  • 747

    會員

趕快注冊賬號,推廣您的網站吧!
最新入駐小程序

數獨大挑戰2018-06-03

數獨一種數學游戲,玩家需要根據9

答題星2018-06-03

您可以通過答題星輕松地創建試卷

全階人生考試2018-06-03

各種考試題,題庫,初中,高中,大學四六

運動步數有氧達人2018-06-03

記錄運動步數,積累氧氣值。還可偷

每日養生app2018-06-03

每日養生,天天健康

體育訓練成績評定2018-06-03

通用課目體育訓練成績評定