首页
/
每日頭條
/
生活
/
mysql數據空洞問題
mysql數據空洞問題
更新时间:2026-05-10 06:04:33

因為公司是做網絡安全的,所以會對平時設備收到的日志以對應的規則集進行解析然後存入數據庫。涉及大數據,與數據庫的交互量大概是3000條/秒,所以如果設備持續收日志的話,一般兩天時間數據庫對應表的存放的數據量大概就有5、6億條。

有一天我突然發現後台的日志信息一直再報“隊列已滿”的錯誤信息,到數據庫查詢相應表的數據發現其入庫的數據量也是停留在之前的數量(此時該表的數據量已經有大概1億多條了,該信息是為下文作鋪墊的)。按照以往的經驗我将可能會出現的問題挨個排查了一遍,發現都沒有問題,最後我在對應的數據庫查看了一下該庫的 線程運行 情況,情況如下

mysql數據空洞問題(解決MySQL滿屏Waitingfor)1

入庫的insert語句一共有四條線程在執行,就報了四個“Waiting for the table metadata lock”的錯誤,表居然被鎖了,試着kill掉,可是死了馬上就活了,剛開始也不懂,看到表被鎖了就沒有繼續往下看(最關鍵的信息被忽略了),後問了一下公司的前輩,上圖的表中我遺漏了這麼一項重要的信息:

mysql數據空洞問題(解決MySQL滿屏Waitingfor)2

經過前輩講解我才恍然大悟。

原來在數據批量入庫的時候,組内的另一個哥們發現前台對于日志信息的查詢速度有點慢,所以他的想法就是給表中他要查的字段手動加索引“Alter table 'sim_event add index ...'”,可是他犯另一個大錯誤就是這個表現在差不多有1億多數據,要想成功添加得等到猴年馬月了,而對于MySQL而言,如果進行一些Alter table等DDL操作時,如果該表上有未提交的事務就會報Waiting for the table metadata lock的錯誤。

最後重新啟動數據庫,kill掉不必要的線程(其實重啟就好了),入庫就正常了!!!

,
Comments
Welcome to tft每日頭條 comments! Please keep conversations courteous and on-topic. To fosterproductive and respectful conversations, you may see comments from our Community Managers.
Sign up to post
Sort by
Show More Comments
推荐阅读
無氰硬金是什麼意思
無氰硬金是什麼意思
1、3D硬金是通過電鍍的方式制作而成的黃金飾品,目前行業中分為兩種電鑄,有氰電鑄和無氰電鑄,有氰就是...
2026-05-10
西林區美食
西林區美食
西林區美食有彩雲醉猴頭、脊絲蕨菜、黃花菜蘑菇湯、南岔人參、毛榛子等。1、彩雲醉猴頭:菜品鮮香酥嫩,入口即化,實乃食之佳品。猴頭蘑是一種營養價值很高的食用菌類,含有豐富的蛋白質和多種維生素,味道也特别鮮美。将鮮猴頭蘑用水汆後入雞湯煮,上籠蒸透,放配料澆芡而成;另以蝦黃蝦肉蒸熟,作為彩雲環列猴頭周圍。2、脊絲蕨菜:色澤鮮豔、嫩脆潤滑而且營養豐富。蕨菜又名蕨兒菜、龍頭菜,在野菜中比較常見。蕨菜葉是卷曲狀
2026-05-10
撈面做法是什麼
撈面做法是什麼
1、蒜苔、西紅柿洗淨切好,蔥切蔥花,大蒜拍碎,用醋和食用鹽調汁備用,雞蛋攪散。2、砂鍋裡倒入油燒至八成熟,打入雞蛋炒好盛出,鍋裡倒入油燒至八成熟,倒入西紅柿和蒜苔翻炒至西紅柿出汁。3、倒入雞蛋攪散出鍋,開水之後放入面條煮沸,中間加兩次水繼續煮沸即可出鍋,将面條和鹵子盛入碗中加入蒜汁攪拌即可。
2026-05-10
魚缸養水的正确方法是什麼
魚缸養水的正确方法是什麼
1、空缸養水:這個也就是我們常說的開缸了,開缸前一定要将缸和各種濾材洗幹将,如果是新的話最好先加水泡幾天,等各種材料上的異味消失後再清洗好并加好水。對于這種情況如果不急的話将水加好後把氣泵、水泵開起來就好了,7-10天後可放魚(溫度高7天左右可以用),如果有益生菌的話,在放魚前兩天左右用點菌下去這樣...
2026-05-10
木地闆上有膠布粘過痕迹怎麼去除
木地闆上有膠布粘過痕迹怎麼去除
1、你要是想直接用拖布擦拭幹淨,那麼可能性幾乎為零,但是,用毛巾蘸取溫水敷在上面半小時,很輕松的就能夠将這些膠帶痕迹擦拭幹淨。2、你要是擔心水讓木地闆受損,找個電吹風對着這些痕迹吹幾下,用軟毛刷子就能夠很輕松的刷掉。3、找一塊棉布,蘸取一些牙膏,對着這些膠帶痕迹擦拭幾遍,然後用硬毛刷子刷幾次就能夠去...
2026-05-10
Copyright 2023-2026 - www.tftnews.com All Rights Reserved