日本免费精品_最新日韩一区_亚洲视频一区在线_a在线视频观看_天天射夜夜骑_粉嫩av一区二区三区_欧美中日韩免费视频_综合图区欧美_国内精品美女在线观看_午夜精品久久久久久久男人的天堂

首頁 > 數(shù)據(jù)庫 > MySQL > 正文

mysql自增id超大問題的排查與解決

2024-07-25 19:09:23
字體:
供稿:網(wǎng)友

引言

小A正在balabala寫代碼呢,DBA小B突然發(fā)來了一條消息,“快看看你的用戶特定信息表T,里面的主鍵,也就是id/268849.html">自增id,都到16億了,這才多久,在這樣下去過不了多久主鍵就要超出范圍了,插入就會失敗,balabala......”

我記得沒有這么多,最多1k多萬,count了下,果然是1100萬。原來運維是通過auto_increment那個值看的,就是說,表中有大量的刪除插入操作,但是我大部分情況都是更新的,怎么會這樣?

下面話不多說了,來一起看看詳細的介紹吧

問題排查

這張表是一個簡單的接口服務(wù)在使用,每天大數(shù)據(jù)會統(tǒng)計一大批信息,然后推送給小A,小A將信息更新到數(shù)據(jù)庫中,如果是新數(shù)據(jù)就插入,舊數(shù)據(jù)就更新之前的數(shù)據(jù),對外接口就只有查詢了。

很快,小A就排查了一遍自己的代碼,沒有刪除的地方,也沒有主動插入、更新id的地方,怎么會這樣呢?難道是小B的原因,也不太可能,DBA那邊兒管理很多表,有問題的話早爆出來了,但問題在我這里哪里也沒頭緒。

小A又仔細觀察了這1000多萬已有的數(shù)據(jù),將插入時間、id作為主要觀察字段,很快,發(fā)現(xiàn)了個問題,每天第一條插入的數(shù)據(jù)總是比前一天多1000多萬,有時候遞增的多,有時候遞增的少,小A又將矛頭指向了DBA小B,將問題又給小B描述了一遍。

小B問了小A,“你是是不是用了REPLACE INTO ...語句”,這是怎么回事呢,原來REPLACE INTO ...會對主鍵有影響。

REPLACE INTO ...對主鍵的影響

假設(shè)有一張表t1:

CREATE TABLE `t1` (`id` int(10) unsigned NOT NULL AUTO_INCREMENT COMMENT 'ID,自增',`uid` bigint(20) unsigned NOT NULL DEFAULT '0' COMMENT '用戶uid',`name` varchar(20) NOT NULL DEFAULT '' COMMENT '用戶昵稱',PRIMARY KEY (`id`),UNIQUE KEY `u_idx_uid` (`uid`)) ENGINE=InnoDB DEFAULT CHARSET=utf8 COMMENT='測試replace into';

如果新建這張表,執(zhí)行下面的語句,最后的數(shù)據(jù)記錄如何呢?

insert into t1 values(NULL, 100, "test1"),(NULL, 101, "test2");replace into t1 values(NULL, 100, "test3");

mysql,自增,id,超大

原來,REPLACE INTO ...每次插入的時候如果唯一索引對應(yīng)的數(shù)據(jù)已經(jīng)存在,會刪除原數(shù)據(jù),然后重新插入新的數(shù)據(jù),這也就導(dǎo)致id會增大,但實際預(yù)期可能是更新那條數(shù)據(jù)。

小A說:“我知道replace是這樣,所有既沒有用它”,但還是又排查了一遍,確實不是自己的問題,沒有使用REPLACE INTO ...,

小A又雙叒叕仔細的排查了一遍,還是沒發(fā)現(xiàn)問題,就讓小B查下binlog日志,看看是不是有什么奇怪的地方,查了之后還是沒發(fā)現(xiàn)問題,確實存在跳躍的情況,但并沒有實質(zhì)性的問題。

下圖中@1的值對應(yīng)的是自增主鍵id,用(@2, @3)作為唯一索引

mysql,自增,id,超大

后來過了很久,小B給小A指了個方向,小A開始懷疑自己的插入更新語句INSERT ... ON DUPLICATE KEY UPDATE ...了,查了許久,果然是這里除了問題。

INSERT ... ON DUPLICATE KEY UPDATE ...對主鍵的影響

這個語句跟REPLACE INTO ...類似,不過他并不會變更該條記錄的主鍵,還是上面t1這張表,我們執(zhí)行下面的語句,執(zhí)行完結(jié)果是什么呢?

insert into t1 values(NULL, 100, "test4") on duplicate key update name = values(name);

mysql,自增,id,超大

沒錯,跟小A預(yù)想的一樣,主鍵并沒有增加,而且name字段已經(jīng)更新為想要的了,但是執(zhí)行結(jié)果有條提示,引起了小A的注意

No errors; 2 rows affected, taking 10.7ms

明明更新了一條數(shù)據(jù),為什么這里的影響記錄條數(shù)是2呢?小A,又看了下目前表中的auto_increment

CREATE TABLE `t1` (`id` int(10) unsigned NOT NULL AUTO_INCREMENT COMMENT 'ID,自增',`uid` bigint(20) unsigned NOT NULL DEFAULT '0' COMMENT '用戶uid',`name` varchar(20) NOT NULL DEFAULT '' COMMENT '用戶昵稱',PRIMARY KEY (`id`),UNIQUE KEY `u_idx_uid` (`uid`)) ENGINE=InnoDB AUTO_INCREMENT=5 DEFAULT CHARSET=utf8 COMMENT='測試replace into';

竟然是5`,這里本應(yīng)該是4的。

也就是說,上面的語句,會跟REPLACE INTO ...類似的會將自增ID加1,但實際記錄沒有加,這是為什么呢?

查了資料之后,小A得知,原來,mysql主鍵自增有個參數(shù)innodb_autoinc_lock_mode,他有三種可能只0,1,2,mysql5.1之后加入的,默認值是1,之前的版本可以看做都是0。

可以使用下面的語句看當(dāng)前是哪種模式

select @@innodb_autoinc_lock_mode;

小A使用的數(shù)據(jù)庫默認值也是1,當(dāng)做簡單插入(可以確定插入行數(shù))的時候,直接將auto_increment加1,而不會去鎖表,這也就提高了性能。當(dāng)插入的語句類似insert into select ...這種復(fù)雜語句的時候,提前不知道插入的行數(shù),這個時候就要要鎖表(一個名為AUTO_INC的特殊表鎖)了,這樣auto_increment才是準(zhǔn)確的,等待語句結(jié)束的時候才釋放鎖。還有一種稱為Mixed-mode inserts的插入,比如INSERT INTO t1 (c1,c2) VALUES (1,'a'), (NULL,'b'), (5,'c'), (NULL,'d'),其中一部分明確指定了自增主鍵值,一部分未指定,還有我們這里討論的INSERT ... ON DUPLICATE KEY UPDATE ...也屬于這種,這個時候會分析語句,然后按盡可能多的情況去分配auto_incrementid,這個要怎么理解呢,我看下面這個例子:

truncate table t1;insert into t1 values(NULL, 100, "test1"),(NULL, 101, "test2"),(NULL, 102, "test2"),(NULL, 103, "test2"),(NULL, 104, "test2"),(NULL, 105, "test2");-- 此時數(shù)據(jù)表下一個自增id是7delete from t1 where id in (2,3,4);-- 此時數(shù)據(jù)表只剩1,5,6了,自增id還是7insert into t1 values(2, 106, "test1"),(NULL, 107, "test2"),(3, 108, "test2");-- 這里的自增id是多少呢?

上面的例子執(zhí)行完之后表的下一個自增id是10,你理解對了嗎,因為最后一條執(zhí)行的是一個Mixed-mode inserts語句,innoDB會分析語句,然后分配三個id,此時下一個id就是10了,但分配的三個id并不一定都使用。此處 @總是遲到 多謝指出,看官方文檔理解錯了

模式0的話就是不管什么情況都是加上表鎖,等語句執(zhí)行完成的時候在釋放,如果真的添加了記錄,將auto_increment加1。

至于模式2,什么情況都不加AUTO_INC鎖,存在安全問題,當(dāng)binlog格式設(shè)置為Statement模式的時候,從庫同步的時候,執(zhí)行結(jié)果可能跟主庫不一致,問題很大。因為可能有一個復(fù)雜插入,還在執(zhí)行呢,另外一個插入就來了,恢復(fù)的時候是一條條來執(zhí)行的,就不能重現(xiàn)這種并發(fā)問題,導(dǎo)致記錄id可能對不上。

至此,id跳躍的問題算是分析完了,由于innodb_autoinc_lock_mode值是1,INSERT ... ON DUPLICATE KEY UPDATE ...是簡單的語句,預(yù)先就可以計算出影響的行數(shù),所以不管是否更新,這里都將auto_increment加1(多行的話大于1)。

如果將innodb_autoinc_lock_mode值改為0,再次執(zhí)行INSERT ... ON DUPLICATE KEY UPDATE ...的話,你會發(fā)現(xiàn)auto_increment并沒有增加,因為這種模式直接加了AUTO_INC鎖,執(zhí)行完語句的時候釋放,發(fā)現(xiàn)沒有增加行數(shù)的話,不會增加自增id的。

INSERT ... ON DUPLICATE KEY UPDATE ...影響的行數(shù)是1為什么返回2?

為什么會這樣呢,按理說影響行數(shù)就是1啊,看看官方文檔的說明

With ON DUPLICATE KEY UPDATE, the affected-rows value per row is 1 if the row is inserted as a new row, 2 if an existing row is updated, and 0 if an existing row is set to its current values

官方明確說明了,插入影響1行,更新影響2行,0的話就是存在且更新前后值一樣。是不是很不好理解?

其實,你要這樣想就好了,這是為了區(qū)分到底是插入了還是更新了,返回1表示插入成功,2表示更新成功。

解決方案

將innodb_autoinc_lock_mode設(shè)置為0肯定可以解決問題,但這樣的話,插入的并發(fā)性可能會受很大影響,因此小A自己想著DBA也不會同意。經(jīng)過考慮,目前準(zhǔn)備了兩種較為可能的解決方案:

修改業(yè)務(wù)邏輯

修改業(yè)務(wù)邏輯,將INSERT ... ON DUPLICATE KEY UPDATE ...語句拆開,先去查詢,然后去更新,這樣就可以保證主鍵不會不受控制的增大,但增加了復(fù)雜性,原來的一次請求可能變?yōu)閮纱危炔樵冇袥]有,然后去更新。

刪除表的自增主鍵

刪除自增主鍵,讓唯一索引來做主鍵,這樣子基本不用做什么變動,只要確定目前的自增主鍵沒有實際的用處即可,這樣的話,插入刪除的時候可能會影響效率,但對于查詢多的情況來說,小A比較兩種之后更愿意選擇后者。

結(jié)語

其實INSERT ... ON DUPLICATE KEY UPDATE ...這個影響行數(shù)是2的,小A很早就發(fā)現(xiàn)了,只是沒有保持好奇心,不以為然罷了,沒有深究其中的問題,這深究就起來會帶出來一大串新知識,挺好,看來小A還是要對外界保持好奇心,保持敏感,這樣才會有進步。

總結(jié)

以上就是這篇文章的全部內(nèi)容了,希望本文的內(nèi)容對大家的學(xué)習(xí)或者工作具有一定的參考學(xué)習(xí)價值,如果有疑問大家可以留言交流,謝謝大家對VeVb武林網(wǎng)的支持。


注:相關(guān)教程知識閱讀請移步到MYSQL教程頻道。
發(fā)表評論 共有條評論
用戶名: 密碼:
驗證碼: 匿名發(fā)表
欧美二三四区| 亚洲欧洲日韩在线| 国产三级视频网站| 日韩中文字幕第一页| 亚洲国产福利视频| 中文字幕在线视频精品| 亚洲高清中文字幕| 中文字幕在线中文字幕二区| 中文字幕在线观看欧美| 亚洲一区在线观看视频| 一区二区三区久久| 欧美日韩夫妻久久| 国产黄色片大全| 午夜一区二区三区| 亚洲视频电影在线| 日韩精品首页| 中文字幕精品一区二| 粉嫩喷白浆久久| 欧美 日韩 综合| 日韩a一区二区| av免费在线网站| 国产丝袜一区二区| 亚洲综合日韩欧美| 91蜜桃婷婷狠狠久久综合9色| 一区三区视频| 国产视频2区| 欧美日韩国产高清一区| 欧美日韩精品在线| 91久久精品网| 91精品综合久久久久久| 日本亚洲欧美| 91精品国产91久久久久久不卡| 中文字幕亚洲免费| 天堂在线一区二区三区| 欧美亚洲专区| 欧美日韩亚洲91| 激情婷婷亚洲| 日韩欧美国产午夜精品| 一区二区三区在线播放视频| 日韩精品―中文字幕| 亚洲免费在线观看av| 尤物av一区二区| 午夜亚洲一区| 日韩欧美国产高清91| 欧美日韩精品是欧美日韩精品| 91精品国产免费久久综合| 日韩国产成人| 日韩中文字幕国产| 另类专区欧美| 中文字幕在线视频第一页| 一二三区精品视频| 亚洲欧美伊人| 亚洲人线精品午夜| 欧美亚洲国产免费| 国产成人精品免费久久久久| 日韩免费看网站| 亚洲社区在线| 欧美日韩中文字幕精品| 欧美日韩亚洲不卡| 99综合精品久久| 国产99在线|亚洲| 在线黄色国产电影| 国产一区久久久| 欧美日韩在线视频免费观看 | 日韩在线视频中文字幕| 国产在线精品日韩| 亚洲永久免费视频| 精品日韩在线观看| 红桃视频亚洲| 91精品免费在线观看| 精品视频123区在线观看| 91午夜在线| 中文字幕在线视频网| 中文av字幕一区| 一区二区高清视频| 国产在线视频一区二区| 欧美日韩在线播放一区| 久久精品免费看| 国产 欧美 在线| 亚洲一区在线观看网站| 精品久久蜜桃| 日韩欧美色综合网站| 欧美日韩精品久久久| 国产资源在线观看入口av| 国产午夜精品久久| 国产丝袜在线播放| 九九在线精品| 91精品日本| 欧美三级日韩在线| 亚洲一区视频在线观看视频| 国产在线欧美| av免费网站在线观看| 婷婷中文字幕一区三区| 中文字幕线观看| 深夜日韩欧美| 日韩中文字幕网| 国产在线不卡av| 999精品视频在线观看播放| 欧美日韩中国免费专区在线看| 久久久久久99精品| 精品亚洲永久免费| 91精品国产91久久久久青草| 在线一区二区不卡| 日韩精品视频在线| 欧美婷婷久久| 国产字幕在线看| 欧美久久在线观看| 国内激情久久| av免费网站在线观看| 国产一区不卡精品| 日韩你懂的电影在线观看| 日韩欧美中文字幕公布| 日韩美女视频一区二区在线观看| 亚洲久草视频| 国产在线播放一区二区| 在线一区免费| 久久在线91| 中文亚洲免费| 色综合婷婷久久| 国产一区不卡精品| 国产欧美日韩成人| 欧美一卡2卡3卡4卡| 婷婷久久综合网| 精品一二线国产| 亚洲开心激情| 日韩免费不卡avV| 成人一区二区不卡免费| 亚洲欧美999| 久久久久黄色| 欧美不卡123| 精品亚洲综合| 国产视频97| 国产999在线观看| 久久视频在线免费观看| 欧美专区中文字幕| 亚洲乱码在线观看| www.eeuss影院| 在线观看91精品国产入口| 亚洲免费看av| 国产高清在线观看| 中文字幕视频在线免费欧美日韩综合在线看 | 日本一级一片免费视频| 国产视频三级在线观看播放| 中文字幕日韩亚洲| av一卡二卡| 精品区一区二区| 99久久久精品免费观看国产| 欧美日韩中文在线| 日韩在线高清| 国产又粗又猛又爽又黄91精品| www.老鸭窝.com| 婷婷久久综合网| 91精品国产91久久久久久久久| 成人一区二区不卡免费| 日韩欧美在线不卡| 亚洲社区在线| 99视频精品全国免费| 日本a口亚洲| 国产视频1区2区| 日韩视频在线免费播放| 日韩精品视频免费播放| 在线日韩中文| 国产黄在线观看| 蜜臀国产一区| 精品一二线国产| 一区三区视频| 日韩 欧美 亚洲| 91精品在线观看视频| 亚洲中文字幕一区| 国产不卡在线| 91蜜桃婷婷狠狠久久综合9色| 国产欧美日韩中文字幕| 欧美日韩一二三四| 国产精品一区二三区| 91久久中文| 国产亚洲人成a一在线v站| 日韩欧美三级在线| 97天天综合网| 1区不卡电影| 91精品国产综合久久久久久| 一区二区中文视频| 精品全国在线一区二区| av免费观看国产| 欧美国产中文| 狠狠色综合色区| 不卡一区2区| 亚洲视频色图| 亚洲中文字幕一区| 日韩精品一页| 日韩高清在线一区二区| 国产不卡在线| 亚洲日本精品视频| 成人ww免费完整版在线观看| 日韩免费视频| 一区二区不卡在线| 92久久精品| 精品调教chinesegay| 国产在线播放一区二区| 欧美日韩中文字幕精品| 欧美日韩亚洲天堂| 日韩欧美中文字幕公布| av中文网站| va中文字幕| 成人久久在线| 日韩欧美一二三四区| 韩日中文字幕第一页| 91精品国产91久久久久| 日韩欧美色综合网站| 日韩久久在线| 亚洲区中文字幕| 国产成人精品日本亚洲专区61 | 欧美日本精品| 欧美日韩精品综合在线| 国产黄色在线看| 欧美一级日韩不卡播放免费| 国产免费永久在线观看| 日韩一级网站| 伊人国产视频| 国产欧美久久久| 精品三级久久| 国产午夜精品视频| 日本黄色一区二区| 国产一二三四| 国产激情久久| 日韩欧美在线综合网| 国产在线精品国自产拍免费| 国产久卡久卡久卡久卡视频精品| 蜜桃视频一日韩欧美专区| 一区精品在线播放| 日韩国产91| 中文字幕在线中文字幕二区| 日韩综合精品| 中文字幕欧美日韩精品| 国产欧美日韩高清| 国产黄色在线播放| 久久久99精品久久| 亚洲欧美日本另类| 中文字幕精品一区二区三区在线| a√免费观看在线网址www| 国产视频中文字幕| 精品中文字幕在线| 日韩欧美在线中字| 日韩久久精品视频| 在线观看一区| 中文字幕线观看| 一区二区三区免费看视频| 欧洲精品在线视频| 国产欧美日韩综合| 国产成人va亚洲电影| 91精品国产91久久久久久不卡 | 日韩欧美国产免费| 欧美久久在线观看| 欧美日韩综合不卡| 免费中文字幕日韩欧美| 亚洲免费看av| 精品乱人伦一区二区三区| 久99久视频| 中文字幕一区不卡| 久久精品欧美日韩精品| 日韩福利视频导航| av手机天堂| 久久永久免费视频| www.中文字幕在线| 欧美一级日韩不卡播放免费| 国产高清视频一区二区| 国产在线精品日韩| 一级片免费网站| 精品国自产在线观看| 欧美另类专区| 91蜜桃婷婷狠狠久久综合9色| 日韩高清不卡一区| 亚洲a一级视频| 蜜桃视频一日韩欧美专区| av三级在线播放| 不卡在线一区二区| 偷窥国产亚洲免费视频| 欧美专区中文字幕| 国产欧美一级| 欧美国产综合在线V| 欧美在线亚洲一区| 国产午夜在线观看| 美女在线视频一区| 国产日韩第一页v| 国产欧美日韩视频| 中文字幕日韩免费视频| 国产黄色高清在线| 99视频在线看| 不卡视频一区二区| 欧美日韩在线播放三区四区| xxxxx性| 日韩欧美国产成人精品免费| 久久久另类综合| 日韩欧美在线不卡| 日韩欧美在线字幕| 国产成人精品av久久| 欧美日韩在线播放一区| 国产91久久久久蜜臀青青天草二| 欧美日韩久久不卡| 国产不卡在线观看视频| 一区二区三区高清在线| 在线国产99| 国产在线高清精品| 精品全国在线一区二区| 国产高清一区| 中文字幕在线观看精品| 在线观看av的网站| 日韩在线不卡一区| 中文网丁香综合网| 亚洲a级在线播放观看| 亚洲免费精品视频| 欧美日韩综合在线免费观看| 欧美日韩精品免费在线观看视频| 蜜桃视频中文字幕| 一区二区日韩av| 国产在线二区| 欧美在线视频第一页| 日韩欧美看国产| 日韩一级在线视频| 国产中文在线播放| 国产在线高清精品| 天天综合色天天| aaa免费看大片| 一区二区三区视频网站| 一区二区精品免费| 欧美一级欧美三级在线观看| 欧美三级在线看| 国产激情久久| 99视频在线看| 久久久精品日韩| 日韩三级精品| 日韩欧美三级在线| eeuss一区| 亚洲欧美中文字幕| 国产一区不卡精品| 日韩欧美国产成人一区二区| 亚洲最新永久观看在线| av中文在线播放| 日本国产在线视频| 久久夜色精品国产噜噜亚洲av| 日韩中文字幕在线播放| 日韩一级精品| 国产高清不卡av| 国产欧美 在线欧美| 日韩av一区二区在线| 日韩一级二级三级| 久久69成人| 国产欧美日韩中文字幕在线| 日本精品二区| 日韩在线一区二区| 日韩中文字幕久久| 色综合天天综合网天天狠天天 | 日韩欧美一级在线播放| 欧美日本精品在线| 国产日韩专区| 区日韩二区欧美三区| 欧美成人一区二区| 亚洲一区在线观看视频| 国产成免费视频| 久久久91精品| www高清在线视频日韩欧美| 国产丝袜一区二区| 精品三区视频| 久久久99免费| 中文字幕久久精品| 国产美女主播视频一区| 欧美三级中文字幕| av免费观看网站| 91亚洲欧美| 成人禁用看黄a在线| 国产免费播放一区二区| 日韩国产一区| 日韩精品久久久| 一级片在线免费看| 久久综合九色欧美综合狠狠| 日韩精品在线私人| 国产三级做爰在线观看| 久久精品欧美日韩精品| 久久精品久久精品亚洲人| 日韩综合精品| 91精品综合久久| 日本精品免费观看高清观看| 日韩精品在线中文字幕| 视频一区二区精品的福利| 一区二区视频在线观看免费的| a天堂在线资源| 欧美日韩在线视频一区| aaa大片在线观看| 亚洲女人天堂a在线播放| 日韩在线视频网| 精品久久在线| 日韩国产在线不卡视频| 免费在线播放av| 中文字幕日韩国产| 欧洲一级精品| 亚洲女人天堂色在线7777| 中文字幕亚洲高清| 亚州黄色一级| 国产黄在线观看免费观看不卡| 国产三级中文字幕| 中文字幕无线码一区|