日本免费精品_最新日韩一区_亚洲视频一区在线_a在线视频观看_天天射夜夜骑_粉嫩av一区二区三区_欧美中日韩免费视频_综合图区欧美_国内精品美女在线观看_午夜精品久久久久久久男人的天堂

首頁 > 數據庫 > SQL Server > 正文

SQLServer數據庫中開啟CDC導致事務日志空間被占滿的原因

2024-08-31 01:04:49
字體:
來源:轉載
供稿:網友

SQLServer中開啟CDC之后,在某些情況下會導致事務日志空間被占滿的現象為:

在執行增刪改語句(產生事務日志)的過程中提示,The transaction log for database '***' is full due to 'REPLICATION'(數據庫“***”的事務日志已滿,原因為“REPLICATION”).

CDC以及復制的基本原理粗略地講,對于日志的使用步驟如下:

  1,每當基礎表(開啟了CDC或者replication的表)產生事務性操作(增刪改)之后,對應的事務日志寫入日志文件,

  2,此時的日志被狀態被標記為Replication,也即處于待復制狀態,這個活動狀態跟數據庫的還原模式無關,即便是簡單還原模式,

  3,然后有后臺進程來讀取這個日志,根據事務日志的內存寫入目標表,

    這個目標對于cdc來說是記錄數據變化的系統表,

    對于replication來說是寫入distribution這個庫

  4,步驟3完成之后,事務日志被標記為正常狀態,如果是簡單還原模式,被后臺進程解析過的事務日志被截斷,可以重用如果上述中間的第三個步驟出現問題,也即后臺進程無法解析日志后釋放可用的日志空間,再次往數據庫中寫入操作,就會出現:數據庫“TestDB”的事務日志已滿,原因為“REPLICATION”的情況

本文通過通過演示開啟CDC的情況下日志空間被占滿的現象,以及對應的處理辦法

測試環境搭建

  首先建立一個測試數據庫,

USE masterGOCREATE DATABASE TestLogFull ON PRIMARY (   NAME = N'TestLogFull',   FILENAME = N'D:/DBFile/TestLogFull/TestLogFull.mdf' ,   SIZE = 500MB ,   MAXSIZE = UNLIMITED,   FILEGROWTH = 100MB )LOG ON (  NAME = N'TestLogFull_log',   FILENAME = N'D:/DBFile/TestLogFull/TestLogFull_Log.ldf' ,   SIZE = 1MB ,   MAXSIZE = 512MB )

  這里指定日志文件的最大為512M,主要是為了演示日志空間被占滿的現象

  接著開啟新建一個表同時開啟CDC來測試

USE TestLogFull--啟用CDCEXECUTE sys.sp_cdc_enable_db;GO--創建一張測試表create table test_cdc(  id int identity(1,1) primary key,  name nvarchar(50),  mail varchar(50),  address nvarchar(50),  lastupdatetime datetime)--對表啟用CDCEXEC sys.sp_cdc_enable_table   @source_schema      = 'dbo',  @source_name       = 'test_cdc',  @role_name        = 'cdc_admin',  @capture_instance     = DEFAULT,  @supports_net_changes   = 1,  @index_name        = NULL,  @filegroup_name      = DEFAULT

 CDC開啟成功,開始測試日志被占滿的情況

數據庫事務日志,數據庫replication,cdc,數據庫

  這里演示對某些表開啟CDC的情況下日志文件文件被占滿的情況

1,代理服務器未啟動導致日志空間被占滿

文中一開始提到的步驟3,對于CDC,進程就是SQL Server Agent中的cdc.***_capture作業或者復制代理作業來讀取日志
如果SQL Server Agent在開啟了CDC或者復制之后被關閉,或者重啟服務器之后SQL Server Agent沒有隨機自動啟動
就有可能造成步驟2中的日志積壓,也就是記錄數據變化之后的事務日志處于replication狀態,無法重用,導致沒有可以使用的日志致使發生操作數據庫的時候提示The transaction log for database '***' is full due to 'REPLICATION'.

  這里暫時關閉代理服務(僅僅是為了測試演示這一現象)

數據庫事務日志,數據庫replication,cdc,數據庫

  增刪改都可以產生事務日志,這里就演示insert數據的情況,做一個寫數據的SQL,往開啟了CDC的表中寫數據庫
  在建庫的時候日志文件有限制成了512M,因為這個表上開啟了CDC,寫數據這個過程會產生事務日志,日志有空空間限制在寫入數據的過程中,一開始是沒有問題的,隨著數據的不斷寫入(Replication狀態的日志不斷積壓),當日志全部使用之后,下面的報錯就會產生了

數據庫事務日志,數據庫replication,cdc,數據庫

  此時觀察事務日志的使用情況,發現已經是完全使用了,

數據庫事務日志,數據庫replication,cdc,數據庫

  因為日志空間被完全使用了,那么觀察一下日志的等待狀態,是Replication狀態

數據庫事務日志,數據庫replication,cdc,數據庫

  此時嘗試收縮也是無效的,因為日志都是出于活動狀態,活動狀態的日志是無法收縮的

數據庫事務日志,數據庫replication,cdc,數據庫

  可見,因為代理被關閉,讀取日志的作業無法執行,造成日志堵塞,那么開啟代理來看看到底行不行?
  開啟代理,查看CDC作業的執行情況,會發現,此時代理作業也不好使了,作業執行的時候并沒有成功,一樣提示說事務日志已滿

數據庫事務日志,數據庫replication,cdc,數據庫

  此時觀察測試表的cdc目標表沒有任何數據,說明此時即便開啟了代理,cdc的作業依然沒有成功執行
  那么這里為什么CDC的代理作業也無法正常執行?

  其實也不難理解,cdc的作業也是讀取事務日志寫數據的,這中間也相當于有事務性操作,必須要借助日志來實現,而此時又沒有可用的日志空間,

  這個作業當然要失敗了。

數據庫事務日志,數據庫replication,cdc,數據庫

  那么此時怎么辦?

    既然是日志堵塞了,就想辦法清理到這部分活動日志,嘗試將事務日志標記為已分發(雖然這里是CDC,但是對于日志的使用應該是跟復制一樣的)

數據庫事務日志,數據庫replication,cdc,數據庫

  根據本人的測試,在執行上面的語句,將復制的事物標記為已分發之后,再次查看日志使用率,發現還是100%,但是嘗試寫入數據的時候是成功的,再次寫入數據(一條即可)之后,日志空間開始釋放,應該是寫入時候的時候觸發被標記為已分發的日志截斷,也就是將上面占用了100%的日志空間釋放出來然后再觀察日志的使用率,發現如預期的,這部分日志已被截斷,日志空間不再是被完全占用了,日志變成Nothing狀態(可重用)

數據庫事務日志,數據庫replication,cdc,數據庫

  這個測試說明,如果開啟了CDC,SQL Server代理沒有正常啟動或者對應的作業沒有正常啟動,日志空間會隨著不斷產生的事物被占滿,導致數據庫無法進行寫入性操作  

    這里是用過手動標記日志為已分發的方式來釋放日志的,這種情況下會導致cdc日志斷裂的情況,也就是手動釋放的日志無法傳遞到下游(cdc日志表)

  畢竟不是一個太好的辦法,下面會說明另外一種辦法。

2,短時間內較大的事務性操作導致的日志空間被占滿的情況

    對去上面所說的代理服務被關閉導致日志堵塞的情況不同,這里直接開啟代理服務,依舊拿著下面的腳本往表中寫數據(比如實際業務中批量導入數據之類的)

    在寫入一段時間之后,依然出現了事務日志被填滿的情況,這又是為什么?

數據庫事務日志,數據庫replication,cdc,數據庫

    還要從CDC的代理任務說起,這個代理的JOB雖然是連續執行的,但是因為上面寫數據的時候也是連續寫入的,也就是日志是連續產生的,

    因為限制了日志文件的大小(這里為了方便演示,限制為512M),日志文件有最大使用空間的限制。

    這里可以認為是一個Session消耗日志空間(Insert操作),一個進程解析日志之后釋放日志空間(代理作業),

  但是消耗的速度要高于釋放的速度,一旦日志空間被使用完,CDC的代理作業也無法完成,

    這樣就又造成了上面的情況:日志空間被填滿,數據庫無法執行任何寫入操作,CDC作業也無法執行從而釋放可重用的日志空間, 

   上面是通過手動標記事務日志的狀態來解決日志文件被填滿的,

    直接手動標記日志為已分發的做法是有點不合適的,

    一旦標記日志狀態為已分發,接下來他就不會傳遞給CDC的系統表或者訂閱端了

  這里通過另外一種方法來解決此問題:既然當前日志占滿了,就在添加一個日志,注意新加日志初始化的空間不要太小。

  (有興趣測試的盆友,這里添加完日志文件后注意耐心等待一兩分鐘)然后隨后的CDC作業會借助新加的這個日志空間會繼續執行

數據庫事務日志,數據庫replication,cdc,數據庫

  此種情況說明,如果限制了日志的大小(或者存儲日志的磁盤空間不足),數據庫中開啟了CDC或者復制,

  一旦數據出現大批量持續性寫入操作(增刪改),此時會出現SQL Server代理解析并釋放日志的速度跟不上,也有可能造成日志被占滿的情況

3,不增加日志文件空間或者添加日志文件情況下重啟SQLServer服務

  這個辦法也是本人在重現這一現象并嘗試解決的時候試出來的,可行性不是太強,但還是說明一下,那就是重啟大法,同時重啟之后日志文件也發生了一些有意思的變化

  建庫的時候日志文件限制為最大512M,同時沒有手動標記標記日志為已分發狀態,但是重啟SQLServer服務之后,如果存放日志的磁盤有空間,這個日志會自動擴充一部分

  然后有了這部分擴充出來的日志,代理job就可以解析Replication狀態的日志(之后)就可以釋放日志空間了(需要一段時間來解析并釋放日志,根據待復制的日志量有關)

  下圖可以明顯看到,日志限制為512MB,但是初始化為556MB,明顯大過最大日志大小,這個是歸功于重啟SQLServer服務的結果

  一下是在SQL Server 2014 SP2版本下測試的現象,

  數據庫事務日志,數據庫replication,cdc,數據庫

   如果是SQL Server 2014(非SP2補丁版),開啟CDC的方式占滿日志則不會出現如下的情況,也就是說重啟有日志并不會自動擴充一部分,我也是醉了,驗證個東西真不容易,這些小細節跟補丁版本也有關系,不過這種偏門的方法不能作為經驗

總結:

  當開啟了CDC之后,在相關表上的變化會寫入事務日志(日志狀態為Replication狀態),代理任務會解析日志,解析完日之后標記日志為可重建狀態(如果是簡單還原模式,是可重用,如果是完整還原模式,日志備份也無法截斷Replication狀態的日志),這種狀態下如果限制了日志的最大大小比較小,或者沒有限制,存儲日志的磁盤空間不足,在大批量寫入數據(增刪改)的時候,有可能產生的日志占滿日志文件的情況,會導致釋放日志的代理作業無法進行,代理作業無法進行又無法釋放日志,仿佛是死循環。

  此時要么新增日志文件或者增加日志文件的最大大小,要么通過執行系統存儲過程sp_repldone來標記事務為已分發(標記事務日志可重用)來解決這一問題。

以上所述是小編給大家介紹的SQLServer數據庫中開啟CDC導致"事務日志空間被占滿的原因分析和解決辦法(REPLICATION),希望對大家有所幫助,如果大家有任何疑問請給我留言,小編會及時回復大家的。在此也非常感謝大家對VeVb武林網網站的支持!


注:相關教程知識閱讀請移步到MSSQL教程頻道。
發表評論 共有條評論
用戶名: 密碼:
驗證碼: 匿名發表
日韩美女中文字幕| 国产www在线观看| 免费在线视频一区二区| 亚洲福利精品在线| 欧美日韩国产一中文字不卡| 欧美日韩在线精品成人综合网| 91精品国产亚洲| 久久精品视频免费看| 国产区高清在线| 中文字幕在线视频日韩| 五月天久久比比资源色| 日韩精品―中文字幕| 51精品免费网站| 国产农村妇女精品一二区| 中文字幕在线播出| 亚洲欧美久久久| 91精品国产日韩91久久久久久| 日韩视频在线观看一区| 中文字幕日韩在线观看| 欧美日韩精品在线观看| 精品欧美不卡一区二区在线观看| 中文字幕国产亚洲| 日韩视频一区| 国产一卡2卡3卡四卡网站| 在线视频一区二区三区在线播放| 久久永久免费视频| 粉嫩喷白浆久久| 97caopor国产在线视频| 欧美日韩免费高清| 精品国产免费观看一区| 精品极品三级久久久久| 国产一级片在线播放| 国产高清精品二区| 午夜国产在线视频| 国产在线黄色片| 日韩欧美国产免费播放| 国产传媒久久久| a视频在线播放| 一区二区视频在线| 91精品国产综合久久久久久| 国产成人精品三级| 中文字幕在线视频网| 午夜一区二区视频| 精品国产乱码一区二区| 欧美日韩视频免费| 欧美二三四区| 久草亚洲一区| 亚洲欧美999| av免费不卡国产观看| 国产成人va亚洲电影| 国产不卡精品在线| 91国内精品在线视频| 亚洲欧洲精品在线| 国产一区成人| 国产综合成人久久大片91| 国产日韩中文字幕| 中文字幕国产欧美| 91精品婷婷国产综合久久竹菊| 欧美三级日韩三级国产三级| 亚洲图片小说综合| 欧美亚洲视频在线看网址| 先锋男人资源站| 欧美日韩高清一区二区| 久久精品电影| 日韩国产一区| 欧美不卡一区二区| 成人ww免费完整版在线观看| 日韩欧美999| 日韩午夜高潮| 麻豆精品99| 欧美激情视频一区二区三区在线播放| 日韩欧美国产片| 欧美日韩激情一区二区三区| 一区视频在线播放| 日本黄色一区二区三区| 久久蜜桃精品| 欧美日韩在线第一页| 自拍日韩亚洲一区在线| 日韩免费视频一区二区| 香蕉精品久久| 中文字幕在线中文字幕二区| 亚洲一区资源| 久久香蕉av| 精品国产欧美日韩不卡在线观看| 在线一区av| 久草亚洲一区| 欧美日韩高清| 91精品视频国产| 欧美三级三级三级爽爽爽| 亚洲一区三区在线观看| 中文字幕欧美日韩在线| 在线中文字幕网站| 99精品在线播放| 欧美日韩中国免费专区在线看| 久久久99久久| 日韩av一区二| 色99中文字幕| 中文字幕亚洲二区 | 天天综合天天做| 午夜国产在线| 成人xxxx| 日韩视频在线观看视频| 日韩欧美视频一区二区三区四区| 国产欧美日韩精品高清二区综合区| 国内精品露脸在线视频播放| 午夜私人影院在线观看| 日韩欧美字幕| 在线欧美日韩精品| 国产日韩中文字幕在线| 黄色国产在线| 日韩欧美在线不卡| 亚洲一区日韩在线| 免费网站看黄yyy222| 国产成人综合精品| 欧美日韩尤物久久| 久久婷婷国产| 欧洲精品久久久| 拍真实国产伦偷精品| 国内精品露脸在线视频播放| 日韩欧美亚洲国产| 国产福利久久久| 国产乱国产乱300精品| 日韩精品一二三四区| 亚洲视频色图| 午夜福利一区二区三区| 三级精品视频| 日韩视频一区二区在线观看| 中文精品电影| 国产精品一区二三区| 在线一区二区三区精品| 欧美另类专区| av不卡免费看| 99精品一级欧美片免费播放| 91久久精品国产91性色69| 日韩欧美中文在线| 一区二区三区精品99久久| 亚洲制服丝袜一区| 91精品国产91久久久久久久久| 国产最新在线| 欧美日韩高清一区二区不卡| 国产欧美综合视频| 日韩在线一区二区| 国产wwww| 亚洲最新免费视频| 国产高清在线视频| 久久久水蜜桃| 亚洲3区在线| 国产中文在线视频| 午夜伊人狠狠久久| 日韩视频在线一区二区三区| 国产欧美 在线欧美| 国产日韩av一区二区| 国产99亚洲| 久久精品蜜桃| 国产手机视频一区二区| 91精品国产调教在线观看| 精品久久在线观看| 一区二区三区精品在线观看| 亚洲欧美韩国综合色| 国产一级视频| 在线看av的网址| 久久久99久久精品欧美| 精品久久久视频| 麻豆精品99| 日韩一级中文字幕| 日韩国产一区| 91精品国产综合久久久久久漫画 | 国产99对白在线播放| 最新中文字幕在线| 亚洲综合在线不卡| 91www成人久久| 7799精品视频天天看| 激情国产在线| 成人a在线观看| 国产一区不卡在线| 国产一级片在线| 国产一区久久久| 欧美日韩高清在线播放| 国产欧美日韩在线| 日本亚洲视频在线| 国产福利免费在线观看| 中文字幕4区| 在线国产三级| 在线日韩中文| 一区二区三区精品99久久| 99国内精品| 日韩欧美国产黄色| 日韩精品在线免费观看| 精品全国在线一区二区| 精品午夜av| 日韩手机在线观看视频| 国产黄在线播放| 欧美国产亚洲一区| 国产亚洲视频中文字幕视频| 麻豆精品99| 欧美日韩高清不卡| 97久久精品| 91精品国产91久久久| 精品中文字幕视频| 欧美sm一区| 激情久久99| 国产欧美综合在线观看第十页 | 国产导航在线| 中文字幕在线视频网| 国内精品99| 红桃视频亚洲| 日本精品免费观看高清观看| 国产欧美久久久久久久久| 免费精品国产自产拍在| 欧美一级久久久久久久久大| 中文字幕日韩在线观看| 国产字幕在线看| 亚洲国产无线乱码在线观看| 欧美日韩国产三级| 91精品国产91久久久| 日韩精品―中文字幕| 国产欧美日韩中文久久| 蜜桃精品视频| 亚洲成年人影院在线| 欧美成人一区二区| 一本一道综合狠狠老| 欧美日韩国产不卡| 日本黄色一区二区| 中文字幕中文字幕精品| 日韩在线视频精品| 亚洲欧洲国产视频| 一区三区二区视频| 日韩视频在线观看一区| 中文字幕欧美日韩精品| 精品综合久久久久| 精品调教chinesegay| 亚洲一区在线观看视频| 色国产在线视频| 日韩精品视频在线播放| 国产男女av| 一区二区三区鲁丝不卡| 日韩欧美综合在线| 亚洲欧美韩国综合色| 国产日韩av高清| 一区二区三区在线播放视频| 亚洲欧美日本另类| 日韩精品视频中文在线观看| 欧美一级日韩一级| 欧美日韩精品不卡| 日韩专区中文字幕| 欧美日韩在线观看一区| 最近中文字幕在线中文高清版| 久久福利视频一区二区| 亚洲经典中文字幕| 国产日韩精品久久久| 国产黄在线看| 欧美日韩国产页| 国产亚洲欧美色| 精品国产免费视频| 国产成人精品日本亚洲专区61| 亚洲国产福利视频| 99精品在线播放| 欧美日韩性视频一区二区三区| 色国产在线视频| 92久久精品| 精品色蜜蜜精品视频在线观看| 欧美日韩在线播放三区四区| 日韩精品视频免费在线观看| 91久久精品在线| 日韩精品午夜| 日韩一级免费在线观看| 亚洲视频日韩| 午夜伊人狠狠久久| 欧美日韩中文国产| 深夜福利一区二区| 欧美日韩精品久久久| 欧美三级在线视频| 92久久精品| 99精品视频99| 亚洲 欧美综合在线网络| 国产色在线 com| 精人妻一区二区三区| 国产一级在线播放| 在线一区二区不卡| 欧美99久久| 精品一二线国产| 欧美精品一区二区三区在线播放| 欧美1区免费| 免费高清特黄a大片| 国产高清大尺度一区二区不卡| 亚洲男女av一区二区| 国产亚洲视频中文字幕视频| 国产成人精品网址| 中文字幕五月天| 亚洲国产欧美91| 国产一二三精品| 国产欧美日韩最新| 欧美日韩亚洲天堂| 亚洲欧美久久久| 欧美国产一级片| 亚洲大片精品永久免费| 国产日韩在线视频| 精品无人国产偷自产在线| 日韩免费久久| 中文在线第一页| 一区二区高清在线| 中文字幕高清在线播放| 国产日韩精品视频| 亚洲丝袜一区| a在线观看免费视频| 欧美日韩精品久久久| 在线国产一级| 欧美日韩国产第一页| 久久精品www| 欧美色欧美亚洲高清在线视频| 国产色在线 com| 最近中文av字幕在线中文| 欧美变态tickling挠脚心| 国产欧美日韩亚州综合| 国产高清精品在线| 一区二区中文字幕在线| 日韩精品视频在线播放| 美女免费视频一区| www高清在线视频日韩欧美| 中文字幕久久精品| 一区二区三区中文字幕在线观看| 国产成人精品免费网站| 色屁屁一区二区| 日韩精品久久久| 欧美中文字幕在线| 日本熟女一区二区| 九九精品调教| 国产综合精品在线| 91精品网站| 中文字幕在线视频久| 欧美日韩久久不卡| 中文字幕在线亚洲| 日韩精品在线观看视频| 精品极品三级久久久久| 中文字幕日韩第一页| 欧美日韩免费视频| 日韩免费电影网站| 欧美日韩国产页| 在线不卡日本| 91精品999| 91精品婷婷国产综合久久| 天堂在线一区二区三区| 日韩不卡一二三区| 国产裸体歌舞团一区二区| 日韩欧美字幕| 国产乱码午夜在线视频| 亚洲最新永久观看在线| 亚洲综合日韩中文字幕v在线| 精品1区2区3区| 亚洲欧美视频一区二区三区| 国产亚洲二区| 国产黄色在线| 精品视频久久| 婷婷久久综合网| 欧美日韩性视频在线| 久久视频免费看| 国产一区不卡在线| 九七久久人人| 亚洲乱码中文字幕综合| av不卡免费看| 91国内在线| 天堂在线视频中文网| 久久精品99久久久久久久久| av一区在线| 亚洲丝袜一区| 国产日韩在线视频| 日韩欧美高清在线视频| 国产成人一区二区精品非洲| 亚洲人线精品午夜| 亚洲一区中文字幕在线| 91精品在线观| 九色蝌蚪视频在线| 亚洲国产福利视频| 日韩在线视频观看| 日韩欧美久久久| 国产欧美一级| 久久久久蜜桃| 亚洲成在线观看| 欧美日韩一级片在线观看| 欧美日韩国产综合视频在线观看| 亚洲美女视频一区| 一级一片免费视频| 中文字幕一区免费| 日韩欧美中文字幕公布| 亚洲欧美中文字幕在线一区| 精品久久香蕉国产线看观看gif| 国产精品一区二三区| 国产三级中文字幕| 午夜亚洲一区| 婷婷精品进入| 精品在线一区二区| 九九九精品视频| 欧美日韩精品欧美日韩精品| 欧美亚洲另类制服自拍| 激情国产在线| 在线观看一区日韩| 91精品国产亚洲| www.三级.com| 欧美日韩中文字幕在线观看| 精品一二线国产|