A. 數倉備份經驗分享丨詳解roach備份原理及問題處理套路
在數據倉庫的世界中,備份是至關重要的守護者。本文將深入探討GaussDB(DWS)的備份機制,特別是Roach備份的原理,以及常見問題的診斷與解決方案。讓我們一起踏上這場數據安全的探索之旅。
備份原理剖析
Roach備份策略涉及物理全量、增量備份,其中關鍵環節包括行存、barrier點、Xlog和列存備份。全量備份記錄所有數據,增量備份則基於全量,分為累計和差分,依賴於cbm文件追蹤數據變更。備份過程中,FPW和延遲DDL的啟用能確保DDL操作的順暢處理,但可能會增加系統IO壓力,佔用磁碟空間,甚至可能導致臨時集群只讀。
問題定位與解決方案
問題:/連接失敗,如"Failed to connect to gauss"。
原因:/可能是遺留文件導致,解決方法是徹底清理相關文件。
問題:/隨機備份失敗,因並發大導致NBU負載過大。
規避:/適當調整filesplit-size和parallel-process參數以緩解壓力。
問題:/master/agent連接問題,如埠未開放。
規避:/確認並開放必要的網路埠或調整命令埠設置。
問題:/細粒度備份錯誤,不支持DDL操作。
排查:/深入檢查agent日誌以了解詳細情況。
准備工作與注意事項
在備份前,務必生成MAP文件,但需避開DDL操作,以防止備份失敗。為確保平穩進行,可以調整備份表的數量,錯開備份時間與DDL操作。遇到內存不足的問題,檢查是否由於CPU核心過多,適時調整參數。在大型集群中,gs_roach的頻繁讀取可能引發不穩定,升級至821及以上版本可緩解這種情況。
以上內容只是備份策略的一部分,詳細的故障排除和優化技巧可在官方文檔中找到,持續關注華為雲,獲取最前沿的技術動態,讓數據備份和管理更加得心應手。
B. cbm666老師 能進來一下嗎
ASSOC 顯示或修改文件擴展名關聯。
AT 計劃在計算機上運行的命令和程序。
ATTRIB 顯示或更改文件屬性。
BREAK 設置或清除擴展式 CTRL+C 檢查。
CACLS 顯示或修改文件的訪問控制列表(ACLs)。
CALL 從另一個批處理程序調用這一個。
CD 顯示當前目錄的名稱或將其更改。
CHCP 顯示或設置活動代碼頁數。
CHDIR 顯示當前目錄的名稱或將其更改。
CHKDSK 檢查磁碟並顯示狀態報告。
CHKNTFS 顯示或修改啟動時間磁碟檢查。
CLS 清除屏幕。
CMD 打開另一個 Windows 命令解釋程序窗口。
COLOR 設置默認控制台前景和背景顏色。
COMP 比較兩個或兩套文件的內容。
COMPACT 顯示或更改 NTFS 分區上文件的壓縮。
CONVERT 將 FAT 卷轉換成 NTFS。您不能轉換
當前驅動器。
COPY 將至少一個文件復制到另一個位置。
DATE 顯示或設置日期。
DEL 刪除至少一個文件。
DIR 顯示一個目錄中的文件和子目錄。
DISKCOMP 比較兩個軟盤的內容。
DISKCOPY 將一個軟盤的內容復制到另一個軟盤。
DOSKEY 編輯命令行、調用 Windows 命令並創建宏。
ECHO 顯示消息,或將命令回顯打開或關上。
ENDLOCAL 結束批文件中環境更改的本地化。
ERASE 刪除至少一個文件。
EXIT 退出 CMD.EXE 程序(命令解釋程序)。
FC 比較兩個或兩套文件,並顯示
不同處。
FIND 在文件中搜索文字字元串。
FINDSTR 在文件中搜索字元串。
FOR 為一套文件中的每個文件運行一個指定的命令。
FORMAT 格式化磁碟,以便跟 Windows 使用。
FTYPE 顯示或修改用於文件擴展名關聯的文件類型。
GOTO 將 Windows 命令解釋程序指向批處理程序
中某個標明的行。
GRAFTABL 啟用 Windows 來以圖像模式顯示
擴展字元集。
HELP 提供 Windows 命令的幫助信息。
IF 執行批處理程序中的條件性處理。
LABEL 創建、更改或刪除磁碟的卷標。
MD 創建目錄。
MKDIR 創建目錄。
MODE 配置系統設備。
MORE 一次顯示一個結果屏幕。
MOVE 將文件從一個目錄移到另一個目錄。
PATH 顯示或設置可執行文件的搜索路徑。
PAUSE 暫停批文件的處理並顯示消息。
POPD 還原 PUSHD 保存的當前目錄的上一個值。
PRINT 列印文本文件。
PROMPT 更改 Windows 命令提示符。
PUSHD 保存當前目錄,然後對其進行更改。
RD 刪除目錄。
RECOVER 從有問題的磁碟恢復可讀信息。
REM 記錄批文件或 CONFIG.SYS 中的注釋。
REN 重命名文件。
RENAME 重命名文件。
REPLACE 替換文件。
RMDIR 刪除目錄。
SET 顯示、設置或刪除 Windows 環境變數。
SETLOCAL 開始批文件中環境更改的本地化。
SHIFT 更換批文件中可替換參數的位置。
SORT 對輸入進行分類。
START 啟動另一個窗口來運行指定的程序或命令。
SUBST 將路徑跟一個驅動器號關聯。
TIME 顯示或設置系統時間。
TITLE 設置 CMD.EXE 會話的窗口標題。
TREE 以圖形模式顯示驅動器或路徑的目錄結構。
TYPE 顯示文本文件的內容。
VER 顯示 Windows 版本。
VERIFY 告訴 Windows 是否驗證文件是否已正確
寫入磁碟。
VOL 顯示磁碟卷標和序列號。
XCOPY 復制文件和目錄樹。