摘要：本文從客戶視角的三個疑問出發，一起了解華為云GaussDB資料庫的遷移解決方案具有哪些核心技術，如何做到讓客戶遷移程序安心、放心、省心，
遷移是資料庫選型程序中客戶最為關心的話題之一，經過大量的溝通調研，我們總結客戶在資料庫遷移方面的主要期望：遷移不影響業務運行（安心）、遷移不能丟資料（放心）、遷移實施起來簡單（省心），
本文從客戶視角的三個疑問出發，一起了解華為云GaussDB資料庫的遷移解決方案具有哪些核心技術，如何做到讓客戶遷移程序安心、放心、省心，
問題1：能不能搬？
每種資料庫都有自己的一些特定的“脾氣”，比如Oracle的語言直接在GaussDB上運行不一定能作業，這個就是所謂的“語言不通”，這種場景稱之為“異構資料庫的遷移”，“語言不通”是長期以來異構資料庫遷移替換的最大技術障礙，下面我們從技術和效果兩方面來看，
技術方面，華為是怎么解決的？
華為的遷移套件中有一款叫UGO的工具，它像“翻譯大師一樣”，把這個難題分成兩部分來看：
第一部分 讀懂Oracle語言：Oracle的語法對應一個個巨大的樹形結構，并由一些關鍵元素構成，比如一條Oracle建表陳述句，表名是什么，有幾列，每列的名字是什么等等，UGO具有專屬的語法分析器，能夠順著語法樹和列舉探測出每條Oracle的陳述句元素構成，這樣最終理解了語意，讀懂了Oracle語言，
第二部分 根據知識庫“翻譯”成GaussDB的寫法：根據剛才的描述，這個技術很像是做“翻譯”作業，生活經驗告訴我們，翻譯的水平高低取決于接觸的訓練場景和詞匯樣本是否足夠大，華為UGO依靠流程IT和工商銀行這兩個世界上最復雜的Oracle業務環境訓練，截止到現在，已經向UGO注入了幾千萬行級的代碼訓練量，這個是業界公布的最高紀錄，同類產品沒有這方面的相關介紹，
那效果究竟如何？
“翻譯大師”UGO依托華為獨有的訓練場景，接入Oracle后，通常幾分鐘可以生成一份詳細的評估報告，讓遷移至GaussDB的可行性一目了然，在工行遷移攻堅戰的最高挑戰場景，千萬級的存盤程序遷移中，經過UGO的處理，Oracle 95%代碼轉化后可以在GaussDB直接運行，去O已經非常接近自動化，
問題2：怎么遷移讓業務無感知？
資料庫一個非常繁忙的軟體，每一秒過去可能成千上萬的資料發生了變化，如何在資料高度變化的動態程序中將資料庫遷走，比較容易想到的做法是將業務停機來確保資料遷移不丟失，但這對于一個核心業務來說是無法接受的，這樣就提出了一個技術問題，有沒有一種辦法可以在業務運行程序中將資料庫遷移到GaussDB，也就是業界常說的熱遷移，或者說在線遷移，
技術方面，華為的遷移套件中有一款叫DRS的工具，它像“資料的復制機”一樣，能夠做到Oracle運行程序中遷移到GaussDB，DRS工具從技術上將這個問題分為了三部分：
第一部分 存量資料搬遷，DRS采用行級并行方式抽取資料，抽取性能最大可達100+MB/s，同時客戶可以在源端資源允許情況下設定遷移速度，做到按照想要的速度遷移，想快就快，想慢就慢；
第二部分 增量資料搬遷，資料庫有一個組件叫日志，它用快速而有序的方式記錄了資料庫中每一個資料的變化，是資料庫停電不丟資料的關鍵技術，DRS采用技術手段可以將日志記錄的事情重演一遍，這個程序就好像將Oracle資料變化錄制下來，將同樣的操作再在GaussDB上操作一遍，這個技術業界一般稱為CDC技術（change data capture），不僅如此，DRS還采用了技術手段將一條條資料的操作優化為并行運行，讓兩邊資料既能確保不丟失，又能大大提升同步速度，通常Oracle資料庫新產生的資料在1s內就可以在GaussDB看到，即使是一個非常龐大繁忙的Oracle系統（比如一天日志量達到TB級別）也能做到秒級同步，
第三部分 動態資料對比，DRS內置了一套專利演算法，每隔x分鐘（可配置）識別增量日志中變化的資料行，并根據資料行的主鍵值，查詢和對比源庫和目標庫的資料，從而階段性驗證Oracle和GaussDB的資料一致性，如此回圈操作，持續重繪一致性比對結果，得到最終一致性結論，而不用停止Oracle資料庫的業務接入，進行長時間的資料校對，
效果如何？
“資料的復制機”DRS通過CDC技術實作在線遷移，做到Oracle在運行程序中將資料遷移至GaussDB，資料可對比零丟失，業務可自由選擇割接時間，并且搬遷程序中業務無感，總結下來就是，業務無感->安心，資料不丟失->放心，自動化資料同步->省心；
問題3：怎么確保遷移后業務穩定運行？
上面解答了能不能遷移，怎么遷移的問題，那么遷移至GaussDB后能否平穩度過業務峰值的考驗，技術上有了上面UGO和DRS的基礎，我們能夠在Oracle資料庫上自動采集資料了，業務上的一個個請求是從應用程式發送至Oracle資料庫的，里面有查詢請求，也有資料修改請求，這些請求的總和就是業務流量了，業務高峰期采集到業務流量后通過UGO進行語法轉化，結合通過DRS構建的真實生產環境資料，這樣可以形成了基于GaussDB資料庫的業務仿真壓測環境，
通過仿真壓測，客戶可以直接預測GaussDB能否穩定度過業務洪峰，并提前識別是否需要做規格的調整，對于業務本身，也支持細粒度切換的遷移，DRS可以讓資料進行雙向傳輸，可并線逐步切流，觀察GaussDB的業務承載能力，具備隨時可回退能力，
最后，再總結一下華為GaussDB的全套遷移方案， “翻譯大師”UGO解決語言不通語法轉化的問題，“資料的復制機”DRS解決業務不停機資料遷移的問題，同時DRS工具還提供仿真壓測、資料一致性對比等配套能力，通過這些能力華為在金融各大行專案中已經大量落地，同時華為云資料庫遷移解決方案是信通院資料庫遷移評測中首個獲得最高級遷移能力的廠商，華為云GaussDB資料庫致力于通過技術，給客戶提供一套安心、放心、省心的遷移解決方案，
點擊關注，第一時間了解華為云新鮮技術~
轉載請註明出處，本文鏈接：https://www.uj5u.com/shujuku/557081.html
標籤：其他
上一篇：向量資料庫Faiss的搭建與使用
下一篇：返回列表