• <wbr id="8x9rj"></wbr>
      <u id="8x9rj"></u>
        3. 

        

      1. 



        

        
      
        
    
        
          
         
        
          
        
        
        
              
        
            
        
                  
                
        
            
        
            
        世界滾動:初探ETLCloud CDC零代碼實現MySQL數據實時同步
        
            
          
                  
        • 商洛在線
          • 
                  
        • 2023-06-23 17:09:08
          • 
                  
        • 來源：RestCloud
          • 
                
        
            
        
                  
        
				  
        1. CDC實時數據同步的應用場景
        CDC實時同步功能是現代數據倉庫技術中常見的一種數據同步技術，能夠實現實時交互、持續同步、高可用性和高性能的數據傳輸。
        應用場景：
        實時數據備份：將源系統的數據實時備份到目標數據系統中，確保數據的實時性和可靠性。

        (資料圖片)
        高效數據同步：保證源系統中數據變化及時地同步到目標數據系統中，減少數據同步延遲和數據丟失。
        數據異構轉換：將不同數據系統之間的數據進行異構轉換，實現數據的互通和共享。
        數據監管和審計：對數據的改動進行監管和審計，提高數據的安全性和合規性。
        ETLCloud CDC 介紹
        ETLCloud CDC是一款容安裝易使用的、零代碼的CDC實時數據同步工具，ETLCloud CDC具有以下功能特點：
        零代碼：只需簡單配置，無需任何代碼即可完成CDC的配置和同步。
        實時數據同步：將一個或多個源數據系統的數據實時傳輸到目標數據系統。
        增量數據同步：高效的數據同步方式，可以只同步最新的更新內容，避免全部備份和傳輸。
        數據源類型：ETLCloud CDC支持多種數據源類型的實時同步主要包含：MySQL、Sql Server、Oracle、PG、MQ等。
        實時數據類型轉換：實時將原始數據轉換為目標端可以識別的格式，從而保證數據準確性和有效性。
        DDL同步: 當源表的DDL發現變更時自動同步目標表的DDL。
        斷點自動恢復：在傳送過程中發生異常時能自動從斷點位置重新傳送實時數據。
        CDC+ETL一體化架構: 通過CDC實時數據流與ETL的結合實現對實時復雜數據的處理需求。
        此外，ETLCloud CDC 還具備高可用性、靈活配置、數據安全加密、任務監控等功能，可滿足不同場景下企業級應用的要求。
        安裝部署
        3.1安裝ETLCloud CDC
        步驟1：官網下載linux一鍵部署包，把一鍵部署包放到一個目錄下解壓并進入該目錄。
        對腳本文件進行賦權
        chmod +x restcloud_install.sh
        執行腳本
        ./restcloud_install.sh
        等待tomcat啟動，當出現這個界面，則restcloud證明啟動成功
        步驟2：打開瀏覽器輸入{host}/restcloud/admin/login
        輸入用戶名密碼: admin/pass
        步驟3：登入系統后我們去官網申請sn碼
        填寫好郵箱和對應的機器號，點擊驗證發送驗證郵件然后就會返回申請的序列號到所填寫的郵箱
        將返回的序列號填好，點擊保存，刷新頁面進入到首頁
        步驟4：填寫好序列號后, 需要執行下版本更新, 在平臺主頁選擇平臺監控 -> 一鍵備份升級,點擊版本更新按鈕，重啟Tomcat即可。
        進入tomcat/bin目錄
        cd /usr/tomcat/bin
        //啟動tomcat并打印啟動日志
        ./startup.sh && tail -f ../logs/catalina.out
        ETLCloud CDC實時庫表同步
        步驟1： 啟用MySQL的CDC功能，需要在MySQL的my.cnf配置文件中設置相應的參數。
        在配置文件中增加如下配置，開啟Binlog。
        server-id = 123
        log_bin = mysql-bin
        binlog_format = row
        binlog_row_image = full
        expire_logs_days = 10
        gtid_mode = on
        enforce_gtid_consistency = on
        修改完配置參數后重啟MySQL服務
        步驟2： 創建數據監聽器
        步驟3： 配置數據監聽器
        在創建數據同步任務后，需要對同步任務進行配置。在這個過程中，您需要指定要同步的表以及數據傳輸模式。
        步驟4： 啟動同步任務
        完成同步任務的配置后，您需要啟動同步任務以開始實時同步數據。在ETLCloud中，可以通過單擊“啟動”按鈕來啟動同步任務。
        步驟5： 監控同步任務
        啟動數據同步任務后，可以通過監控面板統計圖來了解任務的運行狀態、同步量以及異常情況。
        使用Navicat查看源表數據（restcloud.test）
        使用Navicat查看目標表數據（test.test）
        執行插入語句
        監控面板統計圖
        再次使用Navicat查看源表數據（restcloud.test）
        目標表數據（test.test）
        通過對比發現ETLCloud CDC實時同步功能成功使用。
        ETLCloud CDC實時同步功能是一種高效、可靠的數據同步方案，它可以用于實現源數據庫和目標數據庫之間的實時同步，從而提高數據集成和應用開發的效率。
        ETLCloud CDC社區免費版本下載地址：ETLCloud 全域數據集成平臺
        				  
						  
        標簽：
							 
							
        
				  				  
        
                
        
        
            ?
            
            
        
                  
                  
        
                
        
                      
        
                    
        
                          
                        
        
                    
                                   
        放水后遺癥：美企招人難在哪
        
                                                     
                        
        
                  
        
                    
        
                
                
                
                
                
              
        
                
        
				 
          
        
            
        
        
        
              
        
                  
                          
        
                  
        相關推薦
        
                                    
        
                
        
                      
        三氯蔗糖是什么糖 三氯蔗糖對血糖有影響嗎？
        
                      聚焦 2023/04/23 
        
              
        
                                    
        
                
        
                      
        松茸為什么不能水洗 松茸學名是什么？
        
                      聚焦 2023/04/23 
        
              
        
                                    
        
                
        
                      
        北海是哪個省城市 北海有什么特色小吃？
        
                      聚焦 2023/04/23 
        
              
        
                                    
        
                
        
                      
        魚缸用什么消毒殺菌好 魚缸定期殺菌用什么藥？
        
                      聚焦 2023/04/23 
        
              
        
                                    
        
                
        
                      
        海水鹽度一般是多少 海水成分包括哪些？
        
                      聚焦 2023/04/23 
        
              
        
                              
        
                  
        
                      
                              
        
                
        熱門資訊  日 周 總  
        
                
        
                      
                             
        
                          
        
                        
        安徽省率先實現紅托竹蓀工廠化種植 助推食藥用菌產業錯位化高質量發展
        
                        健康 2022/09/05 
        
                        
        
                                        
        
                          
        
                        
        中山首個“港澳藥械通”醫療器械獲批 目前國內尚無同類產品
        
                        健康 2022/08/29 
        
                        
        
                                        
        
                          
        
                        
        遼寧省建立首批食品安全抽檢專家庫 化解食品安全風險隱患
        
                        健康 2022/08/19 
        
                        
        
                                        
        
                          
        
                        
        2022太湖灣生命健康未來大會舉行 無錫推動生命健康產業發展躍級
        
                        健康 2022/08/08 
        
                        
        
                                        
        
                          
        
                        
        62歲阿姨“捂出”熱射病被送進ICU 免疫力低下人群更要注意這些
        
                        健康 2022/07/21 
        
                        
        
                     
        
                      
                             
        
                          
        
                        
        暑期檔全國電影票房破75億 共有91部新片上映
        
                        節目 2022/08/16 
        
                        
        
                                        
        
                          
        
                        
        廣東文藝院團積極尋求創作與市場全面“破圈” 激活高雅文藝演出“內循環”
        
                        節目 2022/08/02 
        
                        
        
                                        
        
                          
        
                        
        馮小剛新劇時隔25年重回小熒幕 多個話題均已實現閱讀量破億
        
                        節目 2021/07/14 
        
                        
        
                                        
        
                          
        
                        
        動畫站上7月影市“C位” 吸引多家公司掘金
        
                        節目 2021/07/06 
        
                        
        
                                        
        
                          
        
                        
        人工智能等技術賦能 推動傳統戲曲文化與表演創新
        
                        節目 2021/07/02 
        
                        
        
                     
        
                      
                             
        
                          
        
                        
        我國短視頻領域市場規模為2051.3億元 同比增長57.5%
        
                        直播 2021/06/17 
        
                        
        
                                        
        
                          
        
                        
        TFBOYS吸金力也不容小覷 峰峻文化能否順利運營還需一定的市場機遇
        
                        直播 2021/06/16 
        
                        
        
                                        
        
                          
        
                        
        打造自營電商 “美團小店”加碼實物電商
        
                        直播 2021/06/08 
        
                        
        
                                        
        
                          
        
                        
        發力企業采購領域 京東申請注冊京東工業商標
        
                        直播 2021/06/04 
        
                        
        
                                        
        
                          
        
                        
        全國已有345個城市包裹實現“半日達”
        
                        直播 2021/06/02 
        
                        
        
                     
        
                    
        
              
        
                  
                      
                              
         
        
                  
        
                
        推薦More
        
                                
         
                      
        看誰收得多，比誰損失少！我省小麥機收減損活動掠影
        
                    
        
                                
              
        
                
        
          
        
            
        
      
        
        
        
  
        
      
        
      
        


欧美色欧美亚洲高清在线视频_日本91AV在线观看_91久国产成人在线_狠狠久久综合