達夢數據交換平臺(DMETL)是達夢公司在十余年數據處理經驗的基礎上,研制開發的具有自主知識產權的、商品化的數據交換與處理平臺。達夢數據交換平臺創新地將傳統的ETL工具(Extract、Transform、Loading)與分布式消息平臺相結合,實現了對數據抽取、傳輸、整合以及裝載的一站式支持,是構建數據中心、數據倉庫、數據交換和數據同步等數據集成類應用的理想平臺,同時也可以作為數據加工處理工具由業務人員依據個性化需求靈活配置使用。
DMETL已被廣泛應用于公安、信用、電力、國土、住建、社保、政法、政務等多個行業的數據中心項目中,為各類數據集成項目建設提供從數據采集、清洗加工、數據質量檢測到快速裝載的全面支持。
系統采用可擴展的數據源適配器和消息適配器來支持異構數據源的數據交換
支持全量和增量的方式交換數據
支持故障的自主檢測和事后恢復
支持數據可靠加密傳輸,保證數據安全
支持統一監控,能夠對多臺數據交換服務器和數據源的狀態進行監控和統計分析
支持數據分區并行處理
分布式接力式部署,更全面
具有消除雙向復制反饋的機制
交換服務器支持統一控制、分布式部署
支持基于消息的接力式部署和數據路由
支持數據流程的斷點及調試功能
批量轉換生成功能,可根據模板快速生成大量的轉換,提升實施部署效率
基于規則的數據清洗轉換引擎,可以實現邊預覽邊配置
內置了豐富的數據轉換規則,包含簡繁體、漢字拼音、亂碼處理、字符集轉換、中文數字等
支持元數據信息的文檔生成
? ? ? ? DMETL能夠支持DM到Oracle、SQL Server、DB2、MySQL等等主流數據庫的數據同步,DMETL的同步一般為表級同步,實時性和大數據量的情況下性能不如DMHS,但在支持的數據源種類,以及數據清洗轉換功能上優于DMHS,適合于在同步中還要進行數據清洗轉換的應用場景。DMETL可以與DMHS結合使用,實現對源庫避免產生過深介入的同時,完成復雜的數據清洗轉換業務的效果。
DMETL和DMHS兩者都可以實現異構數據的整合,以及數據的清洗轉換功能。
DMETL設計重點目標是用于數據中心進行異構數據的整合,因此支持完善、復雜的數據清洗、轉換規則,能夠支持靈活的2次開發,但對源端的邏輯存儲結構產生影響,占用資源較多。
DMHS設計重點目標是支持異構數據庫之間的秒級數據同步,是基于源庫的聯機日志分析捕獲,不會對其邏輯存儲結構產生影響,占用資源較少,效率更高,而清洗轉換規則方面較ETL簡單。
達夢提供多種方式供用戶將數據從Oracle遷移到達夢,包括:遷移工具DTS、數據交換平臺DMETL、異構數據實時同步工具DMHS。
達夢官網www.exclut.com,“數據庫產品及解決方案”--“數據庫系列”--“達夢數據庫管理系統(DM8)”--“試用下載”--“下載中心”--“產品下載”有開發試用安裝包,可以免費下載試用。
試用開發包,建議您用于研究學習和了解功能、不要投入生產正式使用,自版本號開始免費試用1年。
安裝包解壓后有具體的安裝教程,您可以對照操作,另外需要提示您,開發的key是內嵌的,您在安裝過程中直接跳過即可。