在當今互聯(lián)網(wǎng)時代，企業(yè)和平臺每天都在生成數(shù)以億萬計的數(shù)據(jù)。如何高效、可靠地將這些海量數(shù)據(jù)從一個環(huán)境遷移到另一個環(huán)境，同時保障數(shù)據(jù)的一致性和實時性，是數(shù)據(jù)工程面臨的首要挑戰(zhàn)之一。阿里巴巴數(shù)據(jù)技術(shù)及產(chǎn)品部圍繞著數(shù)據(jù)處理與存儲的核心能力，打造了一套被稱為DTCC（Distributed Transaction Task & Core Control）的世界級系統(tǒng)，用以解決海量數(shù)據(jù)遷移與同步的核心架構(gòu)問題。\n\n## 1. 背景與核心需求\n數(shù)據(jù)量的急速增長環(huán)境下，多地基礎(chǔ)設(shè)施冗余、云數(shù)據(jù)庫之間的零配信及時復(fù)制不容失敗；受異常操作、數(shù)據(jù)結(jié)構(gòu)更新頻繁的背景背景下，阿里渴望：\n 全量數(shù)據(jù)遷移與秒級增量同步 ； \n 橫向可壓縮倍數(shù)的計算后的延遲性能、一致性可接近 \\\\\\\