深入理解 Apache Spark Delta Lake 的事務(wù)日志

深入理解 Apache Spark Delta Lake 的事務(wù)日志

事務(wù)日志是理解?Delta Lake 的關(guān)鍵，因?yàn)樗秦灤┰S多最重要功能的通用模塊，包括 ACID 事務(wù)、可擴(kuò)展的元數(shù)據(jù)處理、時(shí)間旅行（time
travel）等。本文我們將探討事務(wù)日志（Transaction
Log）是什么，它在文件級(jí)別是如何工作的，以及它如何為多個(gè)并發(fā)讀取和寫入問題提供優(yōu)雅的解決方案。

事務(wù)日志（Transaction Log）是什么

Delta Lake?事務(wù)日志（也稱為 DeltaLog）是?Delta Lake 表上執(zhí)行每次事務(wù)的有序記錄。具體形式如下：
[email protected]:/tmp/delta-table/_delta_log| ? ll total 280
-rw-r--r-- 1 yangping.w

• ? 上一篇： Prometheus監(jiān)控實(shí)踐：Kubernetes集群監(jiān)控
• ? 下一篇：工作中常見的設(shè)計(jì)模式-策略模式