Spark Streaming中WAL内幕实现彻底解密

Spark Streaming中WAL内幕实现彻底解密
1 WAL 框架和实现
2 spark streaming中WAL的使用

WAL 是一个存储系统，相当于Blockmanager，可以简单的认为，WAL就是一个文件系统。

WAL 在存储系统上面加了一层，加了一个时间维度和索引的位置。