为 Delta Lake 中的表创建索引

Question

我是 Delta Lake 的新手，但我想为 Delta Lake 中的某些表创建一些索引以便快速检索。根据文档，它表明最接近的是通过创建数据跳过然后索引跳过的部分：

create DATASKIPPING index on [TableName] [DBName.]tableName

除了数据跳过之外，似乎找不到其他创建索引的方法

如何在 Delta Lake 中像 RDBMS 中的任何表一样创建索引？

谢谢！

Answer 1

索引发生在automatically on Databricks Delta 和OSS Delta Lake as of v1.2.0。在您写入数据时，您写入的文件中的列会被索引并添加到​​内部表元数据中。当您查询数据和过滤器时，会应用数据跳过。

此外，您可以在 Databricks Delta 上使用 z-order 来优化基于特定列的文件。同样，索引仍将用于其他列。