To improve query speed, Delta Lake on Databricks supports the ability to optimize the layout of data stored in cloud storage. Delta Lake on Databricks supports two layout algorithms: bin-packing and Z-Ordering.
如果您在本地(不在云端)运行并在 Spark 中使用 delta
格式(因此不在 Databricks 上),是否可以使用 Z 排序?或者它仅在 Databricks 运行时可用?
我的假设是肯定的,但只是想弄清楚,因为我手头没有 RHEL 集群。
最佳答案
仅 Databricks 运行时上的 Delta Lake 支持 z 排序。
更新 Delta Lake 2.0宣布支持Z-Ordering
关于apache-spark - 非 Databricks 平台上的 Spark Delta 格式,我们在Stack Overflow上找到一个类似的问题: https://stackoverflow.com/questions/68670286/