hadoop - 压缩RC表 hive

Question

我正在尝试压缩创建的RC表，如下所示:

create table rc_test(
   a string,
   b string)
stored as rcfile

我有另一个 Parquet ，我这样做是:

alter table parquet_test set tblproperties ("parquet.compression"="snappy");

RC表的tblproperties是什么？

Answer 1

您可以在Hive中插入覆盖表之前，在同一 session 中设置此属性:

SET hive.exec.compress.output=true;
SET mapred.output.compression.type=BLOCK;
SET mapred.output.compression.codec=org.apache.hadoop.io.compress.SnappyCodec;