Hive压缩相关的调优参数有哪些?

提问者:帅平 问题分类:大数据
Hive压缩相关的调优参数有哪些?

 您阅读本篇文章共花了: 

1 个回答
少女榨汁机
少女榨汁机
压缩是Hive性能优化中的一个重要参数。使用Hadoop支持的压缩格式,可以优化Hive查询的执行速度,减少磁盘空间的占用。以下是一些常见的Hive压缩参数:
hive.exec.compress.output:是否对输出进行压缩,默认为false。
hive.exec.compress.intermediate:是否对中间结果进行压缩,默认为false。
hive.exec.compress.intermediate.codec:中间结果压缩编**,默认为org.apache.hadoop.io.compress.DefaultCodec。
hive.output.compression.type:输出压缩类型,默认值是NONE,支持的压缩类型有:DEFLATE、GZIP、BZIP2、LZO、SNAPPY、ZSTD等。
hive.mapred.output.compression.codec:输出压缩编**,默认为org.apache.hadoop.io.compress.DefaultCodec。
hive.exec.orc.default.compress:ORC文件压缩格式,默认是SNAPPY,可选的有:ZLIB、NONE、LZO、SNAPPY、ZSTD等。
发布于:5个月前 (11-20) IP属地:四川省
我来回答