CentOS HDFS数据压缩技术可减少存储空间、提高传输效率，以下是相关介绍：
常用压缩算法
- Gzip：压缩率高，速度适中，Hadoop原生支持，但不支持文件分割，适用于小文件（如日志文件，每个文件压缩后小于130M）。
- Snappy：压缩和解压速度快，压缩比合理，支持Hadoop native库，但不支持文件分割，适用于实时处理场景，如MapReduce作业中间数据。
- Bzip2：压缩率最高，支持文件分割，Hadoop原生支持，但速度慢，适用于对压缩率要求高、对速度要求低的场景，如数据归档。
- LZO：压缩和解压速度较快，支持文件分割，需额外安装，适用于大文件（压缩后大于200M）。
- Zstandard（Zstd）：压缩速度快，提供多种压缩级别，灵活性强，适用于需要平衡压缩比和速度的场景。
配置方法
在hdfs-site.xml中添加配置参数，如io.compression.codecs指定使用的压缩算法类。在使用计算框架（如MapReduce）时，可在作业配置中指定压缩算法。
