Debian系统优化HBase读写性能的实践指南
/etc/sysctl.conf文件，调整以下关键参数：
vm.swappiness=0：禁用交换分区，避免内存不足时频繁换页导致性能下降；fs.file-max=1000000：增加系统最大文件描述符数，满足HBase大量文件（HFile、WAL等）的打开需求；net.core.somaxconn=65535：提升TCP连接队列长度，应对高并发请求。sysctl -p使配置生效。noatime（不更新访问时间）或relatime（减少访问时间更新频率），降低磁盘I/O开销。例如，在/etc/fstab中添加：defaults,noatime,discard（discard启用TRIM功能，优化SSD寿命）。hbase-env.sh中设置HBASE_REGIONSERVER_OPTS，将堆内存（-Xms与-Xmx）设为相同值（如-Xms8g -Xmx8g），避免堆内存波动导致GC停顿；同时开启-XX:+UseG1GC（G1垃圾回收器），优化大内存下的GC效率。hbase-site.xml配置内存分配：
hbase.regionserver.global.memstore.size：设置MemStore总大小（建议为堆内存的30%-40%，如0.4）；hbase.regionserver.blockcache.size：设置BlockCache大小（建议为堆内存的30%-50%，如0.5），优先缓存热点数据以提升读性能。hbase.hregion.max.filesize调整Region最大容量（建议10GB-20GB，如10737418240字节），避免Region过大导致split开销或过小导致region过多增加元数据负载。Put批量提交），减少RPC调用次数；修改hbase-site.xml中的hbase.wal.sync.enabled为false（异步写入WAL），提升写入吞吐量（需权衡数据安全性，仅在允许少量数据丢失的场景下使用）。hbase.hregion.memstore.flush.size（如134217728字节，128MB），控制MemStore刷新阈值；增加hbase.hstore.flusher.count（如4）和hbase.regionserver.thread.compaction.small（如16），提升MemStore刷新与小Compaction的并发效率，减少写入阻塞。hbase.regionserver.blockcache.size（如0.6），并将BlockCache设置为off-heap（HBase 2.0+默认支持），避免GC影响读性能。Scan缓存的setCaching参数（如500或1000），减少客户端与RegionServer间的RPC次数；客户端使用get(List<Get>)批量获取数据，降低网络开销。hbase.hregion.columnfamily.block.cache.size）。preSplit参数预先划分Region（如hbase shell中的create 'table_name', 'cf', {NUMREGIONS => 10, SPLITALGO => 'HexStringSplit'}），使数据均匀分布在多个RegionServer上，避免后续split导致的性能波动。-XX:+UseG1GC），并通过以下参数优化：
-XX:MaxGCPauseMillis=200：设置最大GC停顿时间为200ms；-XX:InitiatingHeapOccupancyPercent=45：当堆内存占用达到45%时触发并发GC周期；-XX:+ParallelRefProcEnabled：并行处理引用对象，提升GC效率。hbase.hfile.compression设为snappy），减少数据存储空间与网络传输开销（压缩率约为2-3倍，对读性能影响较小）。hbase.hregion.memstore.mslab.enabled（默认开启），将MemStore分配在预分配的内存池中，减少内存碎片化，降低Full GC频率。http://<regionserver>:16010）监控集群状态（如RegionServer负载、Region数量、读写延迟）；通过JMX接口获取详细性能指标（如GC时间、MemStore使用量）。
