centos readdir为啥慢

在 CentOS（以及大多数 Linux 发行版）上，readdir（更准确说是 getdents / getdents64 系统调用，glibc 的 readdir() 只是其封装）慢，通常不是“函数本身慢”，而是目录本身或使用方式导致。下面按常见原因从高到低说明。

1. 目录里文件太多（最常见）

现象

• 一个目录里有 几万 / 几百万个文件
• ls 卡住、find 慢、程序 readdir 很久才返回

原因

• readdir 会顺序遍历目录项
• 目录越大，遍历时间线性增长
• 尤其 ext4 / xfs 在未优化时更明显

解决办法

✅ 拆分目录

data/202601/01/xxx
data/202601/02/xxx

✅ 单目录控制在 1万以内 最佳

2. 目录项非常多但只想要“是否存在”

错误用法

while ((entry = readdir(dir))) {
    if (strcmp(entry->d_name, "xxx") == 0) break;
}

优化建议

• 直接用 stat() / access()
• 或维护索引（数据库 / Redis）

3. 文件系统类型影响

不同 FS 表现

NFS 特别慢原因

• readdir 要 网络往返
• 每次返回有限条目
• 大目录 = 多次 RPC

✅ 建议：

• NFS 上 不要放大目录
• 或本地缓存目录列表

4. inode / 磁盘 IO 瓶颈

如果：

• 磁盘 IO 高
• inode 表压力大

readdir 会受牵连。

检查

iostat -x 1
df -i

5. 目录被频繁写入

• 边 readdir 边 create / unlink
• 目录元数据频繁变化

→ 导致缓存失效，反复读磁盘

6. SELinux / audit 影响（CentOS 特有）

在 CentOS 上：

• SELinux
• auditd

可能对目录访问做额外检查

排查

getenforce
systemctl status auditd

7. glibc readdir 缓冲机制

• readdir() 是逐条返回
• 底层 getdents64 一次读一批
• 但用户态仍是循环

如果你：

• 频繁 opendir / readdir / closedir → 开销叠加

✅ 建议：

• 一次读完
• 不要反复打开同一目录

8. 真的是“慢”还是“第一次慢”？

• 第一次：page cache 为空 → 读磁盘
• 第二次：内存缓存 → 非常快

vmtouch -v /path/to/dir

快速自查清单

ls -1 | wc -l
df -i
iostat -x 1
mount | grep dir

总结一句话

CentOS 上 readdir 慢，90% 是因为“目录太大”或“在慢文件系统（NFS）上”。

如果你愿意，可以告诉我：

• 文件数量
• 文件系统（ext4 / xfs / nfs）
• 是 C / Python / shell 调用
• 单目录还是递归

我可以给你针对性优化方案或代码级建议。