centos readdir怎样避免阻塞

在 CentOS（Linux） 上，readdir()（以及 opendir()/readdir_r()）本身是 同步、可能阻塞 的系统调用，尤其在以下情况会卡住：

• 目录在 NFS / 网络文件系统
• 目录 文件极多（几十万+）
• 目录在 慢磁盘 / 损坏文件系统
• 目录是 FUSE / 挂载设备

下面按 实用程度 给你几种避免或降低阻塞的方法。

一、最常用：放到线程里（推荐）

这是 最简单、最稳妥 的方式。

#include <pthread.h>
#include <dirent.h>

void *scan_dir(void *arg) {
    DIR *dir = opendir((char *)arg);
    if (!dir) return NULL;

    struct dirent *entry;
    while ((entry = readdir(dir)) != NULL) {
        // 处理文件
    }
    closedir(dir);
    return NULL;
}

int main() {
    pthread_t tid;
    pthread_create(&tid, NULL, scan_dir, "/data/big_dir");
    pthread_detach(tid);
}

✅ 主线程不阻塞
✅ 代码简单
✅ CentOS 默认支持

二、使用 readdir_r（线程安全，但不解决阻塞）

struct dirent entry;
struct dirent *result;

while (readdir_r(dir, &entry, &result) == 0 && result) {
    // 处理
}

⚠️ 只是线程安全，不避免阻塞

三、使用 getdents() + 非阻塞思路（进阶）

readdir 本质调用 getdents64()。

思路

• 自己调用 getdents64
• 在 子进程 / 线程 中读取
• 通过 pipe / 共享内存 回传结果

⚠️ 复杂，一般不推荐，除非你写底层工具

四、使用 inotify（不是扫描，是监听）

如果你是“想知道目录变化”，而不是“遍历”：

inotifywait -m /path

✅ 完全不阻塞
❌ 不能替代 readdir

五、超时保护（防止永久卡死）

方法 1：子进程 + alarm

alarm(5); // 5 秒超时
readdir(dir);

⚠️ 只能用于主线程，且不可重入

方法 2：子进程 + waitpid 超时（推荐）

pid_t pid = fork();
if (pid == 0) {
    // 子进程 readdir
    exit(0);
}
int status;
waitpid(pid, &status, WNOHANG);

六、NFS / 网络目录特别说明（重要）

如果是：

df -h /path
# nfs / cifs / fuse

✅ 强烈建议：

• 使用 soft 挂载
• 加 timeo=, retry=

mount -o soft,timeo=10,retry=2 nfs:/data /mnt

否则 readdir 可能 卡几分钟

七、总结建议（直接选）

如果你愿意，可以告诉我：

• 你用的是 C / C++ / Python / Shell
• 是 本地盘还是 NFS
• 目录大概 多少文件

我可以给你 可直接用的代码模板。