管道(Pipe)

管道(Pipe)是类 Unix 操作系统提供的一种进程间通信机制,由内核维护一段缓冲区,构成先进先出的单向字节流:一个进程从写端写入数据,另一个进程从读端按写入顺序读出。管道思想由道格拉斯·麦克罗伊(Douglas McIlroy)提出,1973 年由肯·汤普逊(Ken Thompson)实现进 Unix,成为 Unix 哲学中组合小工具完成复杂任务的基石。

概述

管道分为两类。匿名管道通过 pipe 系统调用创建,返回一对文件描述符,通常配合 fork 在父子进程等有亲缘关系的进程间使用,shell 命令行中的竖线正是它最著名的应用。命名管道又称 FIFO,通过 mkfifo 创建,在文件系统中以特殊文件的形式存在,任何有权限的进程都可以打开它进行读写,因此适用于无亲缘关系的进程。

核心原理

• 管道是半双工的,数据只能单向流动;需要双向通信时须创建两条管道或改用套接字。
• 内核为每条管道维护一个环形缓冲区,Linux 上默认容量为 64KB,可通过 fcntl 调整。
• 缓冲区写满时写进程阻塞,缓冲区为空时读进程阻塞,天然形成流量控制。
• 所有写端关闭后,读端读到文件末尾;所有读端关闭后再写入会触发 SIGPIPE 信号,默认令写进程终止。
• POSIX 保证不超过 PIPE_BUF(Linux 为 4096 字节)的单次写入是原子的,不会与其他写者的数据交错。

应用场景

管道最大的舞台是 shell:把 grep、sort、uniq、awk 等小程序串成流水线,是 Unix 用户的日常操作。程序设计中,父进程常用管道读取子进程的输出,popen 函数正是对这一模式的封装;命名管道则常用于日志收集、简单的本机服务通信等场景。相比共享内存,管道无需同步原语、接口简单,但存在数据拷贝开销,吞吐要求极高的场景通常改用共享内存或 Unix 域套接字。

常见问题

问:管道和重定向有什么区别？答:重定向把命令的输入或输出接到文件,管道把一个进程的输出直接接到另一个进程的输入,数据经内核缓冲区传递,不落盘。

问:为什么脚本里会遇到 Broken pipe 错误？答:当读端已经关闭(例如 head 读够行数后退出),写端继续写入就会收到 SIGPIPE 信号或得到 EPIPE 错误,这是管道的正常保护机制。

问:命名管道里的数据存在磁盘上吗？答:不存。FIFO 文件只是文件系统中的一个入口,数据仍然只经过内核内存缓冲区,进程读走即消失,管道关闭后不留痕迹。