学习 / TSENGCHEN BLOG

Linux-PageCache-And-IO--07-Appendix-Answers-and-Resources

01_Learning · 第 10 / 23 篇

附录:自检题参考答案、资源与源码索引

1. 各章自检题参考答案

第 1 章 虚拟内存基础

  1. 是同一份数据。 两个 VMA 底层指向同一个 inode 的同一个 address_space,读到的 folio 都来自这棵 XArray,页缓存是唯一数据源。
  2. mmap 只建立 VMA 不建页表,物理内存占用为零;访问时逐页缺页(主缺页,从页缓存/磁盘调入)后 PTE 才建立,Rss 随访问增长。
  3. 主缺页需要磁盘 I/O(数据不在内存);次缺页不碰盘(页已在内存或分配匿名页,只补映射/分配)。
  4. folio 包装一组连续物理页(内嵌一个 struct page);内核以它为单位做锁、引用、缓存索引,把按 4KB 页的重复管理合并,并为文件缓存大页化打基础。

第 2 章 观测实验

  1. 第一次读 eMMC(缓存已清,真实盘读);第二次读内存(页缓存命中,dd 的数据源是 RAM)。
  2. 不一定安全。丢失窗口由 dirty_background_ratio/dirty_ratio(决定回写何时启动)与 dirty_expire_centisecs(脏页最长滞留时间,默认 30 秒)共同控制;未 fsync 且未过期的脏页都可能丢。
  3. 干净文件页可随时从磁盘重读,回收零成本;匿名页回收必须写入 swap(嵌入式通常没有 swap,只能 OOM 或卡在直接回收),代价高一个数量级。
  4. O_DIRECT 绕过页缓存和预读:没有缓存命中,没有预读合并,每次都是真实磁盘 I/O,且对齐要求限制了请求效率。

第 3 章 页缓存主线

  1. 可能:(1) 该页曾被回收(内存紧张)需要重读;(2) 文件刚被别的进程改过导致缓存重新从盘读;(3) NFS 等网络文件系统的缓存一致性重验。
  2. 顺序命中时窗口成倍扩张(上限约 read_ahead_kb);检测到访问偏移跳跃(随机访问)则收缩归零。所以随机读基本不会被误预读,代价是随机读完全没有预读收益。
  3. 超过 dirty_background_ratio(约 10%)只唤醒后台线程,写入者不受限;超过 dirty_ratio(约 20%)写入进程在 balance_dirty_pages() 里被摁住亲手刷页。
  4. 干净页回收后再次访问:主缺页,从盘重读进页缓存再建映射;匿名页回收必须先写 swap,恢复要两次盘操作,无 swap 时直接触发 OOM。
  5. fsync() 只处理该文件的脏页 + 日志提交 + 设备 flush,不等全局水位,因此获得可靠性的延迟可控;全局回写线程按水位/超时批量刷,吞吐高但无单文件时延保证。

第 4 章 VFS 与 I/O 栈

  1. 一个 inode,两个 struct file;各自 f_pos 独立,互不影响(共享偏移要用 preadv2/文件表共享等手段,属例外)。
  2. fsync() = 该文件脏页回写 + ext4 日志提交(元数据持久化)+ blkdev_issue_flush() 刷设备内部缓存;fdatasync() 在文件大小等关键元数据未变时可省日志部分,更快。
  3. O_DIRECT 的 write() 返回意味着数据已走完块层路径提交到设备(通常已写入介质或设备缓存),不依赖页缓存异步回写;本质是从”写缓存即返回”变成”同步下盘路径”。
  4. 高队列深度、大量并发小 I/O(4K 随机读写、数据库、高 IOPS 网关)提升明显;单流大块顺序 I/O 系统调用占比极低,几乎无感。

第 5 章 零拷贝

  1. 剩 1 次:页缓存页数据被 CPU 拷进 skb 的连续缓冲(无 SG-DMA 时驱动需要线性缓冲),发生在协议栈/驱动侧;SG-DMA 打开后归零。
  2. pipe_buffer 存 {page, offset, len, ops}——对物理页的引用;tee 只在第二个管道复制登记项并增加页引用计数,物理数据始终只有一份。
  3. 页引用计数:挂入 frags 时 folio_get(),TX 完成(DMA 已读)且对端 ACK 后才 folio_put();引用未清零前回收器不会动这个页。
  4. 硬件可能还在通过 DMA 读用户页;提前改写会把损坏的数据发上网。回执(error queue 的 SO_EE_ORIGIN_ZEROCOPY)表示硬件读完,可安全复用。
  5. 静态资源服务器:sendfile + SG-DMA + TSO/checksum offload;TLS 代理:数据必须加密,普通 sendfile 不适用——优先 kTLS(加密下沉到网卡/内核,保留零拷贝),否则老实用普通读写路径,不要为了零拷贝绕开加密。

第 6 章 DMA 与 dma-buf

  1. TO_DEVICE:clean(把 cache line 冲到 DDR,设备读到新数据);FROM_DEVICE:invalidate(丢弃 cache line,防止 CPU 读到旧值)。方向不同、“最新数据”的生产者不同,动作必须相反。
  2. 设备正持有该内存的 DMA 所有权,且缓存状态已被改;CPU 要访问用 dma_sync_single_for_cpu()(含 invalidate),用完交还用 dma_sync_single_for_device()(含 clean)。
  3. IOMMU 把离散物理页映射成设备视角的连续 IOVA,无需物理连续;swiotlb 出现说明设备无法直达目标地址,内核用 bounce buffer 中转,等于自动插入一次拷贝。
  4. 都是 {page, offset, len} 引用集合;全程传递引用不复制数据;用引用计数保证最后一个使用者用完才释放。
  5. 序列:ISP 用 MMAP 分配采集 buffer → VIDIOC_EXPBUF 导出 dma-buf fd → 编码器(mpp/V4L2 DMABUF 模式)QBUF 该 fd → 编码输出 buffer 同样以 fd 交给下一级;全程 memcpy 0 次。

2. 学习资源

  • 书:《Understanding the Linux Kernel》(Bovet,框架经典稍旧)、《Professional Linux Kernel Architecture》(Mauerer,细节)、《Linux Kernel Development》(Love,入门)、《BPF Performance Tools》(Gregg,观测)
  • 在线:LWN.net 关键词 page cache、folio、splice、MSG_ZEROCOPY、dma-buf;内核文档 Documentation/(vm/、core-api/dma-api-howto.rst、driver-api/dma-buf.rst、userspace-api/media/v4l/)
  • 看码:elixir.bootlin.com(切 v6.1)、本地 cscope/clangd
  • 板上工具:vmstat、/proc/meminfo、vmtouch、fio、ethtool -k、ftrace、/sys/kernel/debug/dma_buf/bufinfo

3. 中英文检索关键词

中文英文检索词
页缓存page cache internals, address_space, XArray page cache, folio
预读Linux readahead
脏页回写writeback, dirty_ratio, balance_dirty_pages, bdi flusher
页回收page reclaim, LRU, kswapd
零拷贝Linux zero-copy, sendfile implementation, splice pipe_buffer, MSG_ZEROCOPY
大包卸载TSO GSO offload, scatter-gather DMA
直接 I/OO_DIRECT, direct I/O alignment
异步 I/Oio_uring tutorial
DMA 映射dma_map_single, dma_sync, streaming vs coherent DMA
缓冲共享dma-buf framework, CMA shared-dma-pool, IOMMU IOVA

4. 6.1 内核源码索引

路径内容
mm/filemap.c页缓存核心:filemap_read、generic_perform_write、filemap_fault
mm/readahead.c预读状态机
mm/page-writeback.c、fs/fs-writeback.c脏页限流与回写线程
mm/vmscan.cLRU 回收
fs/pipe.c、fs/splice.cpipe_buffer 与 splice/sendfile
net/core/skbuff.cskb frags、zerocopy 回执
fs/read_write.ccopy_file_range
kernel/dma/、drivers/iommu/DMA 映射与 IOMMU
drivers/dma-buf/dma-buf 框架
drivers/media/common/videobuf2/V4L2 缓冲管理(vb2)
01_Learning · 文档目录
上一篇Linux-PageCache-And-IO--06-Embedded-DMA-Practice下一篇RK3576-Industrial-Bus-Driver-Course--00-Start-Here