今天值得花 3 分钟看两笔「可编程化」:iocost 把 IO 成本模型开放给 BPF struct_ops,块设备计费公式从此可以热更新;以及 AMD 提案 3D LUT 走 DMA 通道,Intel 维护者当场质疑 UAPI 设计——相机链路的同学另外留意 Rockchip VICAP 的 MIPI 丢行自愈。

封面 · 11月4日 · 内核日报

🎬 今日导读

/ section
头条 iocost 成本模型交给 BPF struct_ops(v12);AMD 提案 3D LUT 走 DMA,Intel 当场质疑用 framebuffer 传非像素数据
media 高通 CAMSS 离线处理引擎到 v13;Rockchip VICAP 学会从 MIPI 丢行中自愈;qcom-mipi-csi2 PHY 扩展三颗 SoC
DRM 背光亮度控制进 connector property 到 v11;GPU 设备页「fault 即迁移」到 v17
mm vmalloc/ioremap 连续内存加速到 v11;x86 批量 TLB 冲刷学会跳过 stale/lazy CPU
PCI/net/fs 延迟热插拔子树资源预留;mlx5 虚拟 LAG 十五连发;XFS write streams 到 v7
Rust/LSM drm::JobQueue v7 暴露依赖队列死亡传播问题;KEYS 垃圾回收器大扫除引出 add_key2() 提案

💡 今日头条

/ section

块设备 IO 怎么计费,以后 BPF 程序说了算

〔11-03 21:26 北京〕· [RFC PATCH v12 0/4] blk-iocost: BPF struct_ops cost model

现状 iocost 是 cgroup v2 的 IO 控制器:给每个 cgroup 的 IO 算「成本」,按权重分配磁盘带宽。成本由内置线性公式算出——几个设备参数(顺序/随机性能)套一个固定式子。
痛点 正确的成本公式是因盘而异的:NVMe、SATA SSD、机械盘的性能曲线完全不同,内置线性模型对很多设备并不准,而改公式要改内核、重新编译、重新部署。
方案 4 个补丁让 BPF 程序接管单块设备的成本模型:BPF 侧实现 calc_cost() 回调与两个完成时间系数,io.cost.model 在内置模型与挂接的 BPF 模型间切换,控制器开关仍归 io.cost.qos 管。
为什么 用 BPF struct_ops(把内核回调结构体开放给 BPF 实现)而不是新增一整套 ABI:模型可以按盘定制、按固件版本热更新,内核只留框架;这也是 sched_ext 之后「子系统策略可编程化」路线在 block 层的落子。
效益 存储团队可以为自己的盘调出不失真的成本模型,IO 隔离从「大概公平」变成「按设备实测公平」;附带的自测在机械盘上实测 2x 示例模型计费 2.01 倍,切回 linear 即复原。
下一步 v12 已收敛到 4 个补丁、全部折叠进 blk-iocost.c,叠加 tracepoint 与 cgroup-v2 文档;等块层与 BPF 双侧维护者意见,合入后各发行版的 IO 隔离策略库会迎来一批按盘定制模型。
一句话点评 成本公式这种「因硬件而异」的策略,本来就不该硬编码进内核——这系列是 BPF struct_ops 版图扩张的自然下一步。

AMD 想让 3D LUT 走 DMA 秒加载,Intel 反问:为什么用 framebuffer 装 LUT?

〔11-04 05:38 北京〕· [PATCH v1 00/13] Add DRM_COLOROP_3D_LUT_DMA for fast-loading 3D LUT

现状 DRM color pipeline(色彩管线)用 colorop 对象串起色域映射各环节;3D LUT(三维查找表,把 RGB 立方体逐点映射,做精细色彩校正)是其中一环,目前 AMD 硬件上加载整张 3D LUT 要靠驱动逐寄存器写,很慢。
痛点 寄存器逐写让 3D LUT 更新成为色彩管线里最贵的一步,动态切换(如 HDR 场景切换、按内容调色)成本过高。
方案 13 个补丁新增 DRM_COLOROP_3D_LUT_DMA 类型:DCN 4 起的 AMD 硬件支持用 DMA 加载 3D LUT,驱动只需更新地址;用户态经 LUT_3D_FORMATS blob 查支持格式、LUT_3D_FORMAT 选格式,把 LUT 数据包成 drm_framebuffer 用 FB_ID 传给 colorop。KWin 分支已配套实现。
为什么 争议点正在这里:Intel 的 Ville Syrjälä 当天回复质疑——framebuffer 是装像素的,装非像素数据语义别扭;他建议内核把 LUT 从 blob 拷进 BO(显存对象)再 DMA,用户态无需关心载体,代价是多一次拷贝。UAPI 一旦合入不可改,这个取舍必须在 v1 阶段吵清楚。
效益 若落地,3D LUT 加载从「逐寄存器写」变「一次 DMA」,动态色彩调整在 AMD 新硬件上可用;合成器侧 KWin 已能优先选用 DMA 管线。
下一步 看 AMD 如何回应 FB_ID 之争——是改走 BO 方案还是为 framebuffer 用法立先例;色彩管线 UAPI 仍在快速演化,跟踪这个系列等于跟踪 DRM 色彩管理的成型过程。
一句话点评 新 UAPI 的 v1 就被资深维护者挑载体语义,这是 DRM 评审的正常强度——吵得越早在位越久。

📰 media

/ column

★ 高通 CAMSS 离线处理引擎(OPE)到 v13:ISP 硬件不止管实时采集

〔11-04 04:05 北京〕· [PATCH v13 0/9] media: qcom: camss: CAMSS Offline Processing Engine support

定位 V4L2 相机子系统 + Qualcomm CAMSS:OPE 是实时采集流水线之外的独立硬件块,专职离线图像处理——去拜耳、色彩校正、缩放。
做法 9 个补丁新增 V4L2 meta 格式承载 ISP 参数、配套 UAPI 定义与文档、OPE 驱动本体及 agatti/shikra 两颗 SoC 的 DT 节点;OPE 对内存中的帧做处理,不占实时流水线。Arduino UNO-Q 等板子将直接受益。
效益或下一步 高通平台图像处理迈出「超越 raw 采集」的第一步;v13 说明系列高度成熟,离合入不远——用高通 SoC 做相机的可以开始读 UAPI 文档了。
和你相关 OPE 这类「离线 ISP 通道」与 Rockchip 的 ISP 离线模式思路相通,值得对照看 UAPI 设计。

★ Rockchip VICAP 学会从 MIPI 丢行中自愈:不用重启采集了

〔11-03 18:45 北京〕· [PATCH 0/6] media: rockchip: rkcif: recover from a lost MIPI line

定位 Rockchip VICAP(视频采集通路)MIPI DMA 层:CSI-2 链路上丢一行,帧计数不会复位,之后每个 buffer 都是「上一帧尾巴 + 下一帧头」的拼接,奇数偏移时 Bayer 相位直接翻转——只能重启采集恢复。
做法 6 个补丁:帧首读取行计数器,连续两帧出现偏移就走既有 stop/start 路径重启流(靠中间的 runtime suspend 复位计数器);配套屏蔽复位后默认使能的中断源、修 stop 路径锁、debugfs 统计错误中断、按厂商驱动提高 DMA 写优先级,Synopsys CSI-2 接收端同步上报 err1/err2 错误分类。
效益或下一步 RV1126 + IMX415 实测复现(缩短 D-PHY settle 时间即可注入故障)并验证恢复;RK3568/RK3588 寄存器布局来自厂商内核、尚未实测——手里有 RK3588 相机链路的,这正是可以下场验证的贡献点。
和你相关 RK3588 VICAP 同款 IP:MIPI 链路稳定性问题(长线缆/边沿 settle 时间)在上游终于有了自愈路径。

★ qcom-mipi-csi2 PHY 驱动扩展三颗 SoC:CAMSS 改用通用 PHY 框架

〔11-04 05:41 北京〕· [PATCH v2 0/5] phy: qcom-mipi-csi2: Add D-PHY support for sa8775p, qcs8300 and sc7280

定位 MIPI CSI-2 D-PHY 物理层:高通通用 CSIPHY 驱动此前只支持 x1e80100,其他 SoC 的 PHY 逻辑还埋在旧版 CAMSS 驱动里。
做法 5 个补丁把 SA8775P、QCS8300、SC7280 的 D-PHY 变体纳入通用驱动:timer 与 OPP 时钟名改为可配置、OPP 表改为可选;QCS8300 与 SA8775P 硬件相同,靠 fallback compatible 复用,不新增 of_device_id。
效益或下一步 CAMSS 通过 common PHY 框架消费 CSIPHY,旧驱动内嵌 PHY 逻辑逐步退役;同构 SoC 用 fallback compatible 复用的做法,是 DT 绑定的标准姿势。
和你相关 调 MIPI D-PHY 时会和 CSIPHY 这类寄存器序列打交道,上游通用驱动是最好的参照实现。

更多动态

○ [PATCH v2 00/11] media: intel/ipu6:边界检查、IOVA 泄漏与错误处理一族修复 〔11-04 05:10〕

○ [PATCH v6 00/12] media: iris:iommu 迁移到 iris 子节点 〔11-03 23:41〕

○ [PATCH v5 0/2] media: uvcvideo:自动处理非法 uvc_version 描述符 〔11-03 22:56〕

○ [PATCH v6 0/3] media: dvb:修 dvb-core 与 dvb-usb 断开路径的一族 use-after-free 〔11-03 16:30〕

○ AMD ISP4:OV13B10 后摄在 ROG Flow Z13 上 SET_STREAM_CONFIG 失败,AMD 工程师下场排查 〔11-04 03:08〕

📰 DRM

/ column

★ 背光亮度控制搬进 DRM connector property 到 v11:三大合成器已配套

〔11-04 06:42 北京〕· [PATCH v11 00/12] Add support for a DRM backlight capability

定位 DRM 显示 UAPI 层:亮度控制此前走 legacy backlight sysfs 接口,与 KMS atomic 模型脱节;新方案把 LUMINANCE 做成 connector 的范围属性。
做法 12 个补丁只收编新 API 本身:属性默认 0→0,驱动挂上背光后更新为 1→max(面板支持最低亮度熄屏时可再到 0→max);引入 Kconfig 开关,启用新 API 的驱动与旧 backlight API 互斥,新旧两套分开落地。KWin、Mutter、wlroots 均已有配套实现。
效益或下一步 亮度调节纳入 atomic commit,合成器可在同一事务里切换亮度与画面;v8 以来评审意见大量收敛,等 v10 改动重新对齐合成器实现后推进。
和你相关 做显示链路时 backlight 接口的割裂(sysfs vs KMS)是常见坑,这个系列是终局形态。

★ GPU 设备页「fault 即迁移」到 v17:页表只走一遍

〔11-03 14:16 北京〕· [PATCH v17 00/12] migrate on fault for device pages

定位 HMM(异构内存管理)+ migrate_vma 层:GPU 驱动要把进程页迁进显存时,「fault 处理」和「迁移」此前是两个独立动作,组合起来要走两到三遍页表(x86-64 上一遍就是 1000+ 周期)。
做法 12 个补丁给 HMM API 加 HMM_PFN_REQ_MIGRATE 标志、给 migrate_vma_setup() 加 MIGRATE_VMA_FAULT/WRITE 标志——一次页表遍历里边 fault 边替换迁移项;配套 rollback 机制修复与 MADV_DONTNEED 竞争时收集数组溢出的老问题,nouveau SVM 与 test_hmm 同步落地。
效益或下一步 常见路径省一遍页表遍历,缺页密集场景省两遍;v17 的长跑说明 HMM 路径的竞态细节极难,selftests 已过,等 mm 与 DRM 双侧终审。
和你相关 统一内存/GPU 显存管理是 accelerator 时代的基础设施,HMM 每次演进都影响驱动写法。

📰 mm

/ column

★ vmalloc/ioremap/vmap 连续内存加速到 v11:与 HugeTLB 解耦

〔11-03 18:17 北京〕· [PATCH v11 00/10] mm/vmalloc: Speed up ioremap, vmalloc and vmap with contiguous memory

定位 mm/vmalloc 与架构映射层:物理连续(或部分连续)的 vmalloc 内存此前逐 PTE 设置,vmap 也不支持 PMD/cont-PTE 大映射;且 cont-PTE 路径复用 HugeTLB 的 set_huge_pte_at(),CONFIG_HUGETLB_PAGE=n 时功能静默消失。
做法 10 个补丁:先给 arm64 与 powerpc/8xx 实现独立的 vmap_pte_set_huge()/clear_huge() 并入 pmd/pud_set_huge() 家族,切断对 HugeTLB 的依赖;再批量处理 CONT_PTE 块、消除大 vmalloc 映射的页表重走,ioremap 与 vmalloc/vmap 共用 vmap_set_ptes() 助手。
效益或下一步 映射路径加速 + vmap 首获大映射(PMD 与 cont-PTE)支持,TLB 压力同步下降;配置裁剪(关 HugeTLB)的内核不再静默丢失该优化。
和你相关 驱动里 ioremap 大片 BAR/显存、vmap 拼分散页的场景都受益。

★ x86 批量 TLB 冲刷学会跳过「不在场」的 CPU

〔11-03 09:26 北京〕· [RFC PATCH 0/2] x86/mm/tlb: Skip stale and lazy CPUs in batched TLB flushes

定位 x86 MMU/TLB 管理层:批量 TLB 冲刷(arch_tlbbatch_flush)要对 cpumask 里的每个 CPU 发 IPI,但 lazy TLB 模式或上下文已 stale 的 CPU 根本不需要冲。
做法 两个 RFC 补丁:启用 INVLPGB(广播式 TLB 失效指令)时跳过 batch->cpumask 的逐位更新;arch_tlbbatch_flush 直接剔除 stale 与 lazy 的 CPU。
效益或下一步 IPI 风暴在多核高负载下是实打实的延迟源,跳过无效目标是直接收益;RFC 阶段,看 x86 维护者对 mm 通用语义改动的接受度。
和你相关 TLB shootdown 优化是近年 x86 mm 的持续热点,这条思路(lazy/stale 剔除)和 INVLPGB 硬件特性组合值得关注。

📰 PCI

/ column

★ PCI 延迟热插拔:先给整个子树预留资源

〔11-04 02:27 北京〕· [RFC PATCH v2 0/2] PCI: Reserve resources for a delayed hotplug subtree

定位 PCI 热插拔资源分配层:设备稍后才会插入(delayed hotplug)时,其下整个子树的 BAR/总线号资源没有预留机制,插入时可能因资源已被占而失败。
做法 两个 RFC 补丁在枚举阶段就为「尚未到场」的热插拔子树预留资源窗口。
效益或下一步 对接口盒、扩展坞这类「物理在、逻辑后到」的场景,热插拔成功率从碰运气变成有保障;RFC 征求对预留策略的意见。
和你相关 嵌入式板子上 PCI 设备树热插拔场景少,但服务器/工控的扩展链路会直接受益。

📰 net

/ column

★ mlx5 虚拟 LAG 十五连发:在 VF/SF 上做链路聚合

〔11-04 01:11 北京〕· [PATCH net-next 00/15] net/mlx5: LAG over VFs/SFs (virtual LAG)

定位 mlx5 驱动的 SR-IOV 层:传统 LAG(链路聚合)工作在物理口上,虚拟化场景里 VM 拿到的是 VF/SF,无法聚合作冗余或带宽叠加。
做法 15 个补丁实现 virtual LAG:把聚合能力下沉到 VF/SF 层面,配合固件能力位与 eswitch 规则下发。
效益或下一步 云主机热迁移与高可用场景里,VF 级聚合让租户网络有了底层冗余;net-next 队列,等评审。
和你相关 SR-IOV 网络虚拟化的细节机制,数据中心网卡方向可跟进。

★ skbuff 再瘦身:ubuf_info 的 ops 指针改成类型 id

〔11-04 03:46 北京〕· [PATCH net-next] net: skbuff: replace ubuf_info ops ptr with type id

定位 核心网络栈 skb 元数据层:ubuf_info(msg_zerocopy 等场景挂在 skb 上的用户缓冲区信息)里存一个 ops 函数表指针,每个实例 8 字节。
做法 把 ops 指针换成小整数类型 id, ops 表改为按 id 索引的全局表。
效益或下一步 每个 ubuf_info 实例省一个指针,零拷贝收发的海量 skb 场景内存占用下降;也是把「可扩展的虚表」收紧为「枚举类型」的接口收敛。
和你相关 skb 结构体每省一个字节,乘以并发连接数都是可观的内存。

更多动态

○ [PATCH net-next 00/14] dpll:新增模拟 DPLL 设备驱动(测试基础设施) 〔11-03 17:39〕

○ [PATCH net-next 0/5] net: ethernet: adi: adin1110:新增 OPEN Alliance TC6 支持 〔11-04 00:09〕

○ [PATCH net v3 0/2] net: gro:修 frag0 与 remcsum 处理 〔11-03 18:58〕

📰 fs

/ column

★ XFS write streams 到 v7:按应用意图隔离写入,直通 NVMe FDP

〔11-03 19:34 北京〕· [PATCH v7 0/8] xfs write streams

定位 VFS/XFS 与块层之间:应用知道哪些文件生命周期相同、该放在一起,但文件系统分配器不知道——写入交错导致锁竞争与设备内部写放大。
做法 8 个补丁新增通用 write stream 接口(fs/write_streams.c,其他文件系统可复用):应用预留 stream 并绑到文件;XFS 把 stream 映射到独立分配组(AG)与实时组(RG)减少交错与锁竞争;底层对接块层 write streams(支持 FDP 的 NVMe),把流映射到设备分配单元。前 7 个补丁纯软件、任意块设备可用,第 8 个对齐硬件流数量。
效益或下一步 软件侧拿到并发提升,硬件侧降低写放大、延长 SSD 寿命、QoS 更可预测;v7 持续迭代,等 XFS 与块层双侧评审。
和你相关 FDP/write streams 是 NVMe 近年的重要特性,文件系统侧的对接方式值得存储方向跟踪。

📰 Rust

/ column

★ drm::JobQueue v7:临门一脚发现「依赖队列死亡传播」设计缺口

〔11-03 23:32 北京〕· [RFC PATCH v7 0/8] rust: Add drm::JobQueue

定位 Rust DRM 抽象层:JobQueue 是 GPU 驱动的作业队列抽象(fence、回调、错误处理),作者本以为今天能发 v1 正式版。
做法 v7 暴露并讨论一个此前被忽略的问题:JQ1 依赖 JQ2 时,JQ2 死亡会让其 fence 以错误状态 signal,但 fence 回调此前不查错误——依赖方会把「没完成的工作」当成完成,产生 UB;为此 FenceCallbackRegistration::on_signal() 必传错误、删掉只查 signaled 不查成功的 Fence::is_signaled()、新增 JobQueueOps::kill() 让驱动拆除队列。
效益或下一步 保持 RFC 等社区讨论死亡传播语义;Rust GPU 驱动栈(nova-core 等)的队列基建,设计缺口在合入前暴露是幸事。
和你相关 「fence 回调必须区分成功/失败」对所有 GPU 驱动都是正确性要点,不只 Rust。

📰 LSM

/ column

★ KEYS 垃圾回收器大扫除:David Howells 下场,顺手抛出 add_key2() 设想

〔11-03 11:02 北京〕· [RFC PATCH v2 00/11] KEYS: Sanitize the garbage collector

定位 内核密钥环(KEYS)子系统的 GC 层:key 类型由模块实现,key 钉住模块导致 rxrpc 等模块无法卸载等历史问题。
做法 11 个补丁清扫 GC;讨论中 David Howells(KEYS 原作者)直接附了个起手补丁:把 rxrpc/rxrpc_s key 类型拆成独立模块供 rxrpc.ko 依赖,解开「key 钉死模块」的结;他还提出 add_key2() 系统调用设想——多带一个参数串,让应用而非 security_id 选择安全类。
效益或下一步 GC 行为更可控,模块卸载的死结有解;add_key2() 若推进将是 KEYS 多年未见的 ABI 扩展,值得安全子系统方向跟踪。
和你相关 KEYS 是内核最老的子系统之一,原作者仍在一线改 GC——看这类讨论是学习内核演进史的活教材。

📌 机制雷达

/ section
dmaengine 设备指针清扫 Frank Li 一组单补丁横扫 i2c/PCI/tty/spi/soc/nvme/ata/usb 八个子系统:chan->device->dev 不一定是 DMA 映射用的设备(per-channel IOMMU 场景各通道可能不同),统一改用 dmaengine_get_dma_device();同时为 DMA provider 数据结构私有化铺路。原文
PM runtime 自动挂起传播 [PATCH v2 0/5] 改进子设备到父设备的 autosuspend 传播(〔11-04 06:23 北京〕)。原文
liveupdate tmpfs 保留 [PATCH v3 00/10] KVM Live Update(不重启虚拟机更新内核)跨更新保留 tmpfs 文件(〔11-03 09:02 北京〕)。原文
pinctrl 十连修 [PATCH 00/10] 修越界访问、除零与错误处理(〔11-04 05:30 北京〕)。原文
alpha 入口修复 [PATCH 00/14] 修入口 bug 并把通用助手收拢(〔11-04 05:43 北京〕);同日晚些时候还有 alpha/perf ProfileMe 采样到 v5。原文

📖 本期概念速查

/ section
BPF struct_ops / io.cost struct_ops 让 BPF 程序实现内核的回调结构体(调度器、TCP 拥塞控制之后轮到 IO 成本模型);io.cost 是 cgroup v2 的 IO 成本控制器文件接口。
3D LUT / colorop 3D LUT 是把 RGB 立方体逐点映射的三维查找表,做精细色彩校正;colorop 是 DRM 色彩管线里的操作对象,3D_LUT_DMA 是它的新类型。
HMM / migrate_vma HMM(异构内存管理)让 GPU 驱动镜像进程地址空间并按 fault 换入显存页;migrate_vma 是把一组进程页迁往设备内存的助手族。
CSIPHY / D-PHY CSIPHY 是高通 SoC 上 MIPI CSI-2 的物理层模块;D-PHY 是 MIPI 物理层电气规范——settle 时间等参数没调好就是丢行的根源(见本期 rkcif 条目)。
VICAP Rockchip 视频采集通路:sensor → CSI-2 接收 → VICAP DMA → 内存,RK3568/RK3588 相机链路的采集入口。

如果对你有用,点个赞,或转给需要的朋友。

数据来源:lore.kernel.org(全内核 13 列表,数据截至 11-04 06:52 北京)· 北京时间