diff --git a/study/arch/MicroArchitecture/README.md b/study/arch/MicroArchitecture/README.md index 1cab4b9..c641e1d 100644 --- a/study/arch/MicroArchitecture/README.md +++ b/study/arch/MicroArchitecture/README.md @@ -38,6 +38,7 @@ blogexcerpt: 虚拟化 & KVM 子系统 1995 年 [Proceedings of the 22rd Annual International Symposium on Computer Architecture, Santa Margherita Ligure, Italy, June 1995.](https://dada.cs.washington.edu/smt/papers/isca95abstract.html) 的论文 [Simultaneous Multithreading: Maximizing On-Chip Parallelism](https://dada.cs.washington.edu/smt/papers/isca95abstract.html) 首次提出同步多线程 SMT 的设计. +[NO COMPROMISE: DRIVING SERVER PERFORMANCE AND EFFICIENCY WITH AMD EPYC™ AND SMT](https://www.amd.com/content/dam/amd/en/documents/epyc-business-docs/white-papers/amd-epyc-smt-technology-brief.pdf) # 2 Rentable Units ------- diff --git a/study/kernel/00-DESCRIPTION/AI.md b/study/kernel/00-DESCRIPTION/AI.md index 443f2d6..cb46be2 100644 --- a/study/kernel/00-DESCRIPTION/AI.md +++ b/study/kernel/00-DESCRIPTION/AI.md @@ -55,7 +55,6 @@ blogexcerpt: 虚拟化 & KVM 子系统 # 1 场景 ------- - ## 1.1 AI4OS ------- @@ -71,6 +70,7 @@ blogexcerpt: 虚拟化 & KVM 子系统 | 论文 | 描述 | |:---:|:----:| | [LLM as OS, Agents as Apps: Envisioning AIOS, Agents and the AIOS-Agent Ecosystem](https://arxiv.org/abs/2312.03815) | 本文设想了一个革命性的 AIOS-Agent 生态系统, 其中大型语言模型 (LLM) 充当 (人工) 智能操作系统 (IOS, 或 AIOS)——一个 "有灵魂" 的操作系统. 在此基础上, 开发了各种 LLM 基于 AI 代理的应用程序 (Agents, 或 AAP), 丰富了 AIOS-Agent 生态系统, 标志着传统 OS-APP 生态系统的范式转变. 作者设想 LLM 其影响将不仅限于人工智能应用层面, 相反, 它将彻底改变计算机系统、架构、软件和编程语言的设计和实现, 其特点是几个主要概念: LLM 操作系统 (系统级)、代理即应用程序 (应用程序级)、自然语言作为编程接口 (用户级) 和工具即设备 / 库 (硬件 / 中间件级). 我们首先介绍传统操作系统的架构. 然后, 我们通过 "LLMas OS(LLMOS)" 正式化 AIOS 的概念框架, 将 AIOS 与传统操作系统进行类比: LLM 将上下文窗口比作操作系统内核, 将上下文窗口比作内存, 将外部存储比作文件系统, 将硬件工具比作外围设备, 将软件工具比作编程库, 将用户提示比作用户命令. 随后, 我们引入了新的 AIOS-Agent 生态系统, 用户可以使用自然语言轻松编程 Agent 应用程序 (AAP), 使软件开发民主化, 这与传统的 OS-APP 生态系统不同. 在此之后, 我们将探索代理应用程序的多样化范围. 我们深入研究了单智能体和多智能体系统, 以及人机交互. 最后, 借鉴传统 OS-APP 生态的洞察, 提出了 AIOS-Agent 生态演进的路线图. 该路线图旨在指导未来的研究和开发, 建议 AIOS 及其代理应用程序的系统性进展. | +| [Expert Kit: A Distributed, Expert-Centric Framework for MoE LLM Inference](https://gitee.com/openeuler/expert-kit) | openEuler 提供的 专家工具包(EK) 是一个用于可扩展的 MoE(混合专家)LLM 推理的高性能框架. EK 的愿景是在商用网络(例如 PCIe、TCP、RDMA)上的异构硬件(例如 CPU 和 GPU)上提供专家并行性 (EP)的高效基础, 从而实现轻松部署和细粒度的专家级扩展. | @@ -86,6 +86,8 @@ blogexcerpt: 虚拟化 & KVM 子系统 [Mamba详细介绍和RNN、Transformer的架构可视化对比](https://blog.csdn.net/deephub/article/details/136250003) +[机器之心-盘一盘,2017年Transformer之后,LLM领域的重要论文](https://www.jiqizhixin.com/articles/2025-06-29-4) + | 编号 | 结构 | 描述 | |:---:|:---:|:----:| @@ -156,17 +158,19 @@ blogexcerpt: 虚拟化 & KVM 子系统 ------- -[Diffusion LLMs (dLLMs): Introducing a New Generation of LLMs](https://markovate.com/diffusion-llms/) +[Diffusion LLMs (dLLMs): Introducing a New Generation of LLMs](https://markovate.com/diffusion-llms) | 编号 | 日期 | 模型 | 团队 | 详情 | |:---:|:---:|:----:|:---:|:--:| | 1 | 2025/02/14 | [LLaDA-8B](https://ml-gsai.github.io/LLaDA-demo) | ml-gsai | 参见论文 [Large Language Diffusion Models](Large Language Diffusion Models](https://arxiv.org/abs/2502.09992), [论文 | 2025 | 论文综述:大型语言扩散模型(LLDM)](https://mp.weixin.qq.com/s/W8lLo6BI1xKkj_1HfiH5pg) | -| 2 | 2025/03/02 | [Mercury](https://www.inceptionlabs.ai/introducing-mercury) | Inception Labs | NA | +| 2 | 2025/03/02 | [Mercury](https://www.inceptionlabs.ai/introducing-mercury) | Inception Labs | [扩散模型驱动的下一代LM范式:Diffusion LLM - Mercury,“飞一般的生成速度”](https://zhuanlan.zhihu.com/p/26844666590) | | 3 | 2025/03/06 | GIDD | NA | [Generalized Interpolating Discrete Diffusion](https://arxiv.org/abs/2503.04482), [AI自我纠错,Diffusion超越自回归!质量提升55%,已达理论证据下界](https://mp.weixin.qq.com/s/pu2NmYixfwZq94qFDBZ_YQ) | | 4 | 2025/03/12 | [BD3-LMs](https://m-arriola.com/bd3lms/) | Cornell Tech | 论文 [Block Diffusion: Interpolating Between Autoregressive and Diffusion Language Models](https://arxiv.org/abs/2503.09573), [爆火Block Diffusion引发LLM架构变革?自回归+扩散模型完美结合 | ICLR 2025](https://zhuanlan.zhihu.com/p/32576344984) | | 5 | 2025/04/02 | [Dream-7B](https://hkunlp.github.io/blog/2025/dream/) | University of Hong Kong
Huawei Noah’s Ark Lab | 参见 GitHub [HKUNLP/Dream](https://github.com/HKUNLP/Dream) | | 6 | 2025/04/12 | [D1](https://dllm-reasoning.github.io) | UCLA
Meta AI | [dllm-reasoning/d1](https://github.com/dllm-reasoning/d1), 参见论文 [d1: Scaling Reasoning in Diffusion Large Language Models via Reinforcement Learning](https://arxiv.org/abs/2504.12216) | | 7 | 2024/10/24 | [SMDM](https://github.com/ML-GSAI/SMDM) | ML-GSAI | [Scaling up Masked Diffusion Models on Text](https://arxiv.org/abs/2410.18514) | +| 8 | 2024/10/24 | [Seed Diffusion](https://seed.bytedance.com/seed_diffusion) | ML-GSAI | [技术报告](https://lf3-static.bytednsdoc.com/obj/eden-cn/hyvsmeh7uhobf/sdiff_updated.pdf)
[项目地址](https://seed.bytedance.com/seed_diffusion)
[体验链接](https://studio.seed.ai/exp/seed_diffusion)
[量子位-字节Seed发布扩散语言模型,推理速度达2146 tokens/s,比同规模自回归快5.4倍](https://qbitai.com/2025/08/316722.html) | + ## 2.2 稠密模型与稀疏模型 @@ -198,8 +202,8 @@ MoE(Mixed Expert Models), 即混合专家模型, 首次在 1991 年的论文 [Ad | 编号 | 技术 | 团队 | 介绍 | |:---:|:----:|:---:|:---:| -| 1 | [D-LLM: A Token Adaptive Computing Resource Allocation Strategy for Large Language Models](https://blog.csdn.net/paixiaoxin/article/details/145521305) | NA | 本文提出了一种名为 D-LLM 的新型动态推理机制, 旨在为大型语言模型 (LLMs) 自适应地分配计算资源. 当前, LLMs 对每个词元的处理是等同的, 但作者认为并非所有词语都同等重要, 某些词语在简单问题中并不需要过多的计算资源. D-LLM 通过为每个 Transformer 层设计动态决策模块, 决定是否执行或跳过该层, 从而提高推理速度. 此外, 本文还提出了一种有效的驱逐策略, 以解决跳过层时 KV 缓存缺失的问题. 实验结果表明, D-LLM 在问答、摘要和数学解题任务中可减少高达 45% 的计算成本和 KV 存储, 在常识推理任务中可减少 50%, 且性能未受影响. | - +| 1 | [D-LLM: A Token Adaptive Computing Resource Allocation Strategy for Large Language Models](https://blog.csdn.net/paixiaoxin/article/details/145521305) | Huawei | 本文提出了一种名为 D-LLM 的新型动态推理机制, 旨在为大型语言模型 (LLMs) 自适应地分配计算资源. 当前, LLMs 对每个词元的处理是等同的, 但作者认为并非所有词语都同等重要, 某些词语在简单问题中并不需要过多的计算资源. D-LLM 通过为每个 Transformer 层设计动态决策模块, 决定是否执行或跳过该层, 从而提高推理速度. 此外, 本文还提出了一种有效的驱逐策略, 以解决跳过层时 KV 缓存缺失的问题. 实验结果表明, D-LLM 在问答、摘要和数学解题任务中可减少高达 45% 的计算成本和 KV 存储, 在常识推理任务中可减少 50%, 且性能未受影响. | +| 2 | [Mixture-of-Recursions: Learning Dynamic Recursive Depths for Adaptive Token-Level Computation](https://arxiv.org/abs/2507.10524) | KAIST、谷歌 DeepMind 等 | 提出了一种在统一的架构中, MoR同时实现了三种效率优化
1. 参数共享: 通过共享权重压缩参数量, 减小模型体积, 如同让模型学会"一法通、万法通";
2. 自适应计算: 不对所有token一视同仁, 让模型根据任务的难易度动态调整计算量(推理时递归的深度),好比"好钢用在刀刃上", 通过小型路由器, 会为每个 token 的隐藏状态打分, 仅高分 token 的会继续循环, 其余的则提前退出. 简单 Token(比如标点, 常见字"的", "在"等)仅需单次递归即可推出, 复杂 Token(比如数学符号, 专业术语等)会递归多层进行计算, 通过动态路由机制, MoR 让模型真正实现了「千人千面」的计算: 每个 Token 都能根据自己的实际需求, 获得恰到好处的「思考」深度, 从而大幅削减了不必要的计算开销.
3. 通过智能缓存减少内存开销: KV 缓存是 Transformer 推理时的内存大户, 尤其是在处理长序列和进行大批量推理时. 在动态深度模型中, 由于 Token 可能在不同深度退出, 如何确保缓存的一致性和效率, MoR 设计了两种针对性的 KV 缓存策略, 为不同的部署场景提供了灵活的选择. 无论是追求极致精度与批处理量, 还是追求极致内存节省与预填充速度, MoR 都能提供相应的优化方案.
[知乎-新智元-Transformer终结者!谷歌DeepMind全新MoR架构问世,新一代魔王来了](https://zhuanlan.zhihu.com/p/1929192855898951941)
[知乎-tomsheep-MoR:共享 + 路由 + 缓存,递归混合模型为LLM瘦身](https://zhuanlan.zhihu.com/p/1929159784982086816)
[知乎-北方的郎-混合递归(MoR):让大模型“量体裁衣”,为每个词元智能分配思考深度](https://zhuanlan.zhihu.com/p/1929175581800506290)
[github/mixture_of_recursions](https://github.com/raymin0223/mixture_of_recursions) | ## 2.3 模型压缩和量化 ------- @@ -319,7 +323,11 @@ MoE(Mixed Expert Models), 即混合专家模型, 首次在 1991 年的论文 [Ad [[Prefill 优化][万字]🔥原理 & 图解 vLLM Automatic Prefix Cache(RadixAttention): 首 Token 时延优化](https://zhuanlan.zhihu.com/p/693556044) -### 3.2.4 投机执行 +### 3.2.4 投机解码 +------- + + +#### 3.2.4.1 投机解码算法分析 ------- [论文导读 | 投机解码加速模型推理](https://zhuanlan.zhihu.com/p/698333087) @@ -338,9 +346,41 @@ MoE(Mixed Expert Models), 即混合专家模型, 首次在 1991 年的论文 [Ad [知乎 - hemingkx - 推测解码(Speculative Decoding)哪家强?-- 最新评测基准 Spec-Bench 分享](https://zhuanlan.zhihu.com/p/683995502) -| 编号 | 算法 | 描述 | -|:---:|:---:|:----:| -| NA | NA | NA | +[知乎 - 有没有speculative decoding的综述?](https://www.zhihu.com/question/657854511) + + + +| 编号 | 时间 | 文章 | 描述 | +|:---:|:----:|:---:|:----:| +| 1 | 2025/07/04 | [知乎 - Se7en - Speculative Decoding 推测解码方案详解](https://zhuanlan.zhihu.com/p/1920447613800547342) | 本文是 LLM 推理系列的第 4 篇, 介绍 Speculative Decoding 推测解码方案详解, 详细介绍了 EAGLE、Medusa、Lookahead 等主流的 Speculative Decoding 方案. | +| 2 | NA | [从EAGLE-3看Tokenizer对投机解码的影响](https://zhuanlan.zhihu.com/p/1916965162755285553) | EAGLE3能带来如此高的加速比,除了它本身优秀的草稿模型和验证机制外,是不是还有其他“玄机”?不同模型对不同语言的 tokenizer 优化程度不同, 导致它们在多语言场景下的表现差异. Vicuna 的 Tokenizer 在不同语言中普遍呈现出较细的粒度; 从“每步接受多少Token”的指标上来看是其他模型的1.5~2倍. | +| 3 | 2025/05/24 | [大模型推理 & memory bandwidth bound (4) - Speculative Decoding](https://zhuanlan.zhihu.com/p/1899508608909162422) | 本篇讲解了 Speculative Decoding 的原理, 即以近似模型输出建议 tokens, 目标模型对齐进行并行验证的方式对模型推理进行了加速; 同时, 我们也证明了 Speculative Sampling 的采样方式使得其输出分布与目标模型原有的自回归输出分布保持一致. | +| 4 | 2025/05/05 | [三种投机解码方法对比:Vanilla Speculative Decoding ・ Medusa ・ EAGLE](https://zhuanlan.zhihu.com/p/1902847900742055126) | 作者分析了几个投机算法, 得出总结:
1. Vanilla 双模型最易落地, 维护成本在“小模型 + 双 KV Cache”.
2. Medusa 把草稿嵌回大模型顶层, 多头+树形一次核验, 无需小模型, 但须改写主模型.
3. EAGLE 草稿移至特征空间, 接受率最高, 代价是额外 Draft 训练与中间特征. | +| 5 | 2025/07/04 | [知乎 - AI算法小喵 - 投机解码之EAGLE:轻量级草稿模型实现3-4倍推理加速](https://zhuanlan.zhihu.com/p/1898466485095098162) | 分享了 Eagle, 一种利用目标模型的 feature, 并在 feature 层面结合 token 信息进行自回归的从而保证生成质量实现加速的草稿模型构建方法, 并在结尾对比了与之非常相似的MTP. | +| 6 | 2025/06/29 | [大模型推理加速之Speculative Decoding/投机解码(上)](https://zhuanlan.zhihu.com/p/1922687688307377206) | 作者阅读了《Fast Inference from Transformers via Speculative Decoding》,后简单地分析了 speculative decoding 的处理流程以及其中涉及的一些细节 | +| 7 | [知乎 - - 推测解码-从draft model、Medusa、Recurrent Drafter、EAGLE、 Prompt Lookup到Lookahead Decoding](https://zhuanlan.zhihu.com/p/19701798414) | 按照 tensorRT-llm 支持的文档 Speculative Sampling 我们把推测解码分成四种类型:
1. draft model: 利用更小的LLM先快速生成token序列, 使用LLM进行一次性验证;
2. additional heads: 利用在原LLM上新增训练的transformers的注意力层来生成tokens;
3. Prompt Lookup: 使用prompt tokens as draft tokens
4. Lookahead Decoding: 用历史数据构成 tokens, 但一个批次的构造[ABC,BCD,CDE], 提高单批次推理速度的骚操作. | +| 8 | 2025/05/25 | [知乎 - 笑渐不闻声渐悄 - Speculative Decoding: 总结、分析、展望](https://zhuanlan.zhihu.com/p/1904881828906668879) | Speculative Decoding: 总结、分析、展望 | +| 9 | 2025/01/25 |[知乎 - CarryPls - 大模型推理加速技术调研-投机采样](https://zhuanlan.zhihu.com/p/20233143567) | 现有的投机采样架构可以分为 drafter-scorer-sampler 3 层, 该观念来自vLLM PR:1. drafter 生成draft tokens: 关注draft tokens生成速度, 质量和组织形式.
2. scorer 利用target model(大模型)评估生成的draft tokens 的概率分布. 关注显存使用和验证速度.
3. sampler 根据前两步的结果选择接受的token. 关注token接受率. | +| 10 | 2024/09/11 | [知乎 - Sjrrr大蛇 - 最全LLM自投机算法汇总](https://zhuanlan.zhihu.com/p/706111755) | 对业界领先的多个投机算法进行了分析. | +| 11 | 2025/06/08 | [知乎 - 罗西的思考 - 探秘 Transformer 系列之(30)--- 投机解码](https://zhuanlan.zhihu.com/p/1898466485095098162) | 对 BPD 投机论文的详细分析 | + + + +| 编号 | 时间 | 文章 | 描述 | +|:---:|:----:|:---:|:----:| +| 1 | 2025/04/24 | [OPT-Tree: Speculative Decoding with Adaptive Draft Tree Structure](https://arxiv.org/abs/2406.17276) | [Jikai0Wang/OPT-Tree](https://github.com/Jikai0Wang/OPT-Tree), [微信公众号-机器学习算法与自然语言处理-一步生成超过10个Tokens!! 无损模型解码加速最新工作](https://mp.weixin.qq.com/s?__biz=MzI4MDYzNzg4Mw==&mid=2247563973&idx=2&sn=a4d1f1a7ee39b11af74bdd020cbdd90c&chksm=ea702fbc79a360767cf3bbb1eb4102b1bb22f8e74f5a258cc3cce656cf88f11eb666f3c97917&scene=27) | +| 2 | 2024/06/25 | [Optimizing Speculative Decoding for Serving Large Language Models Using Goodput](https://arxiv.org/abs/2406.14066) | 对于不同系统负载下的所有工作负载, 没有最佳推测长度工作. 根据观察结果, 作者开发了一个动态框架 SmartSpec. SmartSpec 根据一个名为 goodput 的新指标动态确定每个请求的最佳投机长度(从 0, 即无投机到许多代币)——因此相关的投机执行成本, 该指标表征了整个系统的当前观察负载和投机准确性. | +| 3 | 2025/03/07 | [SpecServe: Efficient and SLO-Aware Large Language Model Serving with Adaptive Speculative Decoding](https://arxiv.org/abs/2503.05096) | 在本文提出了 SpecServe, 可根据实时请求负载和系统配置动态调整推测策略. SpecServe 提出了一个理论模型来理解和预测不同场景中推测解码的效率. 此外, 它还实现了智能绘图和验证算法, 以保证最佳性能, 同时实现高 SLO 实现. 在实际 LLM 跟踪上的实验结果表明, SpecServe 始终满足 SLO 并实现了实质性的性能改进, 与最先进的推测推理系统相比, 速度提高了 1.14. | + + +#### 3.2.4.2 Multi-Token Prediction(多token预测) +------- + +| 编号 | 时间 | 文章 | 描述 | +|:---:|:----:|:---:|:----:| +| 1 | 2025/07/16 | [Your LLM Knows the Future: Uncovering Its Multi-Token Prediction Potential](https://www.alphaxiv.org/abs/2507.11851) | 实现 MTP 框架, 使预训练的自回归大型语言模型能够执行多 token 预测, 在保持生成质量的同时, 为代码和数学任务提供高达 5.35 倍的推理加速, 以及为一般任务提供约 2.5 倍的推理加速.
+研究者们评估了自回归模型在语言模型有监督微调阶段对多 token 预测任务的适应能力. 未来值得探索的一个方向, 是在预训练阶段或下游任务自适应阶段引入该方法, 以进一步检验其适用性与效果. 另一个具有前景的研究方向是将基于扩散的生成方法应用于多 token 预测任务. 研究者们认为, 多 token 预测位于完全自回归生成与完全扩散生成之间, 能够在两者之间取得优势的平衡,兼具效率与质量的潜力. 参见 [机器之心--五倍推理加速,激发自回归潜能,苹果新工作让LLM预测未来](https://www.jiqizhixin.com/articles/2025-07-24-9) | +| 2 | 2025/06/13 | [Improving Large Language Models with Concept-Aware Fine-Tuning](https://arxiv.org/abs/2506.07833) | 当前主流 LLM 都依赖 next-token prediction 进行训练,, 但它却让 AI 很难真正理解跨越多 token 的完整概念. 于是南洋理工大学最近提出了一项新技术——概念感知微调(CAFT), 首次实现将 multi-token prediction(多 token 预测)引入微调阶段, 让模型能够像人类一样理解和学习完整概念. 原来 LLM 只能碎片化理解每个 token, 现在 CAFT 可以为模型添加额外的辅助头, 在主模型学习下一个词的同时, 帮助学习后续 token, 并通过动态调整权重, 确保模型始终优先优化主要任务的损失. 最终 LLM 可以兼顾多 token 概念学习, 形成更为完整的认知, 在推理和生成能力增强的同时, 既不会影响模型本身, 也不会额外增加多余成本. 参见量子位报道 [知乎-量子位-突破单token预测局限!南洋理工首次将多token预测引入微调](https://zhuanlan.zhihu.com/p/1931778341473616685), [项目地址](https://github.com/michaelchen-lab/caft-llm). | ### 3.2.5 并行解码 @@ -350,6 +390,7 @@ MoE(Mixed Expert Models), 即混合专家模型, 首次在 1991 年的论文 [Ad + ### 3.2.6 分布式推理 ------- @@ -370,6 +411,17 @@ MoE(Mixed Expert Models), 即混合专家模型, 首次在 1991 年的论文 [Ad [HeteroLLM: Accelerating Large Language Model Inference on Mobile SoCs platform with Heterogeneous AI Accelerators](https://arxiv.org/abs/2501.14794) +### 3.2.7 注意力机制 +------- + +[微信公众号-地学AI实验室-可解释AI,在Transformer中可视化注意力(附代码)](https://mp.weixin.qq.com/s/vwJEBXCk6GrwN9-BVucoQA) + + +### 3.2.8 +------- + + + ## 3.3 算子库 ------- @@ -384,6 +436,13 @@ dmlc/tvm ARM-software/ComputeLibrary + +## 3.4 长上下文 +------- + +[[LLM性能优化]聊聊长文本推理性能优化方向](https://zhuanlan.zhihu.com/p/698308542) + + # 4 分析工具 ------- @@ -391,6 +450,7 @@ ARM-software/ComputeLibrary |:---:|:----:|:---:| | 1 | [Interactive Tools for machine learning, deep learning, and math](https://github.com/Machine-Learning-Tokyo/Interactive_Tools) | 用于机器学习、深度学习和数学运算的交互式工具. | | 2 | [Visual Guides to understand the basics of Large Language Models](https://towardsdatascience.com/visual-guides-to-understand-the-basics-of-large-language-models-0715701bdd20) | 一系列工具与文章的汇编, 直观易懂地解读复杂的 AI 概念. 译文 [深入浅出:大语言模型的视觉解析 [译]](https://baoyu.io/translations/llm/visual-guides-to-understand-the-basics-of-large-language-models). | +| 3 | [MLVisuals](https://github.com/dair-ai/ml-visuals) | [科研必备——上手 ML Visuals-神经网络画图神器](https://blog.csdn.net/weixin_43499292/article/details/127030792) | ## 4.1 Tokenizer ------- @@ -436,11 +496,18 @@ ARM-software/ComputeLibrary | 7 | [hahnyuan/LLM-Viewer](https://github.com/hahnyuan/LLM-Viewer) | hahnyuan | 一个可视化语言与学习模型 LLMs 并分析在不同硬件平台上性能的工具. 可以进行网络级分析, 考虑峰值内存消耗和总推理时间成本等因素. 使用 LLM-Viewer, 可以获取 LLM 推理和性能优化的宝贵见解. 可以在 Web 浏览器或者命令行(CLI) 工具中使用. 在线体验地址 [LLM-Viewer Web](http://llm-viewer.com). 参见论文 [LLM Inference Unveiled: Survey and Roofline Model Insights](https://arxiv.org/abs/2402.16363). | | 8 | [A collection of my study notes for learners](https://www.k-a.in/notes.html) | k-a.in | Transformer/MoE Visualized | | 9 | [CNN Explainer](https://poloclub.github.io/cnn-explainer) | poloclub | CNN Explainer: 卷积神经网络可视化, 可交互有细节, 卷积激活池化一目了然, 该项目用 TensorFlow.js 加载一个 10 层的预训练模型, 相当于在浏览器上跑一个 CNN 模型, 可以了解 CNN 的处理过程. 这个网页工具还可以实现交互, 只要点击其中任何一个格子—CNN 中的 "神经元", 就能显示它的输入、经过的变化, 甚至连每一次卷积运算都能看得清清楚楚. [poloclub/cnn-explainer](https://github.com/poloclub/cnn-explainer), 参见论文 [CNN Explainer: Learning Convolutional Neural Networks with Interactive Visualization](https://arxiv.org/abs/2004.15004) | -| 10 | [PyTorch 可视化工具介绍](https://zhuanlan.zhihu.com/p/658596017) | NA | PyTorch 可视化工具介绍. | -| 11 | [attentionmech/mav](https://github.com/attentionmech/mav) | attentionmech | 一款可视化大模型内部工作原理的工具, 帮助用户更好的理解和分析模型在生成文本时的内部魔偶快, 包括注意力分布, 预测概率等. 参见 [知识图谱 + 知识库 RAG 项目 Yuxi-Know 及大模型推理内部可视化工具 OpenMAV 实现拆解](https://zhuanlan.zhihu.com/p/1893668626810270690) | -| 12 | Logit Lens | NA | [2023/03/14, Eliciting Latent Predictions from Transformers with the Tuned Lens](https://arxiv.org/abs/2303.08112), [AlignmentResearch/tuned-lens](https://github.com/AlignmentResearch/tuned-lens) 和 [2025/02/24, LogitLens4LLMs: Extending Logit Lens Analysis to Modern Large Language Models](https://arxiv.org/abs/2503.11667), [zhenyu-02/LogitLens4LLMs](https://github.com/zhenyu-02/LogitLens4LLMs), 其他 [SullivanCastro/Logit-Lens](https://github.com/SullivanCastro/Logit-Lens), [arnab-api/Logit-Lens-Interpreting-GPT-2](https://github.com/arnab-api/Logit-Lens-Interpreting-GPT-2), [msakarvadia/Attentionlens](https://github.com/msakarvadia/Attentionlens) | -| 13 | [ReasonGraph](https://github.com/ZongqianLi/ReasonGraph) | NA | [ReasonGraph: Visualisation of Reasoning Paths](https://arxiv.org/abs/2503.03979) | -| 14 | [torchvista](https://github.com/sachinhosmani/torchvista) | 可视化交互式工具, 可以直接在 NodeBook 中可视化 PyTroch 模型的前向传播过程. 支持拖拽/缩放等交互, 并且可以在出现错误时进行部分可视化, 用户可直接点击节点查看参数和属性信息. | +| 10 | [PyTorch 可视化工具介绍](https://zhuanlan.zhihu.com/p/658596017) | NA | PyTorch 可视化工具介绍. | +| 11 | [attentionmech/mav](https://github.com/attentionmech/mav) | attentionmech | 一款可视化大模型内部工作原理的工具, 帮助用户更好的理解和分析模型在生成文本时的内部魔偶快, 包括注意力分布, 预测概率等. 参见 [知识图谱 + 知识库 RAG 项目 Yuxi-Know 及大模型推理内部可视化工具 OpenMAV 实现拆解](https://zhuanlan.zhihu.com/p/1893668626810270690) | +| 12 | Logit Lens | NA | [2023/03/14, Eliciting Latent Predictions from Transformers with the Tuned Lens](https://arxiv.org/abs/2303.08112), [AlignmentResearch/tuned-lens](https://github.com/AlignmentResearch/tuned-lens) 和 [2025/02/24, LogitLens4LLMs: Extending Logit Lens Analysis to Modern Large Language Models](https://arxiv.org/abs/2503.11667), [zhenyu-02/LogitLens4LLMs](https://github.com/zhenyu-02/LogitLens4LLMs), 其他 [SullivanCastro/Logit-Lens](https://github.com/SullivanCastro/Logit-Lens), [arnab-api/Logit-Lens-Interpreting-GPT-2](https://github.com/arnab-api/Logit-Lens-Interpreting-GPT-2), [msakarvadia/Attentionlens](https://github.com/msakarvadia/Attentionlens) | +| 13 | [ReasonGraph](https://github.com/ZongqianLi/ReasonGraph) | NA | [ReasonGraph: Visualisation of Reasoning Paths](https://arxiv.org/abs/2503.03979) | +| 14 | [torchvista](https://github.com/sachinhosmani/torchvista) | 可视化交互式工具, 可以直接在 NodeBook 中可视化 PyTorch 模型的前向传播过程. 支持拖拽/缩放等交互, 并且可以在出现错误时进行部分可视化, 用户可直接点击节点查看参数和属性信息. | +| 15 | [NN-SVG/](http://alexlenail.me/NN-SVG) | NA | [介绍两款生成神经网络架构示意图的工具:NN-SVG和PlotNeuralNet](https://blog.csdn.net/weixin_41896770/article/details/132733991) | +| 16 | [Machine Learning Visualized](https://ml-visualized.com) | NA | +| 17 | [AttentionViz]() | | +| 18 | [DODRIO](https://poloclub.github.io/dodrio) |[DODRIO: Exploring Transformer Models with Interactive Visualization](http://arxiv-download.xixiaoyao.cn/pdf/2103.14625.pdf), [【NLP】可交互的 Attention 可视化工具!我的Transformer可解释性有救了?](https://blog.csdn.net/fengdu78/article/details/116617948) | +| 19 | [AttentionViz]() | NA | [AttentionViz: A Global View of Transformer Attention](https://arxiv.org/abs/2305.03210), [CSDN-AttentionViz: A Global View of Transformer Attention论文学习,可视化、了解Transformer中的注意力机制](https://blog.csdn.net/weixin_48334973/article/details/137968878), [AttentionViz:一个可视化Transformer注意力机制的强大工具](https://www.dongaigc.com/a/attentionviz-visualizing-transformer-attention)
AttentionViz 的核心理念是将 Transformer 模型中用于计算注意力的查询(query)和键(key)向量进行联合嵌入可视化. 与以往的注意力可视化技术不同, AttentionViz能够分析多个输入序列的全局模式, 为研究人员提供了一个前所未有的视角来理解模型的内部运作. | +| 20 | [nndeploy](https://github.com/nndeploy/nndeploy) | NNDeploy | 基于工作流的多平台 AI 部署工具, 简化 AI 模型的部署流程. [nndeploy: 易用、高性能、支持多端的AI推理部署框架](https://zhuanlan.zhihu.com/p/1913542783903438653). | + ## 4.3 评测平台 ------- @@ -500,6 +567,7 @@ ARM-software/ComputeLibrary | 2023/06/23 | 多模态 | [A Survey on Multimodal Large Language Models](https://arxiv.org/abs/2306.13549) | Shukang Yin | [BradyFU](https://github.com/BradyFU/Awesome-Multimodal-Large-Language-Models) | 本综述中主要介绍了多模态幻觉、多模态上下文学习 (Multimodal InContext Learning,M-ICL)、多模态思维链(Multimodal Chain of Thought,M-CoT) 和 LLM 辅助的视觉推理 (LLM-Aided Visual Reasoning,LAVR) 等. | | 2024/07/26 | 模型压缩 | [Comprehensive Study on Performance Evaluation and Optimization of Model Compression: Bridging Traditional Deep Learning and Large Language Models](https://arxiv.org/abs/2407.15904) | Aayush Saxena | [Comprehensive](https://arxiv.org/abs/2407.15904) | 近年来, 深度学习模型在大多数行业都取得了巨大成功. 这些模型的发展还导致模型大小和能源需求增加, 使其难以在低计算设备上的生产环境中进行部署. 全球互联设备数量的增加保证了压缩模型可以轻松部署在本地设备上, 但计算容量和电源可访问性较低. 不同的研究人员提出了广泛的解决方案来减小此类模型的大小和复杂性, 其中突出的是权重量化、参数修剪、网络修剪、低秩表示、权重共享、神经架构搜索、知识蒸馏等. 在这项研究工作中, 我们调查了使用量化和修剪技术进行压缩的各种训练有素的深度学习模型的性能影响. 我们在图像分类、对象检测、语言模型和基于生成模型的问题陈述中使用的常用深度学习模型上实施了量化和剪枝压缩技术. 我们还探讨了各种大型语言模型在量化和低秩适应后的性能. 我们对所有相关问题陈述使用了标准评估指标(模型的大小、准确性和推理时间), 并通过讨论挑战和未来的工作来总结本文. | | 2024/06/04 | 投机 | [Unlocking Efficiency in Large Language Model Inference:A Comprehensive Survey of Speculative Decoding](https://arxiv.org/abs/2401.07851) | Heming Xia | [hemingkx/SpeculativeDecodingPapers](https://github.com/hemingkx/SpeculativeDecodingPapers) | [COLING 2025 Tutorial:Speculative Decoding for Efficient LLM Inference](https://speculative-decoding.github.io), [知乎 - LLM 推理加速新范式!推测解码(Speculative Decoding)最新综述](https://zhuanlan.zhihu.com/p/678404136) | +| 2025/06/16 | 离散扩散(Discrete Diffusion) | [Discrete Diffusion in Large Language and Multimodal Models: A Survey](https://arxiv.org/pdf/2506.13759) | xML 团队 | [LiQiiiii/DLLM-Survey](https://github.com/LiQiiiii/DLLM-Survey) | 本文全面综述了基于离散扩散范式的大语言与多模态模型, 揭示其通过并行解码和去噪策略实现加速推理与精细控制的核心机制, 构建了涵盖理论框架、实现技术与应用场景的完整技术体系. 本文系统梳理了基于离散扩散的大语言模型(dLLMs)和多模态语言模型(dMLLMs)的技术发展脉络. 与传统的自回归模型相比, 这类模型通过并行解码机制和去噪生成策略, 实现了高达10倍的推理加速, 同时在细粒度输出控制和动态感知响应方面展现出独特优势. 研究揭示了该领域发展的两大驱动力: 一是自回归模型积累的海量数据和基础设施, 二是吸收状态扩散、转移矩阵优化等数学模型的突破. 论文从历史沿革、数学框架、模型分类三个维度构建技术体系, 特别阐述了全注意力机制与多标记预测的协同优化方法, 以及蛋白质序列生成等跨领域应用的实现路径. 实验分析表明, 当前领先的d(M)LLMs在保持同等生成质量的前提下, 通过并行解码实现了3-10倍的推理加速. 特别是工业级闭源模型与开源学术模型的双轨发展, 验证了该范式的实际部署价值. 研究最后指出硬件适配优化和高效训练策略将成为未来突破的关键方向. | [Mobile Edge Intelligence for Large Language Models: A Contemporary Survey](https://arxiv.org/abs/2407.18921) [Edge Intelligence: Architectures, Challenges, and Applications](https://arxiv.org/abs/2003.12172) diff --git a/study/kernel/00-DESCRIPTION/ARCH.md b/study/kernel/00-DESCRIPTION/ARCH.md index 68c88c2..c8e665f 100644 --- a/study/kernel/00-DESCRIPTION/ARCH.md +++ b/study/kernel/00-DESCRIPTION/ARCH.md @@ -277,7 +277,7 @@ phoronix 上所有关于 HFI 相关的报道 [phoronix, Hardware Feedback Interf | 2024/01/31 | Stanislaw Gruszka | [thermal/netlink/intel_hfi: Enable HFI feature only when required](https://lore.kernel.org/all/20240131120535.933424-1-stanislaw.gruszka@linux.intel.com) | 该补丁集仅在有用户空间实体侦听热网络链接事件时才启用 HFI. 引入了一个 netlink 通知, 它与 netlink_has_listners()检查一起, 允许驱动程序根据实际用户空间消费者的存在发送 netlink 多播事件. 此功能通过允许在不需要时禁用功能来优化资源使用. 然后在 intel_hif 驱动程序中实现通知机制, 用于动态禁用硬件反馈接口 (HFI). 通过实现 netlink 通知回调, 驱动程序现在可以根据实际需求启用或禁用 HFI, 特别是当用户空间应用程序(如英特尔速度选择或英特尔低功耗守护进程) 利用与性能和能效功能相关的事件时. 在有 Intel HFI 但没有安装用户空间组件的机器上, 我们可以节省大量的 CPU 周期. | v1 ☐☑✓ | [LORE v1,0/3](https://lore.kernel.org/all/20240131120535.933424-1-stanislaw.gruszka@linux.intel.com) | | 2024/02/02 | Ricardo Neri | [thermal: intel: hfi: Prework for the virtualization of HFI](https://lore.kernel.org/all/20240203040515.23947-1-ricardo.neri-calderon@linux.intel.com) | 用于 [支持 IPC 类任务的调度](https://lore.kernel.org/all/20230613042422.5344-1-ricardo.neri-calderon@linux.intel.com) 的基础
1. 重新组织 HFI 驱动程序的部分, 以便于实现虚拟 HFI 表.
2. 引入了 ITD 类的概念并启用了 ITD.
3. 增加了对重置当前任务的 ITD 分类历史的支持, 以便在上下文切换期间使用. HFI 的虚拟化要求在系统中无条件启用 HFI 和 ITD. 这与 Stanislaw 的补丁集 [thermal/netlink/intel_hfi: Enable HFI feature only when required](https://lore.kernel.org/all/20240131120535.933424-1-stanislaw.gruszka@linux.intel.com) 存在冲突. | v1 ☐☑✓ | [LORE v1,0/9](https://lore.kernel.org/all/20240203040515.23947-1-ricardo.neri-calderon@linux.intel.com) | | 2024/02/23 | Stanislaw Gruszka | [thermal/netlink/intel_hfi: Enable HFI feature only when required](https://git.kernel.org/pub/scm/linux/kernel/git/torvalds/linux.git/log/?id=b33f3d2677b8ddd7a3aba2b02497422a1d2c2a01) | 英特尔 HFI 驱动程序可以在需要时启用它, 从而 "节省大量 CPU 周期". 仅在有用户空间使用者处于活动状态时启用它. 如果英特尔 Speed Select 或英特尔低功耗守护程序正在运行, 英特尔 HFI 接口将被激活, 但如果不是, 它将被禁用, 从而显然可以节省大量 CPU 资源. 参见 phoronix 报道 [英特尔 HFI 驱动程序可以“节省大量 CPU 周期”,只需在需要时才启用自身](https://www.phoronix.com/news/Intel-HFI-Enable-Disable) 以及 [phoronix, 2024/04/01, Intel HFI Driver Will Quit Wasting CPU Cycles With Linux 6.10](https://www.phoronix.com/news/Intel-HFI-Efficient-Linux-6.10) | v4 ☐☑✓ v6.10-rc1 | [LORE v4,0/3](https://lore.kernel.org/all/20240223155942.60813-1-stanislaw.gruszka@linux.intel.com) | -| 2024/10/10 | Mario Limonciello | [Add support for AMD hardware feedback interface](https://lore.kernel.org/all/20241010193705.10362-1-mario.limonciello@amd.com) | AMD 异构内核设计和硬件反馈接口 (HFI) 为调度程序提供行为分类和动态更新的排名表, 供调度程序在为任务选择内核时使用. 这用于向操作系统指示基于工作负载的启发式反馈, 以便做出计划决策.1.
实时线程特征分类功能: 新增 X86_FEATURE_WORKLOAD_CLASS "工作负载分类" 功能. 线程在运行时硬件根据特征将其分类为 3 个类型(0 到 2), 这些类表示可能受益于特殊调度行为的线程性能/功耗特征. 实时线程分类功能由操作系统使用, 用于通知计划程序应将线程放置在何处以获得最佳性能或能效.
2. 排名表: 线程分类有助于从排名表中选择 CPU, 该表从两个维度描述了每个分类的效率和性能排名. 排名表提供的排名数据是 0 到 255 之间的数字, 其中性能值越高表示性能能力越高, 效率越高表示效率越高. 所有 CPU 内核都分为不同的类 ID. 在每个类排名中, 核心可能具有不同的排名值. 因此, 从每个分类 ID 中选取允许调度程序选择最佳核心, 同时将线程分类到指定的工作负载类中. 内核排名表提供了 PCCT 子空间类型 4 共享内存, 其中包括内存基址和长度. 参见 [phoronix, 2024/08/24, AMD Developing New Heterogeneous CPU Core Driver For Linux Systems](https://www.phoronix.com/news/AMD-Heterogeneous-Core-Driver), [phoronix, 2024/10/11, AMD Hardware Feedback Interface "HFI" Driver Updated For Heterogeneous CPUs](https://www.phoronix.com/news/AMD-HFI-Linux-Driver-v2), [phoronix, 2024/12/07, AMD Hardware Feedback Interface "HFI" Patches Updated For The Linux Kernel](https://www.phoronix.com/news/AMD-HFI-v7-Linux) | v2 ☐☑✓ | [2024/08/27, LORE, 00/10](https://lore.kernel.org/platform-driver-x86/cover.1724748733.git.perry.yuan@amd.com/)
*-*-*-*-*-*-*-*
[2024/10/10, LORE v2,0/13](https://lore.kernel.org/all/20241010193705.10362-1-mario.limonciello@amd.com)
*-*-*-*-*-*-*-*
[2024/11/30, LORE v7,00/12](https://lore.kernel.org/lkml/20241130140703.557-1-mario.limonciello@amd.com) | +| 2024/10/10 | Mario Limonciello | [Add support for AMD hardware feedback interface](https://lore.kernel.org/all/20241010193705.10362-1-mario.limonciello@amd.com) | AMD 异构内核设计和硬件反馈接口 (HFI) 为调度程序提供行为分类和动态更新的排名表, 供调度程序在为任务选择内核时使用. 这用于向操作系统指示基于工作负载的启发式反馈, 以便做出计划决策.1.
实时线程特征分类功能: 新增 X86_FEATURE_WORKLOAD_CLASS "工作负载分类" 功能. 线程在运行时硬件根据特征将其分类为 3 个类型(0 到 2), 这些类表示可能受益于特殊调度行为的线程性能/功耗特征. 实时线程分类功能由操作系统使用, 用于通知计划程序应将线程放置在何处以获得最佳性能或能效.
2. 排名表: 线程分类有助于从排名表中选择 CPU, 该表从两个维度描述了每个分类的效率和性能排名. 排名表提供的排名数据是 0 到 255 之间的数字, 其中性能值越高表示性能能力越高, 效率越高表示效率越高. 所有 CPU 内核都分为不同的类 ID. 在每个类排名中, 核心可能具有不同的排名值. 因此, 从每个分类 ID 中选取允许调度程序选择最佳核心, 同时将线程分类到指定的工作负载类中. 内核排名表提供了 PCCT 子空间类型 4 共享内存, 其中包括内存基址和长度. 参见 [phoronix, 2024/08/24, AMD Developing New Heterogeneous CPU Core Driver For Linux Systems](https://www.phoronix.com/news/AMD-Heterogeneous-Core-Driver), [phoronix, 2024/10/11, AMD Hardware Feedback Interface "HFI" Driver Updated For Heterogeneous CPUs](https://www.phoronix.com/news/AMD-HFI-Linux-Driver-v2), [phoronix, 2024/12/07, AMD Hardware Feedback Interface "HFI" Patches Updated For The Linux Kernel](https://www.phoronix.com/news/AMD-HFI-v7-Linux), [phoronix, 2025/07/08, AMD Hardware Feedback Driver Destined For Linux 6.17 To Benefit Heterogeneous CPUs](https://www.phoronix.com/news/AMD-Hardware-Feedback-Linux-617) | v2 ☐☑✓ | [2024/08/27, LORE, 00/10](https://lore.kernel.org/platform-driver-x86/cover.1724748733.git.perry.yuan@amd.com/)
*-*-*-*-*-*-*-*
[2024/10/10, LORE v2,0/13](https://lore.kernel.org/all/20241010193705.10362-1-mario.limonciello@amd.com)
*-*-*-*-*-*-*-*
[2024/11/30, LORE v7,00/12](https://lore.kernel.org/all/20241130140703.557-1-mario.limonciello@amd.com)
*-*-*-*-*-*-*-*
[2025/06/09, LORE v11, 00/13](https://lore.kernel.org/all/20250609200518.3616080-1-superm1@kernel.org) | diff --git a/study/kernel/00-DESCRIPTION/DEBUGGING.md b/study/kernel/00-DESCRIPTION/DEBUGGING.md index aa2a98b..9bf15df 100644 --- a/study/kernel/00-DESCRIPTION/DEBUGGING.md +++ b/study/kernel/00-DESCRIPTION/DEBUGGING.md @@ -564,7 +564,7 @@ bperf 试图通过允许多个 "周期" 或 "指令" 的 perf_event (在不同 | 时间 | 作者 | 特性 | 描述 | 是否合入主线 | 链接 | |:---:|:----:|:---:|:----:|:---------:|:----:| | 2025/06/09 | Zecheng Li | [sched/fair: Optimize cfs_rq and sched_entity allocation for better data locality](https://lore.kernel.org/all/20250609193834.2556866-1-zecheng@google.com) | 旨在优化调度器中 `cfs_rq` 和 `sched_entity` 的内存布局, 以提升数据局部性和缓存效率. 主要优化包括:

1. **合并分配**: 对于非根任务组( task group) , 将 `cfs_rq` 与其对应的 `sched_entity` 分配在同一内存区域, 减少指针跳转.
2. **使用 percpu 分配器**: 通过 percpu 分配方式提升 CPU 访问局部性, 减少 LLC( Last Level Cache) 缺失.

性能测试显示, 在构建的 cgroups 树结构下, AMD 和 Intel 平台 LLC miss 分别减少最多 11. 69% 和 31. 96%, AMD 内核 IPC 提升 25%. 其他基准测试( 如 sysbench、hackbench、ebizzy) 未见明显退化.

补丁共 3 个, 修改了调度核心、调试、公平调度器及头文件, 删除了 task_group 的 `se` 指针数组, 并改变了内存分配方式. | v2 ☐☑✓ | [2025/06/09, LORE v2, 0/3](https://lore.kernel.org/all/20250609193834.2556866-1-zecheng@google.com) | -| 2025/06/02 | Zecheng Li | [sched/fair: Reorder scheduling related structs to reduce cache misses](https://lore.kernel.org/all/20250602180544.3626909-1-zecheng@google.com) | 旨在通过重排 `struct cfs_rq` 和 `struct sched_entity` 的字段顺序以减少缓存缺失, 提升 CFS 调度性能, 尤其适用于具有大量核心和 cgroup 的服务器环境.

重排基于实际工作负载分析, 优化了热点字段的布局, 提升了缓存局部性. 性能测试显示, 在 Intel 和 AMD 平台上, LLC( Last Level Cache) 缺失分别减少了约 17. 6%-21. 37%. 目标函数如 `tg_throttle_down`、`__update_load_avg_cfs_rq` 等的缓存缺失显著下降.

虽然应用吞吐量提升不明显( 因调度开销仅占约1%) , 但对大规模 cgroup 层级结构的工作负载具有显著意义. v2 版本新增了缓存对齐宏, 优化了不同缓存行大小平台的内存使用, 并补充了更多基准测试结果.

补丁共涉及 4 个文件, 总计 184 插入, 45 删除. | v2 ☐☑✓ | [2025/06/02, LORE v2, 0/3](https://lore.kernel.org/all/20250602180544.3626909-1-zecheng@google.com) | +| 2025/06/02 | Zecheng Li | [sched/fair: Reorder scheduling related structs to reduce cache misses](https://lore.kernel.org/all/20250602180544.3626909-1-zecheng@google.com) | 旨在通过重排 `struct cfs_rq` 和 `struct sched_entity` 的字段顺序以减少缓存缺失, 提升 CFS 调度性能, 尤其适用于具有大量核心和 cgroup 的服务器环境.

重排基于实际工作负载分析, 优化了热点字段的布局, 提升了缓存局部性. 性能测试显示, 在 Intel 和 AMD 平台上, LLC( Last Level Cache) 缺失分别减少了约 17. 6%-21. 37%. 目标函数如 `tg_throttle_down`、`__update_load_avg_cfs_rq` 等的缓存缺失显著下降.

虽然应用吞吐量提升不明显( 因调度开销仅占约1%) , 但对大规模 cgroup 层级结构的工作负载具有显著意义. v2 版本新增了缓存对齐宏, 优化了不同缓存行大小平台的内存使用, 并补充了更多基准测试结果.

补丁共涉及 4 个文件, 总计 184 插入, 45 删除. | v2 ☐☑✓ | [2025/06/02, LORE v2, 0/3](https://lore.kernel.org/all/20250602180544.3626909-1-zecheng@google.com)
*-*-*-*-*-*-*-*
[2025/07/01, LORE v3, 0/3](https://lore.kernel.org/all/20250701210230.2985885-1-zecheng@google.com) | ## 11.11 能量统计 @@ -747,6 +747,10 @@ LPC 2024 [`Toolchains Track` 领域](https://lpc.events/event/18/sessions/180) CachyOS 开发人员正在探索使用自动反馈导向优化(AutoFDO) 来提高其内核构建的性能. 与 PGO 和其他精选编译技术一样, AutoFDO 仍然依赖于两部分编译过程, 并且需要能够收集准确的使用配置文件来指导编译器优化. 参见 phoronix 报道 [phoronix, 2024/11/04, CachyOS Explores Optimizing Its Kernel With AutoFDO](https://www.phoronix.com/news/CachyOS-AutoFDO-Kernel). 参见 CachyOS 博客 [Optimizing the Kernel with AutoFDO on CachyOS](https://cachyos.org/blog/2411-kernel-autofdo). + +LLVM 编译器工具链开始支持分布式 ThinLTO DTLTO, 作为处理 ThinLTO 编译以利用链路时优化的新方法. ThinLTO 是 LLVM 处理链路时优化的更具可扩展性和增量性的方法. 使用分布式 ThinLTO, 后端 ThinLTO 编译的分发可以通过外部分发系统完成. DTLTO 支持通过外部分发系统(例如 Incredibuild)分发后端 ThinLTO 编译. 对分发 ThinLTO 编译的现有支持通常涉及单独的精简链接(--thinlto-index-only)、后端编译以及由现代构建系统(如 Bazel)协调的链接步骤. 这种 Bazel 风格的分布式 ThinLTO 需要现代构建系统, 因为它必须处理摘要索引文件分片中指定的动态依赖项. 参见 [phoronix, 2025/07/21, LLVM Begins Landing Distributed ThinLTO "DTLTO" Support](https://www.phoronix.com/news/LLVM-DTLTO-Distributed-Thin). + + | 时间 | 作者 | 特性 | 描述 | 是否合入主线 | 链接 | |:---:|:----:|:---:|:----:|:---------:|:----:| | 2024/11/02 | Rong Xu | [Add AutoFDO and Propeller support for Clang build](https://lore.kernel.org/all/20241102175115.1769468-1-xur@google.com) | TODO | v7 ☐☑✓ | [LORE v7,0/7](https://lore.kernel.org/all/20241102175115.1769468-1-xur@google.com) | @@ -1293,8 +1297,10 @@ Fedora 尝试优化 systemd 开机以及重启的时间, 参见 phoronix 报道 | 2022/06/16 | Daniel Bristot de Oliveira | [The Runtime Verification (RV) interface](https://git.kernel.org/pub/scm/linux/kernel/git/torvalds/linux.git/log/?id=e88043c0ac16f19960048372dcffc6df7c05c5b8) | 运行时验证 Linux 内核的行为. 运行时验证(RV) 是一种轻量级 (但严格) 的方法, 它补充了经典的穷举验证技术 (如模型检查和定理证明), 并为复杂系统提供了一种更实用的方法. RV 不依赖于系统的细粒度模型 (例如, 重新实现指令级别), 而是通过分析系统实际执行的轨迹, 并将其与系统行为的形式化规范进行比较来工作. RV 使用确定性自动机是一种成熟的方法. | v4 ☐☑✓ 6.0-rc1 | [LORE v4,0/20](https://lore.kernel.org/all/cover.1655368610.git.bristot@kernel.org)
*-*-*-*-*-*-*-*
[LORE v9,00/16](https://lore.kernel.org/all/cover.1659052063.git.bristot@kernel.org) | | 2022/11/11 | Daniel Bristot de Oliveira | [verification/rv: Add rv tool](https://git.kernel.org/pub/scm/linux/kernel/git/torvalds/linux.git/log/?id=afc70ccb962861e068e04c6089827493f5160a0a) | (用户空间)运行时验证工具 rv. 该工具旨在成为内核 rv 监视器的接口, 以及用户空间控制监视器. 该工具接收命令作为第一个参数
1. list 列出所有可用的监视器
2. mon 运行给定的监视器
每个监视器都是工具内的一个独立软件, 可以有自己的参数. | v2 ☐☑✓ 6.2-rc1 | [LORE v2,0/3](https://lore.kernel.org/all/cover.1668180100.git.bristot@kernel.org) | | 2025/03/05 | Gabriele Monaco | [rv: Add scheduler specification monitors](https://lore.kernel.org/all/20250305140406.350227-1-gmonaco@redhat.com) | 主要目的是向 Linux 内核添加调度器规范监视器(scheduler specification monitors). 以下是该系列补丁的一些关键点:
1. 引入调度器跟踪点: 为 RV(Runtime Verification) 任务模型添加了与调度相关的跟踪点(tracepoints).
2. 支持嵌套监视器: 通过在 sysfs 监控文件夹中创建一个名为 sched 的监控器来实现对其他监控器的支持. 这个 sched 监控器本身是一个空容器, 用于容纳其他监控器. 控制这个 sched 监控器(启用、禁用、设置反应器)可以同时控制所有嵌套的监控器.
3. 新增多种监控器: 增加了每任务(per-task)和每 CPU(per-cpu)监控器, 如 snroc, scpd, snep, sncid 等. 添加了 sco 和 tss 每 CPU 监控器. 该系列补丁旨在使 Linux 内核能够更好地支持运行时验证, 特别是针对调度器的行为进行更细致的监控和验证. 这包括但不限于提高对不同调度策略和抢占模式下行为的理解, 以及帮助开发者更容易地发现和调试与调度相关的问题. 此外, 它还使得能够区分不同的预抢占禁用情况成为可能, 这对于确保系统的实时性和响应性至关重要. | v5 ☐☑✓ | [LORE v5,0/9](https://lore.kernel.org/all/20250305140406.350227-1-gmonaco@redhat.com) | -| 2025/05/14 | Gabriele Monaco | [rv: Add monitors to validate task switch](https://lore.kernel.org/all/20250514084314.57976-1-gmonaco@redhat.com) | 这个补丁集旨在为 Linux 内核的 RV( Runtime Verification) 子系统添加任务切换验证监控器. 核心内容包括:
-1. 替换与增强现有监控器: 原有 `tss` 监控器被更全面的 `sts` 替代, 验证调度上下文中的任务切换, 并确保每次调度调用都伴随切换( 包括无效切换) , 同时禁止中断.
2. 新增三个监控器:
2.1 `nrp`: 验证抢占需设置 `need_resched`, 切换后清除该标志, 包含对嵌套抢占的处理.
2.2 `sssw`: 验证任务挂起需设置为可睡眠状态, 切换后需唤醒.
2.3 `opid`: 验证唤醒和 `need_resched` 操作需在中断与抢占禁用环境下进行.
3. 适配新 tracepoint: 更新 `sched_set_state`等 trace 点以支持新监控逻辑.
4. 修复与清理: 包括工具行为修复、SIGTERM 支持、注册错误返回、race condition 重试机制等. | v2 ☐☑✓ | [2025/05/14, LORE v2, 0/12](https://lore.kernel.org/all/20250514084314.57976-1-gmonaco@redhat.com) | +| 2025/05/14 | Gabriele Monaco | [rv: Add monitors to validate task switch](https://lore.kernel.org/all/20250514084314.57976-1-gmonaco@redhat.com) | 这个补丁集旨在为 Linux 内核的 RV( Runtime Verification) 子系统添加任务切换验证监控器. 核心内容包括:
-1. 替换与增强现有监控器: 原有 `tss` 监控器被更全面的 `sts` 替代, 验证调度上下文中的任务切换, 并确保每次调度调用都伴随切换( 包括无效切换) , 同时禁止中断.
2. 新增三个监控器:
2.1 `nrp`: 验证抢占需设置 `need_resched`, 切换后清除该标志, 包含对嵌套抢占的处理.
2.2 `sssw`: 验证任务挂起需设置为可睡眠状态, 切换后需唤醒.
2.3 `opid`: 验证唤醒和 `need_resched` 操作需在中断与抢占禁用环境下进行.
3. 适配新 tracepoint: 更新 `sched_set_state`等 trace 点以支持新监控逻辑.
4. 修复与清理: 包括工具行为修复、SIGTERM 支持、注册错误返回、race condition 重试机制等. | v2 ☐☑✓ | [2025/05/14, LORE v2, 0/12](https://lore.kernel.org/all/20250514084314.57976-1-gmonaco@redhat.com)
*-*-*-*-*-*-*-*
[2025/07/15, LORE v3, 00/17](https://lore.kernel.org/all/20250715071434.22508-1-gmonaco@redhat.com)
*-*-*-*-*-*-*-*
[2025/07/21, LORE v4, 00/14](https://lore.kernel.org/all/20250721082325.71554-1-gmonaco@redhat.com)
*-*-*-*-*-*-*-*
[2025/07/28, LORE v5, 0/9](https://lore.kernel.org/all/20250728135022.255578-1-gmonaco@redhat.com) | | 2025/05/12 | Nam Cao | [RV: Linear temporal logic monitors for RT application](https://lore.kernel.org/all/cover.1747046848.git.namcao@linutronix.de) |旨在为实时( RT) 应用引入基于线性时序逻辑( LTL)的运行时验证( RV) 监控机制. 补丁系列包括以下关键内容:
1. LTL监控支持: 新增 LTL 监控模块, 相比原先的确定性自动机, LTL 更简洁直观,适合表达实时规则;
2. RT 应用监控器(rtapp): 作为容器封装子监控模块;
3. 页错误监控( rtapp_pagefault): 用于检测实时任务中的页错误;
4. 睡眠监控( rtapp_sleep): 检测实时线程中可能引起延迟的睡眠行为;
5. 配置支持: 允许配置每任务监控器数量, 以同时启用多个监控;
6. 文档更新: 补充 LTL 和监控器相关文档;
7. 代码结构优化: 整合 dot2k 和 rvgen 工具, 重构模板与类结构, 提升代码可维护性.
各版本更新主要修复脚本问题、优化检测逻辑、处理边缘情况, 并调整部分架构的跟踪点. 补丁已覆盖 x86、ARM64 和 RISC-V 架构. | v8 ☐☑✓ | [2025/05/12, LORE v8, 0/22](https://lore.kernel.org/all/cover.1747046848.git.namcao@linutronix.de) | +| 2025/07/30 | Nam Cao | [rv: LTL per-cpu monitor type and real-time scheduling monitor](https://lore.kernel.org/all/cover.1753879295.git.namcao@linutronix.de) | 邮件提出了一组 5 个补丁, 旨在为 Linux 内核的 Roving( rv) 子系统添加对线性时序逻辑(LTL) 的 per-cpu 监控类型支持, 并新增一个用于验证实时调度(real-time scheduling) 的监控模块. 该系列补丁首先对现有 LTL 监控代码进行重构, 以支持多种监控类型; 随后实现 per-cpu 监控机制, 类似于现有的确定性自动机监控. 此外, 补丁还引入了新的 trace point 用于实时任务的入队与出队事件, 并通过 rvgen 工具生成LTL 监控代码. 最终新增的 rts 监控模块可检测实时调度行为是否符合预期. | v1 ☐☑✓ | [2025/07/30, LORE v1, 0/5](https://lore.kernel.org/all/cover.1753879295.git.namcao@linutronix.de) | +| 2025/07/23 | Gabriele Monaco | [tools/verification: Improvements to rv and rvgen](https://lore.kernel.org/all/20250723161240.194860-1-gmonaco@redhat.com) | 改进 Linux 内核中的 rv 和 rvgen 验证工具. 主要内容包括:
1. 修复 rv 工具在使用 -s 选项时跳过 idle 任务的问题;
2. 增加 rv 对 SIGTERM 信号的优雅终止处理;
3. 修改 dot2c 脚本避免生成超过 100 列的代码行;
4. 调整 RV Kconfig 文件中嵌套监控模块的顺序;
5. 在 DA 监控初始化失败时返回正确错误码, 而非 0. | v1 ☐☑✓ | [2025/07/23, LORE v1, 0/5](https://lore.kernel.org/all/20250723161240.194860-1-gmonaco@redhat.com) | # 21 新语言支持 diff --git a/study/kernel/00-DESCRIPTION/LOCKING.md b/study/kernel/00-DESCRIPTION/LOCKING.md index eecf0db..6835dd2 100644 --- a/study/kernel/00-DESCRIPTION/LOCKING.md +++ b/study/kernel/00-DESCRIPTION/LOCKING.md @@ -324,11 +324,14 @@ Google 的 Joel Fernandes 等发现 RCU 并没有很好的节能, 在 Android [FUTEX_SWAP补丁分析-SwitchTo 如何大幅度提升切换性能?](https://blog.csdn.net/21cnbao/article/details/118980971) +[](https://www.phoronix.com/news/FUTEX2-Improvements-Linux-6.16) + | 时间 | 作者 | 特性 | 描述 | 是否合入主线 | 链接 | |:---:|:----:|:---:|:----:|:---------:|:----:| | 2024/10/25 | Peter Zijlstra | [futex: The remaining futex2 bits](https://lore.kernel.org/all/20241025090347.244183920@infradead.org) | [FUTEX2 NUMA & Small Futexes Revived For Linux](https://www.phoronix.com/news/FUTEX2-NUMA-Small-Futex). | v1 ☐☑✓ | [LORE v1,0/6](https://lore.kernel.org/all/20241025090347.244183920@infradead.org) | | 2024/11/22 | Linus Torvalds | [futex: improve user space accesses](https://lore.kernel.org/all/20241122193305.7316-1-torvalds@linux-foundation.org) | 参见 phoronix 报道 [phoronix, 2024/11/26, Linus Torvalds Improves Futex Code To Improve User-Space Accesses](https://www.phoronix.com/news/Linux-6.13-Torvalds-Futex) | v1 ☐☑✓ | [LORE](https://lore.kernel.org/all/20241122193305.7316-1-torvalds@linux-foundation.org)| - +| 2025/04/07 | Sebastian Andrzej Siewior | [futex: Add support task local hash maps, FUTEX2_NUMA and FUTEX2_MPOL](https://lore.kernel.org/all/20250407155742.968816-1-bigeasy@linutronix.de) | 这个补丁集旨在为 futex 引入任务本地哈希表支持, 并加入 Peter Zijlstra 提出的 FUTEX2_NUMA 和 FUTEX2_MPOL 特性. 主要改进包括: 重构本地哈希逻辑、基于 `vmalloc_huge_node()` 实现 `vmalloc_huge()`、优化唤醒机制、调整哈希桶调整大小逻辑、新增 `PR_FUTEX_HASH_SET_SLOTS` 接口支持 perf 基准测试等. 补丁还涉及多个 futex 核心逻辑优化、锁定机制调整及 ABI 头文件同步. 目标是提升在 NUMA 和内存策略多变环境下的 futex 性能和可扩展性. 参见 [phoronix, 2025/05/26, FUTEX2 Improvements Merged For Linux 6.16](https://www.phoronix.com/news/FUTEX2-Improvements-Linux-6.16). | v11 ☐☑✓ |[2025/04/07, LORE v11, 0/19](https://lore.kernel.org/all/20250407155742.968816-1-bigeasy@linutronix.de) | +| 2025/07/01 | Sebastian Andrzej Siewior | [futex: Temporary disable FUTEX_PRIVATE_HASH](https://lore.kernel.org/all/20250630145034.8JnINEaS@linutronix.de) | 临时禁用 `FUTEX_PRIVATE_HASH` 选项. 原因是 Chris Mason 报告了在大型系统上的显著性能退化 [2025/06/03, futex performance regression from "futex: Allow automatic allocation of process wide futex hash"](https://lore.kernel.org/all/3ad05298-351e-4d61-9972-ca45a0a50e33@meta.com/), 此问题源于每次 futex 操作调用 `rcuref_get() ` 引发的缓存行抖动. 补丁通过标记 `FUTEX_PRIVATE_HASH` 为 `BROKEN` 来禁用该功能, 以争取一个开发周期的时间修复性能问题. 后续版本将重新启用该选项. | v1 ☐☑✓ | [LORE](https://lore.kernel.org/all/20250630145034.8JnINEaS@linutronix.de) | @@ -491,7 +494,8 @@ Proxy Execution 是一种通用形式的优先级继承机制, 它旨在解决 | 2024/05/06 | John Stultz | [Preparatory changes for Proxy Execution](https://git.kernel.org/pub/scm/linux/kernel/git/torvalds/linux.git/log/?id=af0c8b2bf67b25756f27644936e74fd9a6273bd2) | Proxy Execution 是一种通用的优先级继承机制的实现方法, 用于解决优先级反转问题和其他类似的问题. 这些预备补丁的目的是为后续更复杂的 Proxy Execution 相关补丁打下基础.
在发送第 7 版 Proxy Execution 补丁集时, John Stultz 收到了反馈, 指出补丁集变得过于庞大难以审查. 因此, 根据 Qais Yousef 的建议, 他决定将补丁集分为两部分:一部分是预备性的更改, 另一部分是更复杂的功能实现. 参见 [phoronix, 2024/10/18, Linux 6.13 Poised To Land Prep Patches Working Toward Proxy Execution](https://www.phoronix.com/news/Linux-6.13-Prep-For-Proxy-Exec). | v10 ☐☑✓ v6.13-rc1 | [2024/02/24, LORE v8,0/7](https://lore.kernel.org/all/20240224001153.2584030-1-jstultz@google.com)
*-*-*-*-*-*-*-*
[2024/04/01, LORE v9,0/7](https://lore.kernel.org/all/20240401234439.834544-1-jstultz@google.com)
*-*-*-*-*-*-*-*
[LORE v10,0/7](https://lore.kernel.org/all/20240507045450.895430-1-jstultz@google.com)
*-*-*-*-*-*-*-*
[2024/07/09, LORE v11,0/7](https://lore.kernel.org/all/20240709203213.799070-1-jstultz@google.com)
*-*-*-*-*-*-*-*
[2024/08/13, LORE v12,0/7](https://lore.kernel.org/all/20240813235736.1744280-1-jstultz@google.com)
*-*-*-*-*-*-*-*
[2024/08/29, RESEND, LORE v12,0/7](https://lore.kernel.org/all/20240829225212.6042-1-jstultz@google.com)
*-*-*-*-*-*-*-*
[2024/10/09, RESEND x3, LORE v12,0/7](https://lore.kernel.org/all/20241009235352.1614323-1-jstultz@google.com) | | 2024/02/02 | Metin Kaya | [sched: Add trace events for Proxy Execution (PE)](https://lore.kernel.org/all/20240202083338.1328060-1-metin.kaya@arm.com) | 添加 `sched_[start,finish]_task_selection` 跟踪事件以测量 PE 补丁在任务选择中的延迟. 此外, 在 PE 中引入有趣事件的跟踪事件:
1. sched_pe_enque_sleeping_task: 一个任务在睡眠任务(互斥体所有者)的等待队列中排队.
2. sched_pe_cross_mote_cpu: 依赖链跨远程 cpu.
3. sched_pe_task_is_migration: 互斥所有者任务迁移. 可以通过以下命令测试新的跟踪事件: `perf record -e sched:sched_start_task_selection -e sched:sched_finish_task_selection -e sched:sched_pe_enque_sleeping_task -e sched:sched_pe_cross_mote_cpu -e sched:sched_pe_task_is_migration`. 此补丁基于 John 的 [Proxy Execution v7 补丁系列](https://lore.kernel.org/linux-kernel/CANDhNCrHd+5twWVNqBAhVLfhMhkiO0KjxXBmwVgaCD4kAyFyWw@mail.gmail.com). | v1 ☐☑✓ | [LORE](https://lore.kernel.org/all/20240202083338.1328060-1-metin.kaya@arm.com) | | 2024/11/05 | John Stultz | [Single CPU Proxy Execution (v13)](https://lore.kernel.org/all/20241106025656.2326794-1-jstultz@google.com) | 这组补丁的主要目的是实现单 CPU 代理执行(Single CPU Proxy Execution)机制, 这是一种通用形式的优先级继承(priority inheritance)方法, 旨在解决某些特定场景下的调度问题.
1. 实现单 CPU 代理执行机制, 支持作为构建和运行时选项.
2. 重新设计互斥锁的 blocked_on 结构, 以便更好地支持代理执行.
3. 处理代理执行带来的假设变化, 确保调度器的正确性.
4. 实现初始逻辑, 使锁持有者可以在同一 CPU 上代替等待任务运行.
通过这些改动, 调度器在处理某些特定场景下的优先级继承问题时更加高效和灵活, 提高了系统的整体性能和响应速度. 参见 [Paper](https://static.lwn.net/images/conf/rtlws11/papers/proc/p38.pdf) | v13 ☐☑✓ | [LORE v13,0/7](https://lore.kernel.org/all/20241106025656.2326794-1-jstultz@google.com)
*-*-*-*-*-*-*-*
[2024/11/25, LORE v14,0/7](https://lore.kernel.org/all/20241125195204.2374458-1-jstultz@google.com) | -| 2025/03/12 | John Stultz | [Single RunQueue Proxy Execution](https://lore.kernel.org/all/20250312221147.1865364-1-jstultz@google.com) | 单运行队列(RunQueue)代理执行(Proxy Execution)的 V15 版本, 这是一种通用的优先级继承机制.
1. 问题: 在多核系统中, 当一个高优先级任务被低优先级任务阻塞时, 传统的优先级继承机制可能无法有效解决优先级反转问题, 尤其是在涉及多个运行队列(RunQueue)时.
2. 目标: 通过引入代理执行机制, 允许高优先级任务在等待锁时, 将执行权"代理"给其他任务, 从而减少高优先级任务的等待时间, 并提高系统的响应能力.
3. 核心思想: 当一个任务被阻塞时, 如果锁的持有者和等待者在同一个运行队列上, 那么可以将执行权"代理"给锁的持有者, 从而避免高优先级任务长时间等待. | v15 ☐☑✓ | [2025/03/12, LORE v15,0/7](https://lore.kernel.org/all/20250312221147.1865364-1-jstultz@google.com)
*-*-*-*-*-*-*-*
[2025/04/12, LORE v16, 0/7](https://lore.kernel.org/all/20250412060258.3844594-1-jstultz@google.com)
*-*-*-*-*-*-*-*
[2025/05/16, LORE v17, 0/8](https://lore.kernel.org/all/20250516031814.1870508-1-jstultz@google.com)
*-*-*-*-*-*-*-*
[2025/06/02, LORE RESEND v17, 0/8](https://lore.kernel.org/all/20250602221004.3837674-1-jstultz@google.com) | +| 2025/03/12 | John Stultz | [Single RunQueue Proxy Execution](https://lore.kernel.org/all/20250312221147.1865364-1-jstultz@google.com) | 单运行队列(RunQueue)代理执行(Proxy Execution)的 V15 版本, 这是一种通用的优先级继承机制.
1. 问题: 在多核系统中, 当一个高优先级任务被低优先级任务阻塞时, 传统的优先级继承机制可能无法有效解决优先级反转问题, 尤其是在涉及多个运行队列(RunQueue)时.
2. 目标: 通过引入代理执行机制, 允许高优先级任务在等待锁时, 将执行权"代理"给其他任务, 从而减少高优先级任务的等待时间, 并提高系统的响应能力.
3. 核心思想: 当一个任务被阻塞时, 如果锁的持有者和等待者在同一个运行队列上, 那么可以将执行权"代理"给锁的持有者, 从而避免高优先级任务长时间等待. 参见报道 [phoronix, 2025/07/17, Single RunQueue Proxy Execution Appears Ready For Linux 6.17](http://phoronix.com/news/Linux-6.17-Proxy-Execution). | v15 ☐☑✓ | [2025/03/12, LORE v15,0/7](https://lore.kernel.org/all/20250312221147.1865364-1-jstultz@google.com)
*-*-*-*-*-*-*-*
[2025/04/12, LORE v16, 0/7](https://lore.kernel.org/all/20250412060258.3844594-1-jstultz@google.com)
*-*-*-*-*-*-*-*
[2025/05/16, LORE v17, 0/8](https://lore.kernel.org/all/20250516031814.1870508-1-jstultz@google.com)
*-*-*-*-*-*-*-*
[2025/06/02, LORE RESEND v17, 0/8](https://lore.kernel.org/all/20250602221004.3837674-1-jstultz@google.com)
*-*-*-*-*-*-*-*
[2025/06/25, LORE v18, 0/8](https://lore.kernel.org/all/20250625203110.2299275-1-jstultz@google.com)
*-*-*-*-*-*-*-*
[2025/07/07, LORE RESEND v18, 0/8](https://lore.kernel.org/all/20250707204409.1028494-1-jstultz@google.com)
*-*-*-*-*-*-*-*
[2025/07/12, LORE v19, 0/8](https://ore.kernel.org/all/20250712033407.2383110-1-jstultz@google.com) | +| 2025/07/22 | John Stultz | [Donor Migration for Proxy Execution](https://lore.kernel.org/all/20250722070600.3267819-1-jstultz@google.com) | John Stultz 提交了 Proxy Execution 系列补丁的" Donor Migration" 部分(v20), 旨在实现阻塞等待任务的迁移, 以支持跨 CPU 代理执行锁拥有者. 该部分基于 Peter Zijlstra 已合入的 Single-RQ 补丁
主要新增了任务阻塞状态的序列化机制、三态 blocked_on_state 支持、平衡回调清理逻辑、以及支持 donor 迁移与链式迁移. 补丁还涉及对锁定机制和调度器的修改, 以防止任务在不合适的 CPU 上运行.
待解决问题包括: dl_server 导致的测试挂起、调度扩展( sched_ext) 兼容性、性能回归测试、以及链式迁移对 RT/DL 负载均衡的保证. | v20 ☐☑✓ | [2025/07/22, LORE v20, 0/6](https://lore.kernel.org/all/20250722070600.3267819-1-jstultz@google.com) | # 12 深入理解并行编程 @@ -547,6 +551,7 @@ SCaLE 21x 上 Alison Chaiken 关于 WorkQueue 的讨论, 参见 [Diagnosing work | 2024/06/22 | Leonardo Bras | [Introduce QPW for per-cpu operations](https://lore.kernel.org/all/20240622035815.569665-1-leobras@redhat.com) | 提出一种 QPW(Queue PerCPU Work) 作为在 PREEMPT_RT 内核中处理每个 CPU 操作的更好方法, 以取代工作队列 WorkQueue.
目前使用 PREEMPT_RT=y, local_locks() 变成了每个 CPU 的自旋锁. 在这种情况下, 不需要在远程 CPU 上调度工作, 尝试获取远程 CPU 的每个 CPU 自旋锁并在本地运行所需的工作应该是安全的, 主要的代价是在每个局部函数中执行 un/locking.
引入 queue_percpu_work_on() API, 在非 PREEMPT_RT 内核上的现有 local_locks 和 WorkQueue 的行为进行包装. 但对于 PREEMPT_RT 的内核, QPW 将锁定 CPU 的每个 CPU 结构并在本地执行工作. 参见 [Red Hat Proposes Queue PerCPU Work "QPW" For Better Handling Per-CPU Work On RT Linux](https://www.phoronix.com/news/Linux-Queue-Per-CPU-Work-QPW). | v1 ☐☑✓ | [LORE v1,0/4](https://lore.kernel.org/all/20240622035815.569665-1-leobras@redhat.com) | | 2024/09/23 | Chen Ridong | [add dedicated wq for cgroup bpf and adjust WQ_MAX_ACTIVE](https://lore.kernel.org/all/20240923114352.4001560-1-chenridong@huaweicloud.com) | 这组补丁的主要目的是为 cgroup BPF 销毁操作添加一个专用的工作队列(workqueue), 并调整 WQ_MAX_ACTIVE 的默认值从 512 增加到 2048. 该补丁集旨在解决现有系统工作队列(system_wq)在处理大量 cgroup BPF 销毁请求时可能被饱和的问题, 并通过引入专用工作队列来提高性能和可靠性. 此外, 还增加了 WQ_MAX_ACTIVE 的默认值以支持更多的并发任务. 参见 [phoronix, 2024/11/18, Linux 6.13 Quadrupling Workqueue Concurrency Limit](https://www.phoronix.com/news/Linux-6.13-Workqueues) | v5 ☐☑✓ | [LORE v5,0/3](https://lore.kernel.org/all/20240923114352.4001560-1-chenridong@huaweicloud.com)
*-*-*-*-*-*-*-*
[部分合入 COMMIT](https://git.kernel.org/pub/scm/linux/kernel/git/torvalds/linux.git/log/?id=581434654e01ec79dd02c21448ac84e2ce2d1a64) | | 2024/12/11 | Frederic Weisbecker | [kthread: Introduce preferred affinity v6](https://lore.kernel.org/all/20241211154035.75565-1-frederic@kernel.org) | 该补丁集的主要目的是引入内核线程(kthread)的首选亲和性(preferred affinity)机制, 以增强内核线程调度的灵活性和性能. 当前, 内核线程的 CPU 亲和性是静态设定的, 无法动态调整. 这限制了某些应用场景中对 CPU 资源的有效利用. 通过引入首选亲和性机制, 允许内核线程在启动时指定一个或多个偏好的 CPU, 并且当这些 CPU 空闲时优先运行在这些 CPU 上. 如果偏好的 CPU 不可用, 则内核线程仍可以在其他 CPU 上运行, 但会尽量回到首选的 CPU 上继续执行. 通过引入首选亲和性机制, 可以显著改善特定应用场景下的调度效率和资源利用率, 尤其是在 NUMA 系统或多核处理器上. 例如, 在网络处理、实时任务调度等场景中, 可以让关键任务尽可能地运行在其偏好的 CPU 上, 从而减少跨节点访问内存带来的延迟, 提高整体系统性能. | v6 ☐☑✓ | [LORE v6,0/19](https://lore.kernel.org/all/20241211154035.75565-1-frederic@kernel.org) | +| 2025/06/20 | Frederic Weisbecker | [cpuset/isolation: Honour kthreads preferred affinity](https://lore.kernel.org/all/20250620152308.27492-1-frederic@kernel.org) | 这组补丁旨在改进 Linux 内核中 **kthread 的 CPU 亲和性管理**, 使其在 **cpuset 隔离分区变化时仍能尊重预设的亲和性偏好**. 当前在 cpuset 隔离状态变更时, 未绑定的 kthread 可能被错误地调度到非预期的 CPU 上, 导致性能或隔离性问题.
补丁集核心更改包括:
1. 将 **housekeeping 的 cpumask 管理改为 RCU 指针**, 支持动态更新;
2. 在 cpuset 变化时通过 housekeeping 机制通知 kthread 和 workqueue 更新亲和性;
3. 整合 isolcpus 和 cpuset 的隔离状态到 HK_TYPE_DOMAIN;
4. 为未来支持 cpuset 控制 nohz_full= 配置打下基础.此外, 多个子系统( 如 block、net、mm) 增加了对隔离 cpuset 变化的并发保护, 提升了系统稳定性和调度准确性. | v1 ☐☑✓ | [2025/06/20, LORE v1, 0/27](https://lore.kernel.org/all/20250620152308.27492-1-frederic@kernel.org) | # 13 Windows NT Synchronization Primitive Driver diff --git a/study/kernel/00-DESCRIPTION/MEMORY_MANAGER.md b/study/kernel/00-DESCRIPTION/MEMORY_MANAGER.md index f76ff54..6116714 100644 --- a/study/kernel/00-DESCRIPTION/MEMORY_MANAGER.md +++ b/study/kernel/00-DESCRIPTION/MEMORY_MANAGER.md @@ -2119,7 +2119,7 @@ vmalloc_to_page 则提供了通过 vmalloc 地址查找到对应 page 的操作. | 2020/10/02 | Christoph Hellwig | [mm: remove alloc_vm_area and add a vmap_pfn function](https://lore.kernel.org/patchwork/patch/1316291) | NA | ☑ 5.10-rc1 | [PatchWork 0/11](https://lore.kernel.org/patchwork/patch/1316291) | -#### 2.4.1.6 huge vmap +#### 2.4.1.6 Huge Mapping ------- diff --git a/study/kernel/00-DESCRIPTION/OPEN_SOURCE.md b/study/kernel/00-DESCRIPTION/OPEN_SOURCE.md index 83113f9..259d538 100644 --- a/study/kernel/00-DESCRIPTION/OPEN_SOURCE.md +++ b/study/kernel/00-DESCRIPTION/OPEN_SOURCE.md @@ -85,6 +85,8 @@ | [L4Linux](https://www.l4linux.org) | L4Linux 是[基于 Fiasco 微内核的跟普通 Linux 二进制完全兼容的 Linux 内核](https://blog.csdn.net/gracioushe/article/details/6023340). L4Linux 是运行 Fiasco 用户空间的一个进程, 由很多线程组成, 而 Native Linux 则是运行在内核空间, 如果不考虑 kernel thread 的话, 那么 Native Linux 就相当于一个运行在内核空间的大进程, 它实现了从处理器调度、内存管理到设备管理等所有一个操作系统的必备的功能. 参见 [Adam 的 diploma thesis](https://os.inf.tu-dresden.de/papers_ps/adam-diplom.pdf) | NA | | [darwin-xnu](https://github.com/apple/darwin-xnu) | 苹果的微内核 | [opensource](https://opensource.apple.com/source/xnu), [cbowser/xnu](https://fergofrog.com/code/cbowser/xnu) | | HongMeng kernel (HM) | HUAWEI 自研的 HM 微内核 | 由一个最小核心内核和一组最低特权操作系统服务组成, 它可以运行 AOSP 和 OpenHarmony 等复杂框架. HM 已在新兴场景(包括智能路由器、智能汽车和智能手机)的数千万台设备上部署在生产中, 通常比 Linux 同类产品具有更高的性能和安全性. 参见 OSDI-2024 的论文 [Microkernel Goes General: Performance and Compatibility in the HongMeng Production Microkernel](https://www.usenix.org/conference/osdi24/presentation/chen-haibo). | +| [BlueOS](https://blueos.vivo.com/kernel) | [vivo自研蓝河操作系统内核开源!Rust开发新机遇来了](https://qbitai.com/2025/07/312268.html) | vivo 自研蓝河操作系统内核, 是适用于嵌入式和移动设备的开源 Rust 内核, 它完全由 Rust 语言编写, 从根本上解决了传统 C 语言在内存安全、维护成本上的长期难点. 而且更加轻量化对硬件资源要求低; 兼顾通用性, 支持 ARM、RISC-V 架构. | [蓝河内核官方网站](https://blueos.vivo.com/kernel)
[GitHub/vivoblueos](https://github.com/vivoblueos/kernel) | + # 5 Linux Version diff --git a/study/kernel/00-DESCRIPTION/SCHEDULER.md b/study/kernel/00-DESCRIPTION/SCHEDULER.md index a6373cd..8022857 100644 --- a/study/kernel/00-DESCRIPTION/SCHEDULER.md +++ b/study/kernel/00-DESCRIPTION/SCHEDULER.md @@ -28,11 +28,11 @@ 此调度策略包含除上述实时进程之外的其他进程, 亦称普通进程. 采用分时策略, 根据动态优 -先级 (可用 **nice()** API 设置), 分配 CPU 运算资源. **注意: 这类进程比上述两类实时进程优先级低, 换言之, 在有实时进程存在时, 实时进程优先调度**. +先级 (可用 **nice()** API 设置), 分配 CPU 运算资源. ** 注意: 这类进程比上述两类实时进程优先级低, 换言之, 在有实时进程存在时, 实时进程优先调度 **. Linux 除了实现上述策略, 还额外支持以下策略: -- **SCHED\_IDLE** 优先级最低, **在系统空闲时才跑这类进程**(如利用闲散计算机资源跑地外文明搜索, 蛋白质结构分析等任务, 是此调度策略的适用者) +- **SCHED\_IDLE** 优先级最低, ** 在系统空闲时才跑这类进程 **(如利用闲散计算机资源跑地外文明搜索, 蛋白质结构分析等任务, 是此调度策略的适用者) - **SCHED\_BATCH** 是 SCHED\_OTHER 策略的分化, 与 SCHED\_OTHER 策略一样, 但针对吞吐量优化 @@ -208,11 +208,11 @@ Con Kolivas (八卦: 这家伙白天是个麻醉医生) 为解决这个问题提 | 日期 | LWN | 翻译 | |:---:|:----:|:---:| -| 2007/04/17 | [Schedulers: the plot thickens](https://lwn.net/Articles/230574) | [LWN 230574: 内核调度器替换方案的激烈竞争](https://tinylab.org/lwn-230574), [知乎--草莓熊麦昆的翻译](https://zhuanlan.zhihu.com/p/697235380) | +| 2007/04/17 | [Schedulers: the plot thickens](https://lwn.net/Articles/230574) | [LWN 230574: 内核调度器替换方案的激烈竞争](https://tinylab.org/lwn-230574), [知乎 -- 草莓熊麦昆的翻译](https://zhuanlan.zhihu.com/p/697235380) | **2.6.23(2007 年 10 月发布)** -Con Kolivas 的完全公平的想法启发了原 O(1) 调度器作者 Ingo Molnar, 他重新实现了一个新的调度器, 叫 CFS(Completely Fair Scheduler). 它从 RSDL/SD 中吸取了完全公平的思想, 不再跟踪进程的睡眠时间, 也不再企图区分交互式进程. 它将所有的进程都统一对待, 这就是公平的含义. CFS 的算法和实现都相当简单, 众多的测试表明其性能也非常优越.参见 [2007/04/13, [patch] Modular Scheduler Core and Completely Fair Scheduler [CFS]](https://lwn.net/Articles/230501). +Con Kolivas 的完全公平的想法启发了原 O(1) 调度器作者 Ingo Molnar, 他重新实现了一个新的调度器, 叫 CFS(Completely Fair Scheduler). 它从 RSDL/SD 中吸取了完全公平的思想, 不再跟踪进程的睡眠时间, 也不再企图区分交互式进程. 它将所有的进程都统一对待, 这就是公平的含义. CFS 的算法和实现都相当简单, 众多的测试表明其性能也非常优越. 参见 [2007/04/13, [patch] Modular Scheduler Core and Completely Fair Scheduler [CFS]](https://lwn.net/Articles/230501). > 新的 CFS 调度器的核心同样是 完全公平性, 即平等地看待所有普通进程, 让它们自身行为彼此区分开来, 从而指导调度器进行下一个执行进程的选举. @@ -337,7 +337,7 @@ SCHED_IDLE 跟 SCHED_BATCH 一样, 是 CFS 中的一个策略, SCHED\_IDLE 的 |:----:|:----:|:---:|:---:|:-----------:|:---:| | 2019/6/26 | Viresh Kumar | [sched/fair: Fallback to sched-idle CPU in absence of idle CPUs](https://git.kernel.org/pub/scm/linux/kernel/git/torvalds/linux.git/log/?id=3c29e651e16dd3b3179cfb2d055ee9538e37515c) | CFS SCHED_NORMAL 进程在选核的时候, 之前优先选择 IDLE 的 CPU, 现在在没有 IDLE 的 CPU 可选的时候, 也倾向于选择只有 SCHED_IDLE 的进程在运行的 CPU | v3 ☑ [5.4-rc1](https://kernelnewbies.org/Linux_5.4#Core_.28various.29) | [LWN](https://lwn.net/Articles/805317), [PatchWork](https://lore.kernel.org/patchwork/cover/1094197), [lkml](https://lkml.org/lkml/2019/6/26/16)
*-*-*-*-*-*-*-*
[LORE v3,0/2](https://lore.kernel.org/all/cover.1561523542.git.viresh.kumar@linaro.org) | | 2019/10/24 | Abel Wu | [sched/fair: Make sched-idle cpu selection consistent throughout](https://lore.kernel.org/patchwork/patch/1143783) | 重构了 SCHED_IDLE 时的选核逻辑, 所有的选核流程都将 avaliable_idle_cpu 和 sched_idle_cpu 同等对待 | v1 ☑ 5.4-rc1 | [PatchWork](https://lore.kernel.org/patchwork/patch/1143783) | -| 2025/03/10 | Abel Wu | [Prioritize idle cpus over SCHED_IDLE ones](https://lore.kernel.org/all/20250310074044.3656-1-wuyun.abel@bytedance.com) | `17346452b25b ("sched/fair: Make sched-idle CPU selection consistent")` 中SCHED_IDLE CPU 与空闲 CPU 享有同等或更多的优先权. 在 select_task_rq_fair() 的快速和慢速路径中, 空闲的 CPU 和 SCHED_IDLE CPU 享有同等优先权. 这在扁平化的 cgroup 层次结构(例如, 所有任务都在根 cgroup 内运行)中运行良好, 但在更深的层次结构(例如, 所有任务都在根 cgroup 内运行)中可能并不理想. 在更深的层次结构中, SCHED_IDLE 在不同父节点的实体之间没有任何意义. 由于负载较低的 CPU 可能更有能力为新唤醒的任务提供服务, 这也适用于 SCHED_IDLE CPU, 即负载较低的 SCHED_IDLE CPU 可能更容易、更快地抢占先机, 因此在选择 SCHED_IDLE CPU 时, 让我们至少在慢速路径中不对其进行特殊处理.
在 SIS 中尝试同样的方法, 即选择负载较少的 CPU, 并摆脱模棱两可的 sched_idle_cpu() | v1 ☐☑✓ | [LORE v1,0/2](https://lore.kernel.org/all/20250310074044.3656-1-wuyun.abel@bytedance.com) | +| 2025/03/10 | Abel Wu | [Prioritize idle cpus over SCHED_IDLE ones](https://lore.kernel.org/all/20250310074044.3656-1-wuyun.abel@bytedance.com) | `17346452b25b ("sched/fair: Make sched-idle CPU selection consistent")` 中 SCHED_IDLE CPU 与空闲 CPU 享有同等或更多的优先权. 在 select_task_rq_fair() 的快速和慢速路径中, 空闲的 CPU 和 SCHED_IDLE CPU 享有同等优先权. 这在扁平化的 cgroup 层次结构 (例如, 所有任务都在根 cgroup 内运行) 中运行良好, 但在更深的层次结构 (例如, 所有任务都在根 cgroup 内运行) 中可能并不理想. 在更深的层次结构中, SCHED_IDLE 在不同父节点的实体之间没有任何意义. 由于负载较低的 CPU 可能更有能力为新唤醒的任务提供服务, 这也适用于 SCHED_IDLE CPU, 即负载较低的 SCHED_IDLE CPU 可能更容易、更快地抢占先机, 因此在选择 SCHED_IDLE CPU 时, 让我们至少在慢速路径中不对其进行特殊处理.
在 SIS 中尝试同样的方法, 即选择负载较少的 CPU, 并摆脱模棱两可的 sched_idle_cpu() | v1 ☐☑✓ | [LORE v1,0/2](https://lore.kernel.org/all/20250310074044.3656-1-wuyun.abel@bytedance.com) | #### 1.1.5.3 sched-idle Load Balancing @@ -467,7 +467,7 @@ RT_RUNTIME_SHARE 这个机制本身是为了解决不同 CPU 上, 以及不同 | 2016/11/07 | Daniel Bristot de Oliveira | [sched/rt: RT_RUNTIME_GREED sched feature](https://lore.kernel.org/patchwork/patch/732374) | 限制 RT_RUNTIME_SHARE 的生效场景, 开启了 RT_RUNTIME_GREED 的情况下, RT_RUNTIME_SHARE 将尽量的绿色无害. 即当发现当前 RT 可以窃取时间, 但是有其他 CFS 进程已经在等待的时候, 那么他将主动放弃窃取的机会, 让位给 CFS 进程运行. | v1 ☐ | [PatchWork](https://lore.kernel.org/patchwork/patch/732374) | | 2016/11/15 | Daniel Bristot de Oliveira | [sched/rt: disable RT_RUNTIME_SHARE by default and document it](https://lore.kernel.org/patchwork/cover/735472) | RT_RUNTIME_GREED 无法合入主线后, 作者尝试默认关掉 RT_RUNTIME_SHARE | v1 ☐ | [PatchWork](https://lore.kernel.org/patchwork/patch/735472) | | 2020/09/21 | Daniel Bristot de Oliveira | [sched/rt: Disable RT_RUNTIME_SHARE by default](https://lore.kernel.org/patchwork/patch/1309182) | 最后一次尝试默认关掉 RT_RUNTIME_SHARE, 终于被主线接受 | RFC ☑ 5.10-rc1 | [PatchWork](https://lore.kernel.org/patchwork/patch/1309182)
*-*-*-*-*-*-*-*
[commit 2586af1ac187](https://git.kernel.org/pub/scm/linux/kernel/git/torvalds/linux.git/commit/?id=2586af1ac187f6b3a50930a4e33497074e81762d) | -| 2024/04/10 | Atul Pant | [Disable RT-throttling for idle-inject threads](https://lore.kernel.org/all/20240410045417.3048209-1-quic_atulpant@quicinc.com) | 作者正试图通过在 CPU 上使用空闲注入来实现一种散热解决方案. 然而, 作者在当前的空闲注入框架中面临一些限制. 作者希望开始在 CPU 上无限期地注入空闲周期(直到 CPU 的温度/功率降至阈值以下). 这将允许将热 CPU 保持在睡眠状态, 直到我们看到温度 / 功率的提高. 如果我们将空闲持续时间设置为一个大值或具有 100% 的空闲注入率, 则空闲注入 RT 线程会受到 RT 节流的影响. 这导致 CPU 退出睡眠状态并消耗一些电力. 为了解决这一限制, 我们提出了一种解决方案, 在空闲注入线程运行时禁用 RT 节流. 我们通过不计算空闲注入线程的运行时来实现这一点. | v1 ☐☑✓ | [LORE v1,0/2](https://lore.kernel.org/all/20240410045417.3048209-1-quic_atulpant@quicinc.com) | +| 2024/04/10 | Atul Pant | [Disable RT-throttling for idle-inject threads](https://lore.kernel.org/all/20240410045417.3048209-1-quic_atulpant@quicinc.com) | 作者正试图通过在 CPU 上使用空闲注入来实现一种散热解决方案. 然而, 作者在当前的空闲注入框架中面临一些限制. 作者希望开始在 CPU 上无限期地注入空闲周期(直到 CPU 的温度 / 功率降至阈值以下). 这将允许将热 CPU 保持在睡眠状态, 直到我们看到温度 / 功率的提高. 如果我们将空闲持续时间设置为一个大值或具有 100% 的空闲注入率, 则空闲注入 RT 线程会受到 RT 节流的影响. 这导致 CPU 退出睡眠状态并消耗一些电力. 为了解决这一限制, 我们提出了一种解决方案, 在空闲注入线程运行时禁用 RT 节流. 我们通过不计算空闲注入线程的运行时来实现这一点. | v1 ☐☑✓ | [LORE v1,0/2](https://lore.kernel.org/all/20240410045417.3048209-1-quic_atulpant@quicinc.com) | | 2024/04/19 | Zhang Qiao | [sched/Documentation: Add RT_RUNTIME_SHARE documentation](https://lore.kernel.org/all/20240419090432.1935211-1-zhangqiao22@huawei.com) | RT_RUNTIME_SHARE 的文档. | v2 ☐☑✓ | [LORE](https://lore.kernel.org/all/20240419090432.1935211-1-zhangqiao22@huawei.com) | @@ -491,23 +491,24 @@ RT_RUNTIME_SHARE 这个机制本身是为了解决不同 CPU 上, 以及不同 ------- -当高优先级任务垄断 CPU 周期时, SCHED_DEADLINE 服务器有助于解决低优先级任务(如 SCHED_OTHER)的饥饿问题. DEADLINE 服务器用来取代并改进 RT Throttling. +当高优先级任务垄断 CPU 周期时, SCHED_DEADLINE 服务器有助于解决低优先级任务 (如 SCHED_OTHER) 的饥饿问题. DEADLINE 服务器用来取代并改进 RT Throttling. [1½ Topics: realtime throttling and user-space adaptive spinning](https://lwn.net/Articles/931789) | 日期 | LWN | 翻译 | |:---:|:----:|:---:| -| 2013/01/29 | [Deadline servers as a realtime throttling replacement](https://lwn.net/Articles/934415) | [LinuxNews搬运工--LWN: 用 deadline server 来实现实时任务的限制!](https://blog.csdn.net/Linux_Everything/article/details/131388431), [知乎--草莓熊麦昆的翻译](https://zhuanlan.zhihu.com/p/697548424) | +| 2013/01/29 | [Deadline servers as a realtime throttling replacement](https://lwn.net/Articles/934415) | [LinuxNews 搬运工 --LWN: 用 deadline server 来实现实时任务的限制!](https://blog.csdn.net/Linux_Everything/article/details/131388431), [知乎 -- 草莓熊麦昆的翻译](https://zhuanlan.zhihu.com/p/697548424) | -SCHED_DEADLINE server 最终于 v6.12 合入, Linux 6.12 调度的 Merge Request [`Merge tag 'sched-core-2024-09-19' of git://git.kernel.org/pub/scm/linux/kernel/git/tip/tip`](https://git.kernel.org/pub/scm/linux/kernel/git/torvalds/linux.git/commit/?id=2004cef11ea072838f99bd95cefa5c8e45df0847) 首先就介绍了 SCHED_DEADLINE 服务器基础架构. SCHED_DEADLINE 服务器工作由已故的 Daniel Bristot de Oliveira 领导. 当高优先级任务垄断 CPU 周期时, SCHED_DEADLINE 服务器可以帮助解决低优先级任务(例如 SCHED_OTHER)的匮乏问题. DEADLINE 服务器能够替换和改进 RT Throttling 机制. 参见 [phoronix, 2024/09/19, Linux 6.12 Scheduler Code Adds SCHED_DEADLINE Servers & Complete EEVDF](https://www.phoronix.com/news/Linux-6.12-Scheduler). +SCHED_DEADLINE server 最终于 v6.12 合入, Linux 6.12 调度的 Merge Request [`Merge tag'sched-core-2024-09-19'of git://git.kernel.org/pub/scm/linux/kernel/git/tip/tip`](https://git.kernel.org/pub/scm/linux/kernel/git/torvalds/linux.git/commit/?id=2004cef11ea072838f99bd95cefa5c8e45df0847) 首先就介绍了 SCHED_DEADLINE 服务器基础架构. SCHED_DEADLINE 服务器工作由已故的 Daniel Bristot de Oliveira 领导. 当高优先级任务垄断 CPU 周期时, SCHED_DEADLINE 服务器可以帮助解决低优先级任务 (例如 SCHED_OTHER) 的匮乏问题. DEADLINE 服务器能够替换和改进 RT Throttling 机制. 参见 [phoronix, 2024/09/19, Linux 6.12 Scheduler Code Adds SCHED_DEADLINE Servers & Complete EEVDF](https://www.phoronix.com/news/Linux-6.12-Scheduler). | 时间 | 作者 | 特性 | 描述 | 是否合入主线 | 链接 | |:----:|:----:|:---:|:----:|:---------:|:----:| | 2023/06/08 | Daniel Bristot de Oliveira | [sched/deadline: Introduce deadline servers](https://git.kernel.org/pub/scm/linux/kernel/git/torvalds/linux.git/log/?id=63ba8422f876e32ee564ea95da9a7313b13ff0a1) | 如果具有较高优先级的任务 (例如 SCHED_FIFO) 独占 CPU, 则低优先级任务 (例如, SCHED_OTHER) 可能会出现饥饿. RT Throttling 是不久前引入的一种 (主要是调试) 对策, 可以用来为低优先级任务 (通常是后台类型的工作, 例如工作队列、计时器等) 保留一些 CPU 时间. 然而, 它也有自己的问题 (请参阅文档), 并且即使不需要运行优先级较低的活动, 也会无条件地限制 FIFO 任务, 这会产生不希望的影响 (也有一些机制可以解决这个问题, 但同样也有其自身的问题). 引入截止日期服务器, 为饥饿条件下的低优先级任务需求提供服务. 最后期限服务器是通过扩展 SCHED_Deadline 实现来构建的, 以允许两级调度 (即, deadline 实体成为低优先级调度实体的容器). | v3 ☐☑✓ v6.8-rc1 | [LORE v1,00/13](https://lore.kernel.org/all/20190726145409.947503076@infradead.org)
*-*-*-*-*-*-*-*
[LORE v2,0/6](https://lore.kernel.org/all/20200807095051.385985-1-juri.lelli@redhat.com)
*-*-*-*-*-*-*-*
[LORE v3,0/6](https://lore.kernel.org/all/cover.1686239016.git.bristot@kernel.org)
*-*-*-*-*-*-*-*
[LORE v5,0/7](https://lore.kernel.org/all/cover.1699095159.git.bristot@kernel.org)
*-*-*-*-*-*-*-*
[LORE v6,0/6](https://lore.kernel.org/all/cover.1712337227.git.bristot@kernel.org) | | 2024/03/12 | Joel Fernandes (Google) | [Fair scheduling deadline server fixes](https://lore.kernel.org/all/20240313012451.1693807-1-joel@joelfernandes.org) | 截止日期服务器 [SCHED_DEADLINE server infrastructure](https://lore.kernel.org/all/cover.1699095159.git.bristot@kernel.org) 允许 RT 任务在系统上安全运行, 而不是由于 RT 节流, 浪费了 RT 任务可能无法在空闲系统上执行的 CPU. 以下是我们在测试 ChromeOS 的截止日期服务器时发现的修补程序. 当我发现我的单元测试正在崩溃时, 它像滚雪球一样从 10 个补丁增加到 15 个补丁, 然后我们也看到了与 dl_timer 相关的领域中的一些崩溃! 所有这些都是固定的. 在其他几个修复程序中, 还有一个对核心调度的修复程序. 感谢您的全面审查. 我把所有的补丁都放在 Daniel 和 Peter 的补丁之上, 因为我会让他们把它压缩掉, 并适当地归因于贡献者. | v2 ☐☑✓ | [LORE 00/10](https://lore.kernel.org/all/20240216183108.1564958-1-joel@joelfernandes.org)
*-*-*-*-*-*-*-*
[LORE v2,0/15](https://lore.kernel.org/all/20240313012451.1693807-1-joel@joelfernandes.org) | | 2023/06/08 | Daniel Bristot de Oliveira | [SCHED_DEADLINE server infrastructure](https://git.kernel.org/pub/scm/linux/kernel/git/torvalds/linux.git/log/?id=cea5a3472ac43f18590e1bd6b842f808347a810c) | 使用 deadline 服务器为公平任务提供服务. 此补丁集添加并使能了一个 fair_server deadline 实体, 它充当了 CFS 调度实体的容器, 可用于解决优先级较高时的饥饿问题. | v3 ☐☑✓ v6.12-rc1 | [LORE v6,0/6](https://lore.kernel.org/all/cover.1712337227.git.bristot@kernel.org)
*-*-*-*-*-*-*-*
[2024/05/27, LORE v9,0/9](https://lore.kernel.org/all/cover.1716811043.git.bristot@kernel.org) | -| 2025/03/14 | Joel Fernandes | [Add a deadline server for sched_ext tasks](https://lore.kernel.org/all/20250315022158.2354454-1-joelagnelf@nvidia.com) | sched_ext 任务因 RT 占用而处于饥饿状态, 尤其是在 RT 节流被 deadline 服务器取代后, 它只能促进 CFS 任务的运行. 社区中的一些用户曾报告过 RT 拖延 sched_ext 任务的问题. 因此, 应同时添加一个 sched_ext 截止日期服务器, 这样 sched_ext 任务也会得到提升, 而不会陷入饥饿状态.
我们还提供了一个 kselftest 来验证饥饿问题是否已得到解决. | v1 ☐☑✓ | [LORE v1,0/8](https://lore.kernel.org/all/20250315022158.2354454-1-joelagnelf@nvidia.com) | -| 2025/05/20 | Peter Zijlstra | [sched: Try and address some recent-ish regressions](https://lore.kernel.org/all/20250520094538.086709102@infradead.org) | 邮件主题为尝试修复近期调度器性能退化问题. Peter Zijlstra 表示, 由于 6. 11 版本后出现性能下降, 他基于 Chris提供的 schbench 工具进行了复现实验, 发现性能下降与 DELAY_DEQUEUE 补丁及 dl_server 默认启用相关. 测试主要在 Intel SKL 和 SPR 架构上进行, 结果显示启用 TTWU_QUEUE_DELAYED 可改善性能, 而 TTWU_QUEUE_DEFAULT 效果不稳定. 邮件附带 5 个 RFC 补丁, 初步修复性能问题, 但部分内容仍需完善, 如 ttwu_stat() 统计机制尚未实现. 整体目标是将 TTWU_QUEUE_DELAYED 设为默认, 但进一步评估仍需更多测试数据支持. | v1 ☐☑✓ | [2025/05/20, LORE v1, 0/5](https://lore.kernel.org/all/20250520094538.086709102@infradead.org) | +| 2025/03/14 | Joel Fernandes | [Add a deadline server for sched_ext tasks](https://lore.kernel.org/all/20250315022158.2354454-1-joelagnelf@nvidia.com) | sched_ext 任务因 RT 占用而处于饥饿状态, 尤其是在 RT 节流被 deadline 服务器取代后, 它只能促进 CFS 任务的运行. 社区中的一些用户曾报告过 RT 拖延 sched_ext 任务的问题. 因此, 应同时添加一个 sched_ext 截止日期服务器, 这样 sched_ext 任务也会得到提升, 而不会陷入饥饿状态.
我们还提供了一个 kselftest 来验证饥饿问题是否已得到解决. | v1 ☐☑✓ | [LORE v1,0/8](https://lore.kernel.org/all/20250315022158.2354454-1-joelagnelf@nvidia.com)
*-*-*-*-*-*-*-*
[2025/06/02, LORE v2, 00/10](https://lore.kernel.org/all/20250602180110.816225-1-joelagnelf@nvidia.com)
*-*-*-*-*-*-*-*
[2025/06/13, LORE v3, 00/10](https://lore.kernel.org/all/20250613051734.4023260-1-joelagnelf@nvidia.com)
*-*-*-*-*-*-*-*
[2025/06/17, LORE v4, 00/15](https://lore.kernel.org/all/20250617200523.1261231-1-joelagnelf@nvidia.com)
*-*-*-*-*-*-*-*
[2025/06/20, LORE v5,00/14](https://lore.kernel.org/all/20250620203234.3349930-1-joelagnelf@nvidia.com)
*-*-*-*-*-*-*-*
[2025/07/02, LORE v6, 00/14](https://lore.kernel.org/all/20250702232944.3221001-1-joelagnelf@nvidia.com) | +| 2025/05/20 | Peter Zijlstra | [sched: Try and address some recent-ish regressions](https://lore.kernel.org/all/20250520094538.086709102@infradead.org) | 邮件主题为尝试修复近期调度器性能退化问题. Peter Zijlstra 表示, 由于 6. 11 版本后出现性能下降, 他基于 Chris 提供的 schbench 工具进行了复现实验, 发现性能下降与 DELAY_DEQUEUE 补丁及 dl_server 默认启用相关. 测试主要在 Intel SKL 和 SPR 架构上进行, 结果显示启用 TTWU_QUEUE_DELAYED 可改善性能, 而 TTWU_QUEUE_DEFAULT 效果不稳定. 邮件附带 5 个 RFC 补丁, 初步修复性能问题, 但部分内容仍需完善, 如 ttwu_stat() 统计机制尚未实现. 整体目标是将 TTWU_QUEUE_DELAYED 设为默认, 但进一步评估仍需更多测试数据支持. | v1 ☐☑✓ | [2025/05/20, LORE v1, 0/5](https://lore.kernel.org/all/20250520094538.086709102@infradead.org) | +| 2025/06/27 | Juri Lelli | [sched/deadline: Fix GRUB accounting](https://lore.kernel.org/all/20250627115118.438797-1-juri.lelli@redhat.com) | 修复 `SCHED_DEADLINE` 中启用 `SCHED_FLAG_RECLAIM`(GRUB) 时的带宽会计问题. 该问题在 Marcel 团队测试中导致大量 deadline miss(最高达 4300 万次). 问题根源在于系统 CPU 数量不稳定或 root domain 变化时, `extra_bw` 等变量计算不准确.
补丁主要内容包括:
>1. 将 `dl_servers` 初始化移至 SMP 初始化之后, 确保 CPU 数量稳定;
2. 在清除 root domain 时重置 `extra_bw` 为 `max_bw`, 避免残余值影响;
3. 在全局调度限制变化时清理并重建相关变量, 确保会计准确性;
4-5. 新增两个 drgn 脚本(`dl_bw_dump. py` 和 `root_domains_dump. py`) 用于调试带宽和域信息. | v1 ☐☑✓ | [2025/06/27, LORE v1, 0/5](https://lore.kernel.org/all/20250627115118.438797-1-juri.lelli@redhat.com) | ## 1.4 其他一些调度类的尝试 @@ -861,7 +862,7 @@ Chang 的 patch set 采用了与之前不同的方法: 允许 cgroup 将一些 | 2022/12/12 | Peng Zhang | [sched: Throttling through task work for cfs bandwidth](https://lore.kernel.org/all/20221212061321.36422-1-zhangpeng.00@bytedance.com) | 若任务占用资源并在内核空间中被限制, 则可能会导致阻塞, 从而造成或者加剧优先级翻转的问题. 这组补丁试图通过在任务返回到用户模式时使用 task_work 来限制任务来解决此问题.
这个补丁使用 task_work 在任务返回到用户空间时将 throttle 的任务出队, 然后在 unthrottle 时再将其入列. 当前能正常工作, 但目前的实现并没有考虑到所有的细节, 比如竞争条件、负载跟踪等. 作者认为这种解决方案的最大缺点是, 在解锁过程中可能有太多的任务需要排队, 从而导致巨大的开销和延迟. | v1 ☐☑✓ | [LORE](https://lore.kernel.org/all/20221212061321.36422-1-zhangpeng.00@bytedance.com) | | 2024/02/02 | Valentin Schneider | [sched/fair: Defer CFS throttle to user entry](https://lore.kernel.org/all/20231130161245.3894682-1-vschneid@redhat.com) | Peter 之前再 [Re: [PATCH] sched/fair: Make the BW replenish timer expire in hardirq context for PREEMPT_RT](https://lore.kernel.org/all/20231031160120.GE15024@noisy.programming.kicks-ass.net) 提到 , 对 CFS 任务进行 BW throttle 的时候, 并不在更新运行时统计信息发现 cfs_rq 已经耗尽其配额时, 立即执行 throttle, 而是等待任务即将返回到用户空间时再进行 throttle, 这是非常安全的, 在 PREEMPT_RT 的内核上可以有效地防止内核态优先级翻转, 因为如果它在用户空间中, 则无法持有任何内核内锁. | v1 ☐☑✓ | [2023/11/30, LORE v1,0/2](https://lore.kernel.org/all/20231130161245.3894682-1-vschneid@redhat.com)
*-*-*-*-*-*-*-*
[2024/02/02, LORE v2,0/5](https://lore.kernel.org/all/20240202080920.3337862-1-vschneid@redhat.com)[2024/07/11, LORE V3,00/10](https://lore.kernel.org/all/20240711130004.2157737-1-vschneid@redhat.com/) | | 2025/02/20 | K Prateek Nayak | [sched/fair: Defer CFS throttling to exit to user mode](https://lore.kernel.org/all/20250220093257.9380-1-kprateek.nayak@amd.com) | TODO | v1 ☐☑✓ | [LORE v1,0/22](https://lore.kernel.org/all/20250220093257.9380-1-kprateek.nayak@amd.com) | -| 2025/03/17 | Aaron Lu | [Defer throttle when task exits to user](https://lore.kernel.org/all/20250313072030.1032893-1-ziqianlu@bytedance.com) | [Valentin Schneider 工作 "sched/fair: Defer CFS throttle to user entry"](https://lore.kernel.org/all/20231130161245.3894682-1-vschneid@redhat.com) 的续作.
1. 核心思想: 当一个任务的 CFS 配额耗尽时, 不是立即将其节流, 而是延迟到任务退出到用户空间时再进行节流. 这样可以避免任务在内核空间中被阻塞, 从而减少任务挂起的风险.
实现方式: 在 CFS 节流路径中, 为每个任务添加一个任务工作(task work), 以便在任务返回用户空间时执行节流操作.在任务返回用户空间时, 任务工作会将任务从运行队列中移除, 并将其添加到 CFS 运行队列的 limbo 列表中, 以便后续恢复.
在 CFS 解除节流路径中, 将 limbo 列表中的任务重新加入运行队列. | v1 ☐☑✓ | [2025/03/17, LORE v1,0/7](https://lore.kernel.org/all/20250313072030.1032893-1-ziqianlu@bytedance.com)
*-*-*-*-*-*-*-*
[2025/04/09, LORE v2,0/7](https://lore.kernel.org/lkml/20250409120746.635476-1-ziqianlu@bytedance.com)
*-*-*-*-*-*-*-*
[2025/05/20, LORE v3, 0/7](https://lore.kernel.org/all/20250520104110.3673059-1-ziqianlu@bytedance.com) | +| 2025/03/17 | Aaron Lu | [Defer throttle when task exits to user](https://lore.kernel.org/all/20250313072030.1032893-1-ziqianlu@bytedance.com) | [Valentin Schneider 工作"sched/fair: Defer CFS throttle to user entry"](https://lore.kernel.org/all/20231130161245.3894682-1-vschneid@redhat.com) 的续作.
1. 核心思想: 当一个任务的 CFS 配额耗尽时, 不是立即将其节流, 而是延迟到任务退出到用户空间时再进行节流. 这样可以避免任务在内核空间中被阻塞, 从而减少任务挂起的风险.
实现方式: 在 CFS 节流路径中, 为每个任务添加一个任务工作(task work), 以便在任务返回用户空间时执行节流操作. 在任务返回用户空间时, 任务工作会将任务从运行队列中移除, 并将其添加到 CFS 运行队列的 limbo 列表中, 以便后续恢复.
在 CFS 解除节流路径中, 将 limbo 列表中的任务重新加入运行队列. | v1 ☐☑✓ | [2025/03/17, LORE v1,0/7](https://lore.kernel.org/all/20250313072030.1032893-1-ziqianlu@bytedance.com)
*-*-*-*-*-*-*-*
[2025/04/09, LORE v2,0/7](https://lore.kernel.org/lkml/20250409120746.635476-1-ziqianlu@bytedance.com)
*-*-*-*-*-*-*-*
[2025/05/20, LORE v3, 0/7](https://lore.kernel.org/all/20250520104110.3673059-1-ziqianlu@bytedance.com)
*-*-*-*-*-*-*-*
[2025/07/15, LORE v3, 0/5](https://lore.kernel.org/all/20250715071658.267-1-ziqianlu@bytedance.com) | ### 2.1.4 leaf_cfs_rq @@ -883,7 +884,9 @@ Chang 的 patch set 采用了与之前不同的方法: 允许 cgroup 将一些 | 时间 | 作者 | 特性 | 描述 | 是否合入主线 | 链接 | |:----:|:----:|:---:|:----:|:---------:|:----:| -| 2025/06/05 | Yuri Andriaccio | [Hierarchical Constant Bandwidth Server](https://lore.kernel.org/all/20250605071412.139240-1-yurand2000@gmail.com) | 介绍了一个实现分层常量带宽服务器(HCBS)的补丁集 RFC, 旨在替代现有的 `RT_GROUP_SCHED` 机制, 使其更具鲁棒性和理论基础. 该补丁集已在 OSPM25 会议上展示, 相关机制详见[LWN 文章](https://lwn.net/Articles/1021332).
补丁内容包括代码重构、单层与多层调度支持、cgroup v2 支持, 并移除了 cgroup v1 的相关代码. 通过为每个 CPU 创建本地运行队列和 dl_server, 实现对 SCHED_FIFO/SCHED_RR 任务的带宽预留, 用户可通过 cgroup 接口配置 `rt_period_us` 和 `rt_runtime_us`.
测试代码已提供, 支持在 QEMU 或完整发行版中运行, 验证调度器的功能与时序保障. 作者表示后续将提交支持任务迁移、每 CPU 独立带宽、容量感知调度等特性.
该补丁集目前以打基础为主, 邀请社区反馈以指导后续开发. | v1 ☐☑✓ | [2025/06/05, LORE v1, 0/9](https://lore.kernel.org/all/20250605071412.139240-1-yurand2000@gmail.com) | +| 2025/06/05 | Yuri Andriaccio | [Hierarchical Constant Bandwidth Server](https://lore.kernel.org/all/20250605071412.139240-1-yurand2000@gmail.com) | 介绍了一个实现分层常量带宽服务器 (HCBS) 的补丁集 RFC, 旨在替代现有的 `RT_GROUP_SCHED` 机制, 使其更具鲁棒性和理论基础. 该补丁集已在 OSPM25 会议上展示, 相关机制详见[LWN 文章](https://lwn.net/Articles/1021332).
补丁内容包括代码重构、单层与多层调度支持、cgroup v2 支持, 并移除了 cgroup v1 的相关代码. 通过为每个 CPU 创建本地运行队列和 dl_server, 实现对 SCHED_FIFO/SCHED_RR 任务的带宽预留, 用户可通过 cgroup 接口配置 `rt_period_us` 和 `rt_runtime_us`.
测试代码已提供, 支持在 QEMU 或完整发行版中运行, 验证调度器的功能与时序保障. 作者表示后续将提交支持任务迁移、每 CPU 独立带宽、容量感知调度等特性.
该补丁集目前以打基础为主, 邀请社区反馈以指导后续开发. | v1 ☐☑✓ | [2025/06/05, LORE v1, 0/9](https://lore.kernel.org/all/20250605071412.139240-1-yurand2000@gmail.com)
*-*-*-*-*-*-*-*
[2025/07/31, LORE RFC v2, 00/25](https://lore.kernel.org/all/20250731105543.40832-1-yurand2000@gmail.com) | +| 2025/07/07 | Pan Deng | [sched/rt: mitigate root_domain cache line contention](https://lore.kernel.org/all/cover.1751852370.git.pan.deng@intel.com) | 这组补丁旨在缓解在云环境中运行多实例 FFmpeg 任务时, 因实时任务调度引发的 `root_domain` 缓存行争用问题. 测试环境为 2 路、240 核、480 线程的机器, 运行 60 个 FFmpeg 实例, 每个绑定 4 个物理核. 性能分析显示, 约 20% 的 CPU 周期消耗在内核调度函数, 主要由于 `root_domain` 和 `cpupri` 结构的缓存行争用.
补丁内容包括:
1. 优化 `cpupri_vec` 布局, 分离 `count` 和 `mask` 字段, 减少缓存行争用.
2. 重构 `root_domain` 结构, 合理重排字段以降低争用.
3. 将 `rto_count` 拆分为每个 NUMA 节点计数器.
4. 将 `cpupri_vec-> mask` 拆分为每个 NUMA 节点的位图.
实测结果显示, 各补丁带来了 3. 8%~11% 的 FPS 提升, 内核 CPU 使用率降至 11%~18. 7%, 缓存行争用显著下降. | v1 ☐☑✓ | [2025/07/07, LORE v1, 0/4](https://lore.kernel.org/all/cover.1751852370.git.pan.deng@intel.com) | +| 2024/12/16 | Michal Koutný | [Add kernel cmdline option for rt_group_sched](https://lore.kernel.org/all/20241216201305.19761-1-mkoutny@suse.com) | [phoronix, 2025/05/27, Linux 6.16 Lands "rt_group_sched" Option, Faster Core Offlining & Scheduler Improvements](https://www.phoronix.com/news/Linux-6.16-Scheduler) | v1 ☐☑✓ | [LORE v1,0/9](https://lore.kernel.org/all/20241216201305.19761-1-mkoutny@suse.com)
*-*-*-*-*-*-*-*
[LORE v1,0/9](https://lore.kernel.org/all/20250210151239.50055-1-mkoutny@suse.com)
*-*-*-*-*-*-*-*
[LORE v2,00/10](https://lore.kernel.org/all/20250310170442.504716-1-mkoutny@suse.com/) | @@ -1294,7 +1297,7 @@ PELT 算法几个关键的函数: | 时间 | 作者 | 特性 | 描述 | 是否合入主线 | 链接 | |:---:|:----:|:---:|:----:|:---------:|:----:| | 2018/06/28 | Vincent Guittot | [track CPU utilization](https://git.kernel.org/pub/scm/linux/kernel/git/torvalds/linux.git/log/?id=5fd778915ad29184a5ff8eb82d1118f6916b79e4) | TODO | v7 ☑✓ 4.19-rc1 | [LORE v7,0/11](https://lore.kernel.org/all/1530200714-4504-1-git-send-email-vincent.guittot@linaro.org) | -| 2024/02/22 | zhaoyang.huang | [sched: introduce helper function to calculate distribution over sched class](https://lore.kernel.org/all/20240222092220.642294-1-zhaoyang.huang@unisoc.com) | 由于 RT、DL、IRQ 时间可被视为 CFS 任务的损失时间, 因此一些时序值希望了解这些时间的分布情况. 时序值希望通过利用率(nivcsw 有时不够用)了解这些时间的分布情况. 这组补丁希望引入一个辅助函数 cfs_prop_by_util() 来实现这一目标. 计算该内核的指定 tsk 任务和所有 cfs 任务消耗的时序值的大致比例. 该函数实际上源于 effective_cpu_util, 但没有将 util 限制在内核容量范围内. se_prop 和 rq_prop 仅在返回值为 1 时有效. | v2 ☐☑✓ | [LORE v2,0/2](https://lore.kernel.org/all/20240222092220.642294-1-zhaoyang.huang@unisoc.com) | +| 2024/02/22 | zhaoyang.huang | [sched: introduce helper function to calculate distribution over sched class](https://lore.kernel.org/all/20240222092220.642294-1-zhaoyang.huang@unisoc.com) | 由于 RT、DL、IRQ 时间可被视为 CFS 任务的损失时间, 因此一些时序值希望了解这些时间的分布情况. 时序值希望通过利用率 (nivcsw 有时不够用) 了解这些时间的分布情况. 这组补丁希望引入一个辅助函数 cfs_prop_by_util() 来实现这一目标. 计算该内核的指定 tsk 任务和所有 cfs 任务消耗的时序值的大致比例. 该函数实际上源于 effective_cpu_util, 但没有将 util 限制在内核容量范围内. se_prop 和 rq_prop 仅在返回值为 1 时有效. | v2 ☐☑✓ | [LORE v2,0/2](https://lore.kernel.org/all/20240222092220.642294-1-zhaoyang.huang@unisoc.com) | ### 3.2.5 Utilization Estimation(UTIL_EST) ------- @@ -1464,7 +1467,7 @@ X86 下提供了一种 Fake Numa 的方式来模拟 NUMA 配置. | 2011/01/19 | Jan Beulich | [x86: Unify"numa="command line option handling](https://git.kernel.org/pub/scm/linux/kernel/git/torvalds/linux.git/commit/?id=9032160275ba) | 使用 `numa=` 内核启动参数统一管理 NUMA 配置. | v1 ☐☑✓ | [LORE](https://git.kernel.org/pub/scm/linux/kernel/git/torvalds/linux.git/commit/?id=9032160275ba) | | 2011/02/14 | Tejun Heo | [x86-64, NUMA: bring sanity to NUMA emulation](https://git.kernel.org/pub/scm/linux/kernel/git/torvalds/linux.git/log/?id=e23bba604433a202cd301a976454a90ea6b783ef) | TODO | v1 ☑✓ 2.6.39-rc1 | [LORE](https://lore.kernel.org/all/1297711715-3086-1-git-send-email-tj@kernel.org) | | 2012/05/01 | Peter Zijlstra | [x86/numa: Allow specifying node_distance() for numa=fake](https://git.kernel.org/pub/scm/linux/kernel/git/torvalds/linux.git/log/?id=ad7687dde8780a0d618a3e3b5a62bb383696fc22) | TODO | v1 ☑✓ 3.5-rc1 | [LORE v1,0/5](https://lore.kernel.org/all/20120501181430.007891123@chello.nl) | -| 2024/06/25 | Tvrtko Ursulin | [NUMA emulation for arm64](https://lore.kernel.org/all/20240625125803.38038-1-tursulin@igalia.com) | [UMA Emulation Yields "Significant Performance Uplift" To Raspberry Pi 5](https://www.phoronix.com/news/ARM64-NUMA-Emulation-RPi5). | v1 ☐☑✓ | [LORE v1,0/2](https://lore.kernel.org/all/20240625125803.38038-1-tursulin@igalia.com) | +| 2024/06/25 | Tvrtko Ursulin | [NUMA emulation for arm64](https://lore.kernel.org/all/20240625125803.38038-1-tursulin@igalia.com) | [UMA Emulation Yields"Significant Performance Uplift"To Raspberry Pi 5](https://www.phoronix.com/news/ARM64-NUMA-Emulation-RPi5). | v1 ☐☑✓ | [LORE v1,0/2](https://lore.kernel.org/all/20240625125803.38038-1-tursulin@igalia.com) | ### 4.1.4 NUMA Distance @@ -1624,7 +1627,7 @@ rebalance_domains() |:----:|:----:|:---:|:----:|:--------:|:----:| | 2024/03/08 | Ingo Molnar | [sched/balancing: Misc updates & cleanups](https://git.kernel.org/pub/scm/linux/kernel/git/torvalds/linux.git/log/?id=e492e1b0e0721f3929ef9d9708d029144b396dd7) | 修正 load_balancing 路径下部分数据结构以及变量的命名方式. | v1 ☐☑✓ | [LORE v4,00/10](https://lore.kernel.org/all/20240308105901.1096078-1-mingo@kernel.org) | | 2024/03/08 | Ingo Molnar | [sched/balancing: Standardize the naming of scheduler load-balancing functions](https://git.kernel.org/pub/scm/linux/kernel/git/torvalds/linux.git/log?id=b9e6e28663928cab836a19abbdec3d036a07db3b) | 多年来, 我们已经发展出了一个丰富多彩的调度器负载平衡函数名称动物园——两者都遵循随机, 独特的模式, 以及获得不再准确的历史性误称. 我们有 "newidle_balance()" 来重新平衡新空闲的任务, 有 "rebalance_domains()" 用来重新平衡域. 我们有一个 find_idlest_cpu()函数, 其目的不再是查找空闲的 cpu, 以及一个 find_businest_queue()函数, 其目的不再是寻找最繁忙的运行队列. 因此 Ingo 发送了一组补丁集, 对负载均衡中不当的函数名进行了修正, 并沿着 sched_balance_*() 命名空间组织函数. | v1 ☐☑✓ v6.10-rc1 | [LORE v1,0/13](https://lore.kernel.org/all/20240308111819.1101550-1-mingo@kernel.org) | -| 2024/04/07 | Ingo Molnar | [sched: Split out kernel/sched/fair_balance.c, numa_balancing.c and syscalls.c, plus other updates](https://git.kernel.org/pub/scm/linux/kernel/git/torvalds/linux.git/log/?id=04746ed80bcf3130951ed4d5c1bc5b0bcabdde22) | 主要目的是重构 Linux 内核调度器代码, 以提高其可读性和可维护性.
Ingo Molnar 指出 kernel/sched/core.c 和 fair.c 文件变得杂乱无章, 混合了调度器的多种功能, 这影响了核心调度和公平平衡类调度功能的核心性.
重构内容:
1. 将 syscall.c 从 core.c 中分离出来.
2. 将 fair_balance.c 和 numa_balancing.c 从 fair.c 中分离出来. | v1 ☐☑✓ v6.11-rc1 | [LORE v1,0/5](https://lore.kernel.org/all/20240407084319.1462211-1-mingo@kernel.org) | +| 2024/04/07 | Ingo Molnar | [sched: Split out kernel/sched/fair_balance.c, numa_balancing.c and syscalls.c, plus other updates](https://git.kernel.org/pub/scm/linux/kernel/git/torvalds/linux.git/log/?id=04746ed80bcf3130951ed4d5c1bc5b0bcabdde22) | 主要目的是重构 Linux 内核调度器代码, 以提高其可读性和可维护性.
Ingo Molnar 指出 kernel/sched/core.c 和 fair.c 文件变得杂乱无章, 混合了调度器的多种功能, 这影响了核心调度和公平平衡类调度功能的核心性.
重构内容:
1. 将 syscall.c 从 core.c 中分离出来.
2. 将 fair_balance.c 和 numa_balancing.c 从 fair.c 中分离出来. | v1 ☐☑✓ v6.11-rc1 | [LORE v1,0/5](https://lore.kernel.org/all/20240407084319.1462211-1-mingo@kernel.org) | ### 4.3.2 CFS Task Lists @@ -2017,7 +2020,7 @@ CPU 负载均衡器在不同的域之间进行平衡, 以分散负载, 并努力 |:-----:|:---:|:---:|:----:|:---------:|:----:| | 2012/01/09 | Peter Zijlstra | [sched: Remove stale power aware scheduling remnants and dysfunctional](https://git.kernel.org/pub/scm/linux/kernel/git/torvalds/linux.git/commit/?id=8e7fbcbc22c1) | TODO | v1 ☐☑✓ | [LORE](https://git.kernel.org/pub/scm/linux/kernel/git/torvalds/linux.git/commit/?id=8e7fbcbc22c1) | -#### 4.3.3.5 load_balance vs wake_affine +#### 4.3.3.5 BALANCE_WAKE load_balance vs wake_affine ------- Mel Gorman 深耕与解决 load_balance 以及 wake_affine 流程中一些不合理的行为. @@ -2032,6 +2035,12 @@ Mel Gorman 深耕与解决 load_balance 以及 wake_affine 流程中一些不合 +#### 4.3.3.6 BALANCE_FORK load_balance vs wake_affine +------ + +| 时间 | 作者 | 特性 | 描述 | 是否合入主线 | 链接 | +|:----:|:----:|:---:|:---:|:----------:|:----:| +| 2025/07/17 | Adam Li | [sched/fair: Fix imbalance issue when balancing fork](https://lore.kernel.org/all/20250717062036.432243-1-adamli@os.amperecomputing.com) | 这组补丁提出并修复了调度器在频繁 fork 场景下的负载不均衡问题. 当前调度逻辑在选择新任务目标 CPU 时, 可能错误地将新线程分配到实际不可用的 CPU 组, 导致部分 CPU 拥塞而其他 CPU 空闲. 提交的六个补丁中, 补丁 1 和 2 修正了调度组统计逻辑, 仅考虑任务可运行的 CPU, 避免误判组负载状态. 补丁 3 将组权重计算基于实际参与调度的 CPU. 补丁 4-6 则重构并统一了 `update_sg_wakeup_stats()` 与 `update_sg_lb_stats()` 的公共逻辑到新函数 `update_sg_stats()` 中. | v2 ☐☑✓ | [2025/07/17, LORE v2, 0/6](https://lore.kernel.org/all/20250717062036.432243-1-adamli@os.amperecomputing.com) | ### 4.3.4 Reduce the LoadBalancing overhead ------- @@ -2086,7 +2095,7 @@ update_blocked_averages() 在多个场景都被发现成为非常严重的性能 | 时间 | 作者 | 特性 | 描述 | 是否合入主线 | 链接 | |:---:|:----:|:---:|:----:|:---------:|:----:| -| 2025/03/13 | K Prateek Nayak | [sched/fair: Propagate load balancing stats up the sched domain hierarchy](https://lore.kernel.org/all/20250313093746.6760-1-kprateek.nayak@amd.com) | 通过在调度域(sched domain)层次结构中传播负载均衡统计信息来提高效率并减少负载均衡的开销. 以下是补丁的主要内容和目标:
1. 问题: 在多核处理器系统中, 负载均衡操作可能占用大量时间, 尤其是在包含大量 CPU 的调度域中. 这种开销可能导致调度延迟增加,影响系统的性能和响应能力.
2. 现状: 目前的调度器在进行负载均衡时, 每个调度域都会独立计算负载统计信息, 而这些信息在不同调度域之间没有共享. 这导致了重复计算和较高的开销.
3. 目标: 通过在调度域层次结构中传播负载均衡统计信息, 减少重复计算, 提高负载均衡的效率, 并减少负载均衡的抖动(jitter).
2. 主要功能和实现:
2.1 统计信息传播: 在每个调度组(sched group)中引入一个指向更高层次调度域共享结构(sd->shared)的引用(sg->shared). 通过这个引用, 可以在较低层次的调度域中收集的负载均衡统计信息被传播到更高层次的调度域中.
实现方式: 引入 sg_lb_stats 对象, 用于在 sg->shared 中聚合负载均衡统计信息.
在 update_sg_lb_stats() 函数中, 检查 sg_lb_stats 的有效性, 并在需要时更新统计信息.
在 update_sd_lb_stats() 函数中, 从所有遍历的调度组中聚合统计信息, 并更新更高层次调度域的统计信息
2.2 优化负载均衡, 减少重复计算: 通过在调度域层次结构中传播统计信息, 避免了在不同调度域中重复计算相同的负载均衡统计信息. 提高效率: 通过减少重复计算, 降低了负载均衡操作的总体开销, 从而提高了系统的调度效率.
减少抖动: 通过减少负载均衡操作的开销, 降低了负载均衡抖动, 提高了系统的稳定性. | v1 ☐☑✓ | [LORE v1,0/8](https://lore.kernel.org/all/20250313093746.6760-1-kprateek.nayak@amd.com) | +| 2025/03/13 | K Prateek Nayak | [sched/fair: Propagate load balancing stats up the sched domain hierarchy](https://lore.kernel.org/all/20250313093746.6760-1-kprateek.nayak@amd.com) | 通过在调度域 (sched domain) 层次结构中传播负载均衡统计信息来提高效率并减少负载均衡的开销. 以下是补丁的主要内容和目标:
1. 问题: 在多核处理器系统中, 负载均衡操作可能占用大量时间, 尤其是在包含大量 CPU 的调度域中. 这种开销可能导致调度延迟增加,影响系统的性能和响应能力.
2. 现状: 目前的调度器在进行负载均衡时, 每个调度域都会独立计算负载统计信息, 而这些信息在不同调度域之间没有共享. 这导致了重复计算和较高的开销.
3. 目标: 通过在调度域层次结构中传播负载均衡统计信息, 减少重复计算, 提高负载均衡的效率, 并减少负载均衡的抖动 (jitter).
2. 主要功能和实现:
2.1 统计信息传播: 在每个调度组(sched group) 中引入一个指向更高层次调度域共享结构 (sd->shared) 的引用(sg->shared). 通过这个引用, 可以在较低层次的调度域中收集的负载均衡统计信息被传播到更高层次的调度域中.
实现方式: 引入 sg_lb_stats 对象, 用于在 sg->shared 中聚合负载均衡统计信息.
在 update_sg_lb_stats() 函数中, 检查 sg_lb_stats 的有效性, 并在需要时更新统计信息.
在 update_sd_lb_stats() 函数中, 从所有遍历的调度组中聚合统计信息, 并更新更高层次调度域的统计信息 < br>2.2 优化负载均衡, 减少重复计算: 通过在调度域层次结构中传播统计信息, 避免了在不同调度域中重复计算相同的负载均衡统计信息. 提高效率: 通过减少重复计算, 降低了负载均衡操作的总体开销, 从而提高了系统的调度效率.
减少抖动: 通过减少负载均衡操作的开销, 降低了负载均衡抖动, 提高了系统的稳定性. | v1 ☐☑✓ | [LORE v1,0/8](https://lore.kernel.org/all/20250313093746.6760-1-kprateek.nayak@amd.com) | @@ -2116,11 +2125,12 @@ update_blocked_averages() 在多个场景都被发现成为非常严重的性能 | 时间 | 作者 | 特性 | 描述 | 是否合入主线 | 链接 | |:----:|:----:|:---:|:---:|:----------:|:----:| | 2024/08/30 | Vincent Guittot | [5/7, sched/fair: Add push task mechanism for EAS](https://lore.kernel.org/lkml/20250302210539.1563190-6-vincent.guittot@linaro.org/) | [sched/fair: Rework EAS to handle more cases](https://lore.kernel.org/all/20240830130309.2141697-1-vincent.guittot@linaro.org) 中 Patch 5 [`[PATCH 5/7 v5]` sched/fair: Add push task mechanism for EAS](https://lore.kernel.org/all/20250302210539.1563190-1-vincent.guittot@linaro.org) 提议 EAS 在 MISFIT 时使用 push_fair_task() 来进行主动的任务迁移. | v1 ☐☑✓ | [LORE v1,0/5](https://lore.kernel.org/all/20240830130309.2141697-1-vincent.guittot@linaro.org) | -| 2025/04/09 | K Prateek Nayak | [using the push task mechanism for idle and newidle balance](https://lore.kernel.org/all/20250409111539.23791-1-kprateek.nayak@amd.com) | 在 OSPM'25 上, 不少开发者建议使用推送任务机制来进行 idle balance 和 newidle balance. 借鉴了 [sched/fair: Rework EAS to handle more cases](https://lore.kernel.org/all/20240830130309.2141697-1-vincent.guittot@linaro.org) 的思路, 实现了一套统一的 CFS 任务推送框架, 并已针对 !EAS 场景进行了实现.
1. 该系列实现了 [Valentin 的想法](https://lore.kernel.org/lkml/xhsmh1putoxbz.mognet@vschneid-thinkpadt14sgen2i.remote.csb), 即在存在可推送任务的情况下, CPU 会将自身设置为每个 LLC 的"过载掩码(overloaded mask)".
2. NUMA 间的新空闲平衡机制对此做了优化, 会先遍历本地 LLC 上 overloaded mask 中的 CPU 集合, 然后遍历同一 NUMA 节点中其他 LLC 上 overloaded mask 中的 CPU 集合, 目的是将单个任务拉向自身, 而非执行全面的负载均衡.
3. 这实现了 [David Vernet 的 SAHRED_RUNQ 原型](https://lore.kernel.org/lkml/20231212003141.216236-1-void@manifault.com/) 中的一些想法, 不过, 与每个 LLC/每个分片使用一个单独的 SHARED_RUNQ 不同, 这里过载掩码用作指示符, 表明每个 CPU 的 rq 中包含可迁移到即将空闲的 CPU 的可推送任务. 这样做的代价是维护过载的 cpumask, 但避免了为每个 SHARED_RUNQ 设置锁.
4. 推送回调函数本身已进行了修改, 会尝试将可推送任务列表中的任务推送到"nohz.idle_cpus_mask"掩码中的某个 CPU 上, 从而减轻空闲平衡的负载. | v1 ☐☑✓ | [LORE v1,0/5](https://lore.kernel.org/all/20250409111539.23791-1-kprateek.nayak@amd.com) | -| 2023/12/11 | David Vernet | [sched: Implement shared runqueue in fair.c](https://lore.kernel.org/all/20231212003141.216236-1-void@manifault.com) | 调度器必须不断地在工作保护和避免代价高昂的迁移之间取得平衡, 迁移会因为缓存局部性降低而损害性能. 系统的拓扑结构使问题进一步复杂化. 在同一个 LLC 上的核心之间迁移任务可能比将任务保留在 CPU 本地更理想, 而在 LLC 或 NUMA 节点之间迁移任务可能会使平衡向另一个方向倾斜. 考虑到这一点, 虽然 CFS 基本上是一个节省工作的调度器, 但在某些情况下, 调度器会选择将任务保留在 CPU 本地, 而将其迁移到空闲核心可能是更优的选择. 内核提供了 migration_cost_ns, wakeup_granularity_ns 等参数鼓励调度器尽可能节省工作, 同时也为了保持任务运行相对较长的时间片, 以避免上下文切换的开销. 总的来说, 这些旋钮提供了实质性的性能优势; 从而使吞吐量提高了大约 20%. 然而, 值得注意的是, 这种改进并不是在机器完全饱和的情况下实现的. 也就是说, 即使有了这些参数, 我们注意到即使主机过度使用, CPU 仍然处于空闲状态. 作者这个补丁集中提出的"共享 wakequeue"(swqueue)特性. swqueue 背后的想法很简单: 它使调度器能够通过将唤醒任务放置到每个 LLC FIFO 队列中来积极地节省工作, 该队列可以由 LLC FIFO 队列中的另一个核心拉出, 然后可以在空闲之前将其拉出. | v4 ☐☑✓ | [2023/06/13, LORE RFC, 0/7](https://lore.kernel.org/lkml/20230613052004.2836135-1-void@manifault.com)
*-*-*-*-*-*-*-*
[2023/07/10, LORE v2,0/7](https://lore.kernel.org/lkml/20230710200342.358255-1-void@manifault.com)
*-*-*-*-*-*-*-*
[2023/08/09, LORE v3,0/7](https://lore.kernel.org/all/20230809221218.163894-1-void@manifault.com)
*-*-*-*-*-*-*-*
[2023/12/11, LORE v4,0/8](https://lore.kernel.org/all/20231212003141.216236-1-void@manifault.com) | +| 2025/04/09 | K Prateek Nayak | [using the push task mechanism for idle and newidle balance](https://lore.kernel.org/all/20250409111539.23791-1-kprateek.nayak@amd.com) | 在 OSPM'25 上, 不少开发者建议使用推送任务机制来进行 idle balance 和 newidle balance. 借鉴了 [sched/fair: Rework EAS to handle more cases](https://lore.kernel.org/all/20240830130309.2141697-1-vincent.guittot@linaro.org) 的思路, 实现了一套统一的 CFS 任务推送框架, 并已针对 !EAS 场景进行了实现.
1. 该系列实现了 [Valentin 的想法](https://lore.kernel.org/lkml/xhsmh1putoxbz.mognet@vschneid-thinkpadt14sgen2i.remote.csb), 即在存在可推送任务的情况下, CPU 会将自身设置为每个 LLC 的 "过载掩码(overloaded mask)".
2. NUMA 间的新空闲平衡机制对此做了优化, 会先遍历本地 LLC 上 overloaded mask 中的 CPU 集合, 然后遍历同一 NUMA 节点中其他 LLC 上 overloaded mask 中的 CPU 集合, 目的是将单个任务拉向自身, 而非执行全面的负载均衡.
3. 这实现了 [David Vernet 的 SAHRED_RUNQ 原型](https://lore.kernel.org/lkml/20231212003141.216236-1-void@manifault.com/) 中的一些想法, 不过, 与每个 LLC / 每个分片使用一个单独的 SHARED_RUNQ 不同, 这里过载掩码用作指示符, 表明每个 CPU 的 rq 中包含可迁移到即将空闲的 CPU 的可推送任务. 这样做的代价是维护过载的 cpumask, 但避免了为每个 SHARED_RUNQ 设置锁.
4. 推送回调函数本身已进行了修改, 会尝试将可推送任务列表中的任务推送到 "nohz.idle_cpus_mask" 掩码中的某个 CPU 上, 从而减轻空闲平衡的负载. | v1 ☐☑✓ | [LORE v1,0/5](https://lore.kernel.org/all/20250409111539.23791-1-kprateek.nayak@amd.com) | +| 2023/12/11 | David Vernet | [sched: Implement shared runqueue in fair.c](https://lore.kernel.org/all/20231212003141.216236-1-void@manifault.com) | 调度器必须不断地在工作保护和避免代价高昂的迁移之间取得平衡, 迁移会因为缓存局部性降低而损害性能. 系统的拓扑结构使问题进一步复杂化. 在同一个 LLC 上的核心之间迁移任务可能比将任务保留在 CPU 本地更理想, 而在 LLC 或 NUMA 节点之间迁移任务可能会使平衡向另一个方向倾斜. 考虑到这一点, 虽然 CFS 基本上是一个节省工作的调度器, 但在某些情况下, 调度器会选择将任务保留在 CPU 本地, 而将其迁移到空闲核心可能是更优的选择. 内核提供了 migration_cost_ns, wakeup_granularity_ns 等参数鼓励调度器尽可能节省工作, 同时也为了保持任务运行相对较长的时间片, 以避免上下文切换的开销. 总的来说, 这些旋钮提供了实质性的性能优势; 从而使吞吐量提高了大约 20%. 然而, 值得注意的是, 这种改进并不是在机器完全饱和的情况下实现的. 也就是说, 即使有了这些参数, 我们注意到即使主机过度使用, CPU 仍然处于空闲状态. 作者这个补丁集中提出的 "共享 wakequeue"(swqueue)特性. swqueue 背后的想法很简单: 它使调度器能够通过将唤醒任务放置到每个 LLC FIFO 队列中来积极地节省工作, 该队列可以由 LLC FIFO 队列中的另一个核心拉出, 然后可以在空闲之前将其拉出. | v4 ☐☑✓ | [2023/06/13, LORE RFC, 0/7](https://lore.kernel.org/lkml/20230613052004.2836135-1-void@manifault.com)
*-*-*-*-*-*-*-*
[2023/07/10, LORE v2,0/7](https://lore.kernel.org/lkml/20230710200342.358255-1-void@manifault.com)
*-*-*-*-*-*-*-*
[2023/08/09, LORE v3,0/7](https://lore.kernel.org/all/20230809221218.163894-1-void@manifault.com)
*-*-*-*-*-*-*-*
[2023/12/11, LORE v4,0/8](https://lore.kernel.org/all/20231212003141.216236-1-void@manifault.com) | +| 2025/06/26 | Shrikanth Hegde | [cpu avoid state and push task mechanism](https://lore.kernel.org/all/20250625191108.1646208-1-sshegde@linux.ibm.com) | 提出 "CPU Avoid" 机制, 旨在优化虚拟化环境中因 vCPU 数量超过 pCPU 导致频繁上下文切换的问题. 其核心思想是标记某些 vCPU 为 "avoid" 状态, 调度器应尽量避免将任务分配到这些 CPU, 从而减少因抢占带来的性能开销.
补丁内容包括: 引入 `cpu_avoid_mask`、添加 sysfs 接口、支持 RT 调度类、使用静态密钥减少性能影响, 并修正了 v1 中的问题.
待解决问题包括: IRQ 处理是否需适配、任务绑定到 avoid CPU 的处理方式、对其他调度类(如 SCHED_DL) 的支持、性能测试、push/pull 任务逻辑整合及 `cpu_avoid_mask` 的同步机制. | v2 ☐☑✓ | [2025/05/23, LORE RFC, 0/5](https://lore.kernel.org/all/20250523181448.3777233-1-sshegde@linux.ibm.com)
*-*-*-*-*-*-*-*
[2025/06/26, LORE v2, 0/9](https://lore.kernel.org/all/20250625191108.1646208-1-sshegde@linux.ibm.com) | -## 4.3.6 Migrations Rate Limits +### 4.3.6 Migrations Rate Limits ------- | 时间 | 作者 | 特性 | 描述 | 是否合入主线 | 链接 | @@ -2134,8 +2144,8 @@ update_blocked_averages() 在多个场景都被发现成为非常严重的性能 | 时间 | 作者 | 特性 | 描述 | 是否合入主线 | 链接 | |:---:|:----:|:---:|:----:|:---------:|:----:| -| 2025/03/25 | Peter Zijlstra | [sched: Cache aware load-balancing](https://lore.kernel.org/all/20250325120952.GJ36322@noisy.programming.kicks-ass.net) | 这个补丁旨在实现调度器中的缓存感知负载均衡功能. 以下是该补丁的主要内容和目标:
1. 缓存亲和性建模: 补丁尝试对缓存亲和性进行建模, 特别是针对 LLC(Last Level Cache) 层面. 虽然目前主要关注于 LLC, 但理论上也可以扩展到处理 L2 等其他缓存域的情况.
2. 选择最佳 CPU: 它计算在同一个 LLC 内的最近运行时间最长的 CPU, 并在唤醒路径中使用这个 CPU 来引导任务分配, 同时在 task_hot() 函数中限制从这个 CPU 迁移任务, 以保持缓存亲和性.
3. 潜在的扩展能力: 补丁中提到一个 XXX 标记, 表明未来可能需要考虑如何在一个节点内找到最佳的 LLC(与 NUMA_BALANCING 的交互), 这意味着该补丁有进一步发展的空间.
这个补丁的目标是通过改进 Linux 内核的调度器, 使其能够更加智能地考虑缓存的影响, 从而提高系统性能。具体来说, 就是通过优化任务到 CPU 的分配策略来减少由于频繁跨缓存域迁移导致的性能损失. | v1 ☐☑✓ | [2025/03/25, LORE](https://lore.kernel.org/all/20250325120952.GJ36322@noisy.programming.kicks-ass.net) | -| 2025/04/21 | Chen Yu | [sched: Introduce Cache aware scheduling](https://lore.kernel.org/all/cover.1745199017.git.yu.c.chen@intel.com) | 该邮件由 Chen Yu 提交, 提出并更新了" Cache-aware scheduling" ( 缓存感知调度) 的 RFC 补丁集( 共 5 个补丁) , 旨在提升系统性能. 该调度机制通过将资源共享的进程集中调度到同一缓存域中, 提高缓存局部性, 减少缓存缺失. 补丁集修复了前一版本中的问题, 优化了任务迁移逻辑, 避免在缓存域过载时的性能下降, 并新增 ftrace 事件以辅助性能分析. 参见 [phoronix, 2025/04/21, Intel Posts Newest Code For Cache Aware Scheduling On Linux](https://www.phoronix.com/news/Linux-RFC-Cache-Aware-Sched), [lwn, 2025/04/29, Cache awareness for the CPU scheduler](https://lwn.net/Articles/1018334) | v1 ☐☑✓ | [2025/04/21, LORE v1, 0/5](https://lore.kernel.org/all/cover.1745199017.git.yu.c.chen@intel.com) | +| 2025/03/25 | Peter Zijlstra | [sched: Cache aware load-balancing](https://lore.kernel.org/all/20250325120952.GJ36322@noisy.programming.kicks-ass.net) | 这个补丁旨在实现调度器中的缓存感知负载均衡功能. 以下是该补丁的主要内容和目标:
1. 缓存亲和性建模: 补丁尝试对缓存亲和性进行建模, 特别是针对 LLC(Last Level Cache) 层面. 虽然目前主要关注于 LLC, 但理论上也可以扩展到处理 L2 等其他缓存域的情况.
2. 选择最佳 CPU: 它计算在同一个 LLC 内的最近运行时间最长的 CPU, 并在唤醒路径中使用这个 CPU 来引导任务分配, 同时在 task_hot() 函数中限制从这个 CPU 迁移任务, 以保持缓存亲和性.
3. 潜在的扩展能力: 补丁中提到一个 XXX 标记, 表明未来可能需要考虑如何在一个节点内找到最佳的 LLC(与 NUMA_BALANCING 的交互), 这意味着该补丁有进一步发展的空间.
这个补丁的目标是通过改进 Linux 内核的调度器, 使其能够更加智能地考虑缓存的影响, 从而提高系统性能。具体来说, 就是通过优化任务到 CPU 的分配策略来减少由于频繁跨缓存域迁移导致的性能损失. | v1 ☐☑✓ | [2025/03/25, LORE](https://lore.kernel.org/all/20250325120952.GJ36322@noisy.programming.kicks-ass.net) | +| 2025/04/21 | Chen Yu | [sched: Introduce Cache aware scheduling](https://lore.kernel.org/all/cover.1745199017.git.yu.c.chen@intel.com) | 该邮件由 Chen Yu 提交, 提出并更新了 "Cache-aware scheduling" (缓存感知调度) 的 RFC 补丁集(共 5 个补丁) , 旨在提升系统性能. 该调度机制通过将资源共享的进程集中调度到同一缓存域中, 提高缓存局部性, 减少缓存缺失. 补丁集修复了前一版本中的问题, 优化了任务迁移逻辑, 避免在缓存域过载时的性能下降, 并新增 ftrace 事件以辅助性能分析. 参见 [phoronix, 2025/04/21, Intel Posts Newest Code For Cache Aware Scheduling On Linux](https://www.phoronix.com/news/Linux-RFC-Cache-Aware-Sched), [lwn, 2025/04/29, Cache awareness for the CPU scheduler](https://lwn.net/Articles/1018334), [phoronix, 2025/06/18, Cache-Aware Scheduling For Linux Refined - Better AMD & Intel CPU Performance](https://www.phoronix.com/news/Linux-Cache-Aware-Sched-v3) | v1 ☐☑✓ | [2025/04/21, LORE v1, 0/5](https://lore.kernel.org/all/cover.1745199017.git.yu.c.chen@intel.com)
*-*-*-*-*-*-*-*
[2025/06/18, LORE v3, 00/20](https://lore.kernel.org/lkml/cover.1750268218.git.tim.c.chen@linux.intel.com) | ### 4.3.8 Predict load based ------- @@ -2147,7 +2157,7 @@ update_blocked_averages() 在多个场景都被发现成为非常严重的性能 `p(A|B) = p(AB)/p(B)`. -要做到这一点, 我们需要在任务进入或离开运行队列(rq)时计算其负载量 +要做到这一点, 我们需要在任务进入或离开运行队列 (rq) 时计算其负载量 如果需要详细统计则需要使用一个二维数组来记录: @@ -2165,7 +2175,7 @@ update_blocked_averages() 在多个场景都被发现成为非常严重的性能 1. 第一项优化是将负载归一化到 0 至 1024(se->avg.load_avg 的最大值与其权重相关), 然后向右偏移 LOAD_GRAN_SHIFT(4), 这样它就代表了 16 的范围. -例如, 如果负载为 893,那么 `893 >> 4 = 55`, `55 << 4 = 880`, 所以这意味着负载从 880 到 `896 = 880 + (1<<4)``. +例如, 如果负载为 893,那么 `893 >> 4 = 55`, `55 <<4 = 880`, 所以这意味着负载从 880 到 `896 = 880 + (1<<4)``. 对于一个普通进程, se_weight = 1024, 每 1ms 的负载变化约为 `1024 * 1000 / 47742 = 21` ~~<16~~. 理论上, 统计误差不会超过 1 毫秒. @@ -2773,8 +2783,7 @@ Peter 将 sched/numa 的整体思路上也做了不断的调整和改动, 也开 | 2021/10/27 | Gang Li | [sched/numa: add per-process numa_balancing](https://lkml.org/lkml/2021/10/27/517) | 这个补丁在 prctl 中添加了一个新的 api PR_NUMA_BALANCING 来控制当个进程参与和禁止 numa_balancing. 在执行 numa_balancing 时, 大量的页面错误会导致性能损失. 因此, 那些关心最坏情况下性能的进程需要禁用 numa_balancing. 相反, 另一些则允许暂时的性能损失以换取更高的平均性能, 因此启用 numa 平衡对它们来说更好. 但是当前 numa balancing 只能由 `/proc/sys/kernel/numa_balancing` 全局控制. 因此这个特性希望禁用 / 启用每个进程的 numa_balancing. 在 mm_struct 下添加 numa_balancing. 然后在 task_tick_numa 中使用来控制. mm ->numa_balancing 仅在全局 numa_balancing 启用时有效. 当全局 numa_balancing 被禁用时, mm->numa_blancing 不会改变, 当你想要获得进程 numa_balancing 状态时, 你总是会得到 0, 并且当你使用 prctl set 它时, 内核将返回 err. | v1 ☐ | [LKML](https://lkml.org/lkml/2021/10/27/517)
*-*-*-*-*-*-*-*
[LORE v1,0/1](https://lore.kernel.org/r/20220224075227.27127-1-ligang.bdlg@bytedance.com)
*-*-*-*-*-*-*-*
[2022/09/29 LORE v4](https://lore.kernel.org/all/20220929064359.46932-1-ligang.bdlg@bytedance.com)
*-*-*-*-*-*-*-*
[2022/10/27 LORE v5,0/2](https://lore.kernel.org/all/20221027025302.45766-1-ligang.bdlg@bytedance.com)
*-*-*-*-*-*-*-*
[2023/04/13 LORE v6,0/2](https://lore.kernel.org/all/20230412140701.58337-1-ligang.bdlg@bytedance.com) | | 2014/05/14 | Rik van Riel | [sched/numa: Allow task switch if load imbalance improves](https://linuxplumbersconf.org/event/4/contributions/480) | 目前 NUMA 平衡代码只允许在 NUMA 节点上的负载处于平衡状态时在 NUMA 节点之间移动任务. 当负载开始不平衡时, 它就崩溃了. 因此这个补丁引入 load_too_imbalanced() 来判定, 如果不平衡较小, 或者新的不平衡小于原来的不平衡, 则允许在 NUMA 节点之间移动任务. | v1 ☑ 3.16-rc1 | [COMMIT](https://git.kernel.org/pub/scm/linux/kernel/git/torvalds/linux.git/commit/?id=e63da03639cc9e6e83b62e7ef8ffdbb92421416a) | | 2018/09/21 | Srikar Dronamraju | [sched/numa: Avoid task migration for small NUMA improvement](https://git.kernel.org/pub/scm/linux/kernel/git/torvalds/linux.git/commit/?id=6fd98e775f24fd41520928d345f5db3ff52bb35d) | 如果 NUMAC 层次的任务迁移带来的改进非常小 (小于 SMALLIMP), 那么应该尽量避免任务迁移. 否则可能会带来 pingpong(进程来回迁移颠簸), 甚至 cache-miss 引起的性能下降. | v1 ☑ 4.19-rc7 | [COMMIT](https://git.kernel.org/pub/scm/linux/kernel/git/torvalds/linux.git/commit/?id=6fd98e775f24fd41520928d345f5db3ff52bb35d) | -| 2025/02/25 | Chen Yu | [sched/numa: Introduce per cgroup numa balance control](https://lore.kernel.org/all/cover.1740483690.git.yu.c.chen@intel.com) | TODO | v1 ☐☑✓ | [LORE v1,0/3](https://lore.kernel.org/all/cover.1740483690.git.yu.c.chen@intel.com) | - +| 2025/02/25 | Chen Yu | [sched/numa: Introduce per cgroup numa balance control](https://lore.kernel.org/all/cover.1740483690.git.yu.c.chen@intel.com) | 这组补丁旨在引入基于 cgroup 的 NUMA 平衡控制机制. 目前 NUMA 平衡为全局配置, 无法满足不同 cgroup 差异化需求. 新方案允许系统管理员通过设置 `numa_balancing_mode=4` 启用 per-cgroup 模式, 并通过 `cpu. numa_load_balance` 文件为特定 cgroup 开启 NUMA 平衡.
补丁实现包括: 新增 cgroup 控制接口、任务组(task_group) 支持 numa_balance 状态、文档更新及代码注释完善. 测试结果显示, 在开启 per-cgroup NUMA 平衡后, 用户时间减少至原来的 33%, 总耗时降至 45%, 性能显著提升.
待完善部分包括: 支持 cgroup 层级继承机制, 即子 cgroup 启用 NUMA 平衡需其父 cgroup 同时启用. | v2 ☐☑✓ | [2025/02/25, LORE v1, 0/3](https://lore.kernel.org/all/cover.1740483690.git.yu.c.chen@intel.com)
*-*-*-*-*-*-*-*
[2025/06/25, LORE](https://lore.kernel.org/all/20250625102337.3128193-1-yu.c.chen@intel.com) | ### 4.6.3 Scan Period Rate ------- @@ -2831,7 +2840,7 @@ commit [6e5fb223e89d ("mm: sched: numa: Implement constant, per task Working Set | 2024/03/22 | Raghavendra K T | [A Summary of VMA scanning improvements explored](https://lore.kernel.org/all/cover.1710829750.git.raghavendra.kt@amd.com) | NUMA Balancing 改进的第一个版本, 参考了 Ingo 和 PeterZ 的建议. | v1 ☐☑✓ | [LORE](https://lore.kernel.org/all/cover.1710829750.git.raghavendra.kt@amd.com) | | 2023/05/03 | Raghavendra K T | [sched/numa: Disjoint set vma scan improvements](https://lore.kernel.org/all/cover.1683033105.git.raghavendra.kt@amd.com) | TODO | v1 ☐☑✓ | [LORE v1,0/2](https://lore.kernel.org/all/cover.1683033105.git.raghavendra.kt@amd.com) | | 2023/08/29 | Raghavendra K T | [sched/numa: Enhance disjoint VMA scanning](https://lore.kernel.org/all/cover.1693287931.git.raghavendra.kt@amd.com) | 针对 NUMA 平衡增强 VMA 扫描的延续, 试图通过增强无条件 VMA 扫描逻辑来解决上述问题. | v1 ☐☑✓ | [LORE v1,0/6](https://lore.kernel.org/all/cover.1693287931.git.raghavendra.kt@amd.com) | -| 2025/04/23 | Libo Chen | [sched/numa: Skip VMA scanning on memory pinned to one NUMA node via cpuset.mems](https://lore.kernel.org/all/20250424024523.2298272-1-libo.chen@oracle.com) | Libo Chen 提交了一组补丁( v5) , 旨在优化 NUMA 调度中的 VMA 扫描行为. 若内存通过 `cpuset. mems` 被固定在某一 NUMA 节点, 则跳过 NUMA 平衡的 VMA 扫描, 以提升性能. 补丁同时添加了跟踪点, 用于记录因 `cpuset` 内存固定而跳过 NUMA 平衡的事件. 该优化保持了与现有 VMA 跳过机制的一致性, 并在多个版本迭代中完善了错误处理和日志格式, 如修复指针安全问题、添加 `BUILD_BUG_ON( ) `等. 目前尚未提供基准测试结果, 但计划运行更多负载测试以评估性能提升. | v5 ☐☑✓ | [2025/04/23, LORE v5, 0/2](https://lore.kernel.org/all/20250424024523.2298272-1-libo.chen@oracle.com)
*-*-*-*-*-*-*-*
[2025/04/24, LORE v5, 0/2](https://lore.kernel.org/lkml/20250424024523.2298272-1-libo.chen@oracle.com) | +| 2025/04/23 | Libo Chen | [sched/numa: Skip VMA scanning on memory pinned to one NUMA node via cpuset.mems](https://lore.kernel.org/all/20250424024523.2298272-1-libo.chen@oracle.com) | Libo Chen 提交了一组补丁(v5) , 旨在优化 NUMA 调度中的 VMA 扫描行为. 若内存通过 `cpuset. mems` 被固定在某一 NUMA 节点, 则跳过 NUMA 平衡的 VMA 扫描, 以提升性能. 补丁同时添加了跟踪点, 用于记录因 `cpuset` 内存固定而跳过 NUMA 平衡的事件. 该优化保持了与现有 VMA 跳过机制的一致性, 并在多个版本迭代中完善了错误处理和日志格式, 如修复指针安全问题、添加 `BUILD_BUG_ON() ` 等. 目前尚未提供基准测试结果, 但计划运行更多负载测试以评估性能提升. | v5 ☐☑✓ | [2025/04/23, LORE v5, 0/2](https://lore.kernel.org/all/20250424024523.2298272-1-libo.chen@oracle.com)
*-*-*-*-*-*-*-*
[2025/04/24, LORE v5, 0/2](https://lore.kernel.org/lkml/20250424024523.2298272-1-libo.chen@oracle.com) | ### 4.6.4 NUMA Balancing Placement And Migration @@ -2953,8 +2962,8 @@ pseudo-interleaving 中 active_nodes 引入的目标是为了让共享页面在 | 时间 | 作者 | 特性 | 描述 | 是否合入主线 | 链接 | |:----:|:----:|:---:|:---:|:----------:|:----:| -| 2024/03/29 | Baolin Wang | [support multi-size THP numa balancing](https://lore.kernel.org/all/cover.1711683069.git.baolin.wang@linux.alibaba.com) | 这个补丁试图支持 THP 页面 的 NUMA Balancing.
问题背景: 当前的匿名页面分配已经支持多尺寸 THP, 但是 NUMA 平衡仍然禁止 mTHP 迁移, 即使它是独占映射, 这被认为是不合理的.
mTHP 扫描: 以前的提交(commit 859d4adc3415)跳过了共享 CoW 页面的 NUMA 页面迁移, 以避免共享数据段迁移. 另一个 commit 80d47f5de5e3, 它使用 page_count() 来避免 GUP 页面迁移, 这也会跳过 mTHP 的 NUMA 扫描, 理论上可以使用 folio_maybe_dma_pinned() 来检测 GUP(get_user_pages)问题, 尽管存在 GUP 竞争, 但似乎已经被之前的提交解决.
mTHP 迁移: 大尺寸的 folio(包括 THP)比 4K 基本页面更容易受到线程间虚假共享问题的影响, 导致页面在 NUMA 平衡过程中来回移动. 作为支持 mTHP NUMA 平衡的第一步, 可以采用 PMD(Page Middle Directories) 映射 THP 的策略, 使用 should_numa_migrate_memory() 中的两阶段过滤器来检查 mTHP 是否在线程间高度竞争, 以避免一定程度的虚假共享.
性能数据: 补丁提供了在不同 mTHP 尺寸(16K、64K、128K)下, 补丁版本与基础版本在 autonuma 基准测试中的表现对比. 数据显示补丁版本在某些测试场景下性能有显著提升. | v2 ☐☑✓ | [2024/03/26, LORE,0/2](https://lore.kernel.org/all/cover.1711453317.git.baolin.wang@linux.alibaba.com)
*-*-*-*-*-*-*-*
[2024/04/01, LORE v2,0/2](https://lore.kernel.org/all/cover.1711683069.git.baolin.wang@linux.alibaba.com)
*-*-*-*-*-*-*-*
[2024/04/03, LORE v3,0/2](https://lore.kernel.org/all/cover.1712132950.git.baolin.wang@linux.alibaba.com) | -| 2025/05/21 | Bharata B Rao | [Batch migration for NUMA balancing](https://lore.kernel.org/all/20250521080238.209678-1-bharata@amd.com) | 邮件提出了一项将 NUMA 平衡迁移改为批量处理的 RFC 补丁, 旨在通过收集需迁移的 folio 并在 task_work 上下文中批量迁移, 提升性能. 当前使用 Gregory 提供的 `migrate_misplaced_folio_batch()` API 实现异步批量迁移.
讨论重点包括:
1. 是否应隔离待迁移 folio? 当前通过 `folio-> lru` 链接隔离, 但存在长期隔离风险, 也可改用 PFN 延迟隔离;
2. 如何记录迁移目标节点( target_nid)? 当前复用 `last_cpupid` 字段, 但需各子系统自行维护;
3. 批量大小控制: 目前为固定阈值, 未来可考虑 sysctl 配置或自动调节.
该补丁尚处于早期阶段, 供社区讨论. 作者建议未来可引入专门迁移线程统一处理来自不同热页检测机制(如 kpromoted、kmmscand、MGLRU 等) 的迁移请求. | v0 ☐☑✓ | [2025/05/21, LORE v0, 0/2](https://lore.kernel.org/all/20250521080238.209678-1-bharata@amd.com) | +| 2024/03/29 | Baolin Wang | [support multi-size THP numa balancing](https://lore.kernel.org/all/cover.1711683069.git.baolin.wang@linux.alibaba.com) | 这个补丁试图支持 THP 页面 的 NUMA Balancing.
问题背景: 当前的匿名页面分配已经支持多尺寸 THP, 但是 NUMA 平衡仍然禁止 mTHP 迁移, 即使它是独占映射, 这被认为是不合理的.
mTHP 扫描: 以前的提交 (commit 859d4adc3415) 跳过了共享 CoW 页面的 NUMA 页面迁移, 以避免共享数据段迁移. 另一个 commit 80d47f5de5e3, 它使用 page_count() 来避免 GUP 页面迁移, 这也会跳过 mTHP 的 NUMA 扫描, 理论上可以使用 folio_maybe_dma_pinned() 来检测 GUP(get_user_pages)问题, 尽管存在 GUP 竞争, 但似乎已经被之前的提交解决.
mTHP 迁移: 大尺寸的 folio(包括 THP)比 4K 基本页面更容易受到线程间虚假共享问题的影响, 导致页面在 NUMA 平衡过程中来回移动. 作为支持 mTHP NUMA 平衡的第一步, 可以采用 PMD(Page Middle Directories) 映射 THP 的策略, 使用 should_numa_migrate_memory() 中的两阶段过滤器来检查 mTHP 是否在线程间高度竞争, 以避免一定程度的虚假共享.
性能数据: 补丁提供了在不同 mTHP 尺寸 (16K、64K、128K) 下, 补丁版本与基础版本在 autonuma 基准测试中的表现对比. 数据显示补丁版本在某些测试场景下性能有显著提升. | v2 ☐☑✓ | [2024/03/26, LORE,0/2](https://lore.kernel.org/all/cover.1711453317.git.baolin.wang@linux.alibaba.com)
*-*-*-*-*-*-*-*
[2024/04/01, LORE v2,0/2](https://lore.kernel.org/all/cover.1711683069.git.baolin.wang@linux.alibaba.com)
*-*-*-*-*-*-*-*
[2024/04/03, LORE v3,0/2](https://lore.kernel.org/all/cover.1712132950.git.baolin.wang@linux.alibaba.com) | +| 2025/05/21 | Bharata B Rao | [Batch migration for NUMA balancing](https://lore.kernel.org/all/20250521080238.209678-1-bharata@amd.com) | 邮件提出了一项将 NUMA 平衡迁移改为批量处理的 RFC 补丁, 旨在通过收集需迁移的 folio 并在 task_work 上下文中批量迁移, 提升性能. 当前使用 Gregory 提供的 `migrate_misplaced_folio_batch()` API 实现异步批量迁移.
讨论重点包括:
1. 是否应隔离待迁移 folio? 当前通过 `folio-> lru` 链接隔离, 但存在长期隔离风险, 也可改用 PFN 延迟隔离;
2. 如何记录迁移目标节点(target_nid)? 当前复用 `last_cpupid` 字段, 但需各子系统自行维护;
3. 批量大小控制: 目前为固定阈值, 未来可考虑 sysctl 配置或自动调节.
该补丁尚处于早期阶段, 供社区讨论. 作者建议未来可引入专门迁移线程统一处理来自不同热页检测机制(如 kpromoted、kmmscand、MGLRU 等) 的迁移请求. | v0 ☐☑✓ | [2025/05/21, LORE v0, 0/2](https://lore.kernel.org/all/20250521080238.209678-1-bharata@amd.com) | @@ -3173,11 +3182,11 @@ v3.13 实现 NUMA Balancing 执行 Task Placement 的过程中, task_numa_find_c 最早的时候, task_numa_migrate() 进行迁移决策的时候, 如果 numa_preferred_nid 上没有剩余 capacity, 就会跳过使用 task_numa_find_cpu() 从 numa_preferred_nid 上选择 dest_cpu/dest_task 的操作, 选择遍历系统中的其他 NUMA nodes 来查找 best_cpu(), 参照 [sched/numa: Favor placing a task on the preferred node](https://git.kernel.org/pub/scm/linux/kernel/git/torvalds/linux.git/commit/?id=2c8a50aa873a7e1d6cc0913362051ff9912dc6ca) 和 [sched/numa: Fix placement of workloads spread across multiple nodes](https://git.kernel.org/pub/scm/linux/kernel/git/torvalds/linux.git/commit/?id=e1dda8a797b59d7ec4b17e393152ec3273a552d5). 这直接造成了在完全过载的系统上工作负载 ** 无法进行 NUMA 聚合 ** 的问题. -因此 v3.17 Rik van Riel 通过 [sched/numa: Ensure task_numa_migrate() checks the preferred node](https://git.kernel.org/pub/scm/linux/kernel/git/torvalds/linux.git/commit/?id=a43455a1d572daf7b730fe12eb747d1e17411365) 修复了问题. 移除了 task_numa_migrate() 中 has_free_capacity, 如果 numa_preferred_nid 上没有足够的 free_capacity, 也应该通过 task_numa_find_cpu() 选出一个 CPU 把进程迁移到 numa_preferred_nid 上. 通过即使首选节点完全繁忙时, 也依旧在其上寻找 best_cpu 来解决问题. 这种方法可以明显加快繁忙系统上任务的 NUMA 聚合. 作者测试在 4 节点系统上将 "perf bench numa mem-P4-T20-m-0-P1000" 从 15 分钟内不收敛改为在 10-20 秒内收敛. 当然可想可知, 这种策略暴力且直接, 但是又会 **造成 NUMA 过度聚合的问题**, 工作负载集中在几个 NUMA 节点上, 而不是适当地分布在整个系统中, 导致系统可用内存带宽和可用 CPU 缓存减少, 从而导致可预测的性能问题. +因此 v3.17 Rik van Riel 通过 [sched/numa: Ensure task_numa_migrate() checks the preferred node](https://git.kernel.org/pub/scm/linux/kernel/git/torvalds/linux.git/commit/?id=a43455a1d572daf7b730fe12eb747d1e17411365) 修复了问题. 移除了 task_numa_migrate() 中 has_free_capacity, 如果 numa_preferred_nid 上没有足够的 free_capacity, 也应该通过 task_numa_find_cpu() 选出一个 CPU 把进程迁移到 numa_preferred_nid 上. 通过即使首选节点完全繁忙时, 也依旧在其上寻找 best_cpu 来解决问题. 这种方法可以明显加快繁忙系统上任务的 NUMA 聚合. 作者测试在 4 节点系统上将 "perf bench numa mem-P4-T20-m-0-P1000" 从 15 分钟内不收敛改为在 10-20 秒内收敛. 当然可想可知, 这种策略暴力且直接, 但是又会 ** 造成 NUMA 过度聚合的问题 **, 工作负载集中在几个 NUMA 节点上, 而不是适当地分布在整个系统中, 导致系统可用内存带宽和可用 CPU 缓存减少, 从而导致可预测的性能问题. 接着 Rik van Riel 继续对 NUMA 聚合进行了优化, 进一步加快了其聚合速度, 参见 [sched,numa: improve NUMA convergence times](https://git.kernel.org/pub/scm/linux/kernel/git/torvalds/linux.git/log/?id=a22b4b012340b988dbe7a58461d6fcc582f34aa0). 在 [load_too_imbalanced()](https://git.kernel.org/pub/scm/linux/kernel/git/torvalds/linux.git/commit/?id=0132c3e1777ceabc24c7d209b7cbe78c28c03c09) 中 [增加了 capacity 感知](https://git.kernel.org/pub/scm/linux/kernel/git/torvalds/linux.git/commit/?id=28a21745190a0ca613cab817bfe3dc65373158bf), 并进一步扩大了 [其使用场景](https://git.kernel.org/pub/scm/linux/kernel/git/torvalds/linux.git/commit/?id=0132c3e1777ceabc24c7d209b7cbe78c28c03c09). 如果单纯迁移任务所能带来的改善 moveimp(Move Improve) 比交换带来的收益 env->best_imp 要高, 则倾向于进行迁移而不是交换, 此时会通过 [load_too_imbalanced() 决策是否允许迁移](https://elixir.bootlin.com/linux/v3.17/source/kernel/sched/fair.c#L1236), 注意此时有意设置改善的收益评分 imp 比 moveimp 略小, 即 imp = moveimp - 1, 这样 IDLE 的 CPU 仍然可以在后续的比较中胜出. -而彼时 v3.16 刚引入 load_too_imbalance(), 这个允许在两个不均衡的 NUMA NODE 进行 NUMA Balancing Mirgarion. 在 task_numa_compare() 时只计算当前正在运行的任务, 但是如果页面被其他任务锁定, NUMA Hinting Faults 可能会导致任务阻塞. 这可能导致一个大型单一实例工作负载 (如 SPECjbb2005) 的所有线程迁移到同一个 NUMA 节点. 因为有时它们都在相同的几个页面上触发 NUMA Hinting Faults, 但是由于页面被 LOCKED 了, 所以每次只有持有页面的线程仍然可以运行, 然后该线程会被迁移到其首选的 NUMA 节点, 而由于其他进程都被 BLOCKED 了, 此时迁移并不会加剧不平衡. 最终造成所有的线程都依次被迁移到同一个节点上, 这种 NUMA 过度聚合的情况下有必要采取必要的手段 **阻止 NUMA 过度向同一节点聚合**. v4.1 [commit 095bebf61a46 ("sched,numa: do not move past the balance point if unbalanced")](https://git.kernel.org/pub/scm/linux/kernel/git/torvalds/linux.git/commit/?id=095bebf61a460ad7f6a45bb17ddbf3a9df2b4397) 在 load_too_imbalanced() 中引入 move_load 流量限制, 通过对迁移负载 move_load 流量进行校验尝试解决 v3.16 可能引入的 NUMA 过度聚合的问题. 通过检查 NUMA Balancing Migration 的 [净移动的方向和流量 [move_load](https://elixir.bootlin.com/linux/v4.1/source/kernel/sched/fair.c#L1243), 并拒绝 NUMA 移动, 如果它会导致系统移动超过平衡点. 在不平衡状态下, 只有使我们更接近平衡点的动作才被允许. 但是这种改动只能单点规避问题, 阻止任务向同一个 NUMA 节点中过度聚合. 类似的问题依旧有很多. 另外任务的分散程度不可控, 这个修改策略在一些期望聚合场景下, 可能会进一步 **阻止 NUMA 聚合**, 造成任务过于分散, 而在一些期望均衡 (分散) 的场景下, 可能又显得稍微有点集中. +而彼时 v3.16 刚引入 load_too_imbalance(), 这个允许在两个不均衡的 NUMA NODE 进行 NUMA Balancing Mirgarion. 在 task_numa_compare() 时只计算当前正在运行的任务, 但是如果页面被其他任务锁定, NUMA Hinting Faults 可能会导致任务阻塞. 这可能导致一个大型单一实例工作负载 (如 SPECjbb2005) 的所有线程迁移到同一个 NUMA 节点. 因为有时它们都在相同的几个页面上触发 NUMA Hinting Faults, 但是由于页面被 LOCKED 了, 所以每次只有持有页面的线程仍然可以运行, 然后该线程会被迁移到其首选的 NUMA 节点, 而由于其他进程都被 BLOCKED 了, 此时迁移并不会加剧不平衡. 最终造成所有的线程都依次被迁移到同一个节点上, 这种 NUMA 过度聚合的情况下有必要采取必要的手段 ** 阻止 NUMA 过度向同一节点聚合 **. v4.1 [commit 095bebf61a46 ("sched,numa: do not move past the balance point if unbalanced")](https://git.kernel.org/pub/scm/linux/kernel/git/torvalds/linux.git/commit/?id=095bebf61a460ad7f6a45bb17ddbf3a9df2b4397) 在 load_too_imbalanced() 中引入 move_load 流量限制, 通过对迁移负载 move_load 流量进行校验尝试解决 v3.16 可能引入的 NUMA 过度聚合的问题. 通过检查 NUMA Balancing Migration 的 [净移动的方向和流量 [move_load](https://elixir.bootlin.com/linux/v4.1/source/kernel/sched/fair.c#L1243), 并拒绝 NUMA 移动, 如果它会导致系统移动超过平衡点. 在不平衡状态下, 只有使我们更接近平衡点的动作才被允许. 但是这种改动只能单点规避问题, 阻止任务向同一个 NUMA 节点中过度聚合. 类似的问题依旧有很多. 另外任务的分散程度不可控, 这个修改策略在一些期望聚合场景下, 可能会进一步 ** 阻止 NUMA 聚合 **, 造成任务过于分散, 而在一些期望均衡 (分散) 的场景下, 可能又显得稍微有点集中. 很快 v4.2 期间就发现上述这种粗暴的方式在系统负载没有过载的情况下又引入了性能回归, 特定工作负载集中在几个 NUMA 节点上, 而不是在整个系统中适当地分散. 这会导致可用内存带宽和可用 CPU 缓存的减少, 从而造成性能下降. 很明显, 造成这样的根本原因是 Load Balance 和 NUMA Balacning 之间的冲突和相互作用, 其中 Load Balance 关注的的短期负载与 NUMA Balacning 期望的基于的长期负载的统计不同. 因此如果过度聚合, 不合适. 如果分散, 那么分散到什么样的程度才比较合适的呢? v4.2 的 [numa,sched: resolve conflict between load balancing and NUMA balancing](https://git.kernel.org/pub/scm/linux/kernel/git/torvalds/linux.git/log/?id=6f9aad0bc37286c0441b57f0ba8cffee50715426) 中 [sched/numa: Only consider less busy nodes as numa balancing destinations](https://git.kernel.org/pub/scm/linux/kernel/git/torvalds/linux.git/commit/?id=6f9aad0bc37286c0441b57f0ba8cffee50715426) 尝试对此问题进行了修复, 尝试在 numa_preferred_nid 过载时, 通过考虑一个负载较轻的节点作为 NUMA Balacning 的目的地, 来弥补 Load Balance 和 NUMA Balacning 之间的冲突, 而不管任务是试图移动到首选节点, 还是转移到另一个节点. 这个补丁又重新引入了对 numa_preferred_nid 节点 numa_has_capacity() 的检查, 显然也解决了 v3.17 [COMMIT](https://git.kernel.org/pub/scm/linux/kernel/git/torvalds/linux.git/commit/?id=a43455a1d572daf7b730fe12eb747d1e17411365) 所引入的那个无法聚合的问题, 当时就是因为去掉了 numa_preferred_nid 的 capacity 的检查后, 造成 过载后线程永远不会迁移到它所使用内存的附近. 有了这种看起来很棒的机制, 那自然就对迁移负载 move_load 流量校验的规避方式进行了回退 [COMMIT](https://git.kernel.org/pub/scm/linux/kernel/git/torvalds/linux.git/commit/?id=e4991b240c622f0441c21f4869e13209abc08c5e). Jirka 在几个系统上运行了许多性能测试: 单实例 SpecJBB 2005 在 4 节点系统上的性能提高了 7-15%, 在每个 SOCKET 上拥有更多 CPU 的系统上有更高的增益. 多实例情况下, 性能也没有下降. @@ -3560,7 +3569,7 @@ v4.13 引入 NUMA WAKE AFFINE 的时候测试发现, CPU 的空闲造成了 NAS | 时间 | 作者 | 特性 | 描述 | 是否合入主线 | 链接 | |:----:|:----:|:---:|:---:|:----------:|:----:| -| 2025/05/28 | Jianyong Wu | [sched/fair: allow imbalance between LLCs under NUMA](https://lore.kernel.org/all/20250528070949.723754-1-wujianyong@hygon.cn) | 这个补丁旨在解决 NUMA 多 LLC 架构下的任务迁移震荡问题. 在具有多个 LLC 的 NUMA 节点上, 负载均衡器会破坏任务间的通信亲和性, 导致任务在 LLC 间反复迁移(ping-pong 现象), 显著影响性能.
该补丁通过允许 NUMA 节点内部 LLC 之间的适度负载不平衡, 优先维持任务通信亲和性. 实测结果显示, 在一个虚拟机环境中, 未打补丁时 200 秒内发生 3000 多次 LLC 迁移, 而应用补丁后迁移次数降至 10 次以内, 显著抑制了 LLC 震荡.
补丁修改了 `calculate_imbalance()` 负载失衡的计算逻辑, 判断当前调度域是否为NUMA 节点下的 LLC 层级, 并据此放宽负载不平衡阈值. 根据 LLC 的权重计算允许的不平衡任务数, 如果当前计算的不平衡数小于等于允许的不平衡数, 则将不平衡数设置为0, 表示不需要迁移任务. | v1 ☐☑✓ | [LORE](https://lore.kernel.org/all/20250528070949.723754-1-wujianyong@hygon.cn) | +| 2025/05/28 | Jianyong Wu | [sched/fair: allow imbalance between LLCs under NUMA](https://lore.kernel.org/all/20250528070949.723754-1-wujianyong@hygon.cn) | 这个补丁旨在解决 NUMA 多 LLC 架构下的任务迁移震荡问题. 在具有多个 LLC 的 NUMA 节点上, 负载均衡器会破坏任务间的通信亲和性, 导致任务在 LLC 间反复迁移(ping-pong 现象), 显著影响性能.
该补丁通过允许 NUMA 节点内部 LLC 之间的适度负载不平衡, 优先维持任务通信亲和性. 实测结果显示, 在一个虚拟机环境中, 未打补丁时 200 秒内发生 3000 多次 LLC 迁移, 而应用补丁后迁移次数降至 10 次以内, 显著抑制了 LLC 震荡.
补丁修改了 `calculate_imbalance()` 负载失衡的计算逻辑, 判断当前调度域是否为 NUMA 节点下的 LLC 层级, 并据此放宽负载不平衡阈值. 根据 LLC 的权重计算允许的不平衡任务数, 如果当前计算的不平衡数小于等于允许的不平衡数, 则将不平衡数设置为 0, 表示不需要迁移任务. | v1 ☐☑✓ | [LORE](https://lore.kernel.org/all/20250528070949.723754-1-wujianyong@hygon.cn) | @@ -3578,7 +3587,7 @@ v4.13 引入 NUMA WAKE AFFINE 的时候测试发现, CPU 的空闲造成了 NAS | 时间 | 作者 | 特性 | 描述 | 是否合入主线 | 链接 | |:----:|:----:|:---:|:---:|:----------:|:----:| -| 2023/02/08 | Bharata B Rao | [Memory access profiler(IBS) driven NUMA balancing](https://lore.kernel.org/all/20230208073533.715-1-bharata@amd.com) | 一些硬件平台可以提供有关内存访问的信息, 这些信息可用于在 NUMA 系统上进行最佳页面和任务放置. AMD 处理器有一个称为基于指令的采样 (IBS) 的硬件设施, 可用于收集与指令获取和执行活动相关的特定度量. 此工具可用于基于统计采样执行内存访问分析. 这组补丁实现了基于硬件获得的访问信息进行驱动 NUMA 平衡. 这样, 就不再需要周期性地扫描地址空间并引入 NUMA FAULT 来构建任务到页面的访问关联. 因此, 这里采用的方法是用硬件提供的访问信息替换地址空间扫描加提示错误. 从硬件获得的访问样本作为 NUMA FAULT 的等价信息被反馈到 NUMA BALANCING. NUMA BALANCING 逻辑的其余部分 (收集 / 聚合共享 / 私有 / 本地 / 远程故障并根据故障执行页面 / 任务迁移) 将保留, 但访问替换故障除外. [知乎-PMU 驱动的 NUMA Balancing](https://zhuanlan.zhihu.com/p/697689798). | v1 ☐☑✓ | [LORE v1,0/5](https://lore.kernel.org/all/20230208073533.715-1-bharata@amd.com) | +| 2023/02/08 | Bharata B Rao | [Memory access profiler(IBS) driven NUMA balancing](https://lore.kernel.org/all/20230208073533.715-1-bharata@amd.com) | 一些硬件平台可以提供有关内存访问的信息, 这些信息可用于在 NUMA 系统上进行最佳页面和任务放置. AMD 处理器有一个称为基于指令的采样 (IBS) 的硬件设施, 可用于收集与指令获取和执行活动相关的特定度量. 此工具可用于基于统计采样执行内存访问分析. 这组补丁实现了基于硬件获得的访问信息进行驱动 NUMA 平衡. 这样, 就不再需要周期性地扫描地址空间并引入 NUMA FAULT 来构建任务到页面的访问关联. 因此, 这里采用的方法是用硬件提供的访问信息替换地址空间扫描加提示错误. 从硬件获得的访问样本作为 NUMA FAULT 的等价信息被反馈到 NUMA BALANCING. NUMA BALANCING 逻辑的其余部分 (收集 / 聚合共享 / 私有 / 本地 / 远程故障并根据故障执行页面 / 任务迁移) 将保留, 但访问替换故障除外. [知乎 - PMU 驱动的 NUMA Balancing](https://zhuanlan.zhihu.com/p/697689798). | v1 ☐☑✓ | [LORE v1,0/5](https://lore.kernel.org/all/20230208073533.715-1-bharata@amd.com) | | 2024/06/05 | 左泽(Ze Zuo) | [Memory access profiler(SPE) driven NUMA balancing](https://mailweb.openeuler.org/hyperkitty/list/kernel@openeuler.org/message/PZI4KS7UGRNWTA27BZDOGMVXX26RDGCD) | 基于 ARM64 SPE 实现 PMU 辅助的 NUMA Balancing, 参见 [`openeuler/kernel/pulls/8642`](https://gitee.com/openeuler/kernel/pulls/8642) | v1 ☐☑✓ | [2024/06/03, LORE 00/10](https://mailweb.openeuler.org/hyperkitty/list/kernel@openeuler.org/thread/BEKEHPWCGSQS47RC76CZUESWWYWLDBHV)
*-*-*-*-*-*-*-*
[2024/06/03, LORE v3,00/10](https://mailweb.openeuler.org/hyperkitty/list/kernel@openeuler.org/thread/LEAQFPJHEPIGH6V4R5IJDP62DPG72RIX)
*-*-*-*-*-*-*-*
[2024/06/05, LORE v8,0/5](https://mailweb.openeuler.org/hyperkitty/list/kernel@openeuler.org/thread/BEKEHPWCGSQS47RC76CZUESWWYWLDBHV)
*-*-*-*-*-*-*-*
[2024/06/05, LORE v9,0/5](https://mailweb.openeuler.org/hyperkitty/list/kernel@openeuler.org/message/PZI4KS7UGRNWTA27BZDOGMVXX26RDGCD/) | @@ -4013,7 +4022,7 @@ Oracle 数据库具有类似的虚拟化功能, 称为 Oracle Multitenant, 其 | 时间 | 作者 | 特性 | 描述 | 是否合入主线 | 链接 | |:----:|:----:|:---:|:---:|:----------:|:----:| | 2019/06/26 | subhra mazumdar | [Scheduler Soft Affinity](https://lore.kernel.org/lkml/20190626224718.21973-1-subhra.mazumdar@oracle.com) | 为任务提供 "软亲和力" 的概念, 向调度程序指定在调度任务时首选一组 CPU, 但如果它们不全都繁忙, 则使用其他 CPU. | RFC ☐ | [LORE RFC,0/3](https://lore.kernel.org/lkml/20190626224718.21973-1-subhra.mazumdar@oracle.com) | -| 2025/05/02 | chris hyser | [sched/numa, mm/numa: Soft Affinity via numa_preferred_nid.](https://lore.kernel.org/all/20250502190059.4121320-1-chris.hyser@oracle.com) | 本补丁集合旨在实现一种称为 **Soft Affinity** 的机制, 通过用户空间接口(prctl)允许用户程序或管理员设置任务(进程/线程)的首选 NUMA 节点(numa_preferred_nid), 并利用当前的 **Auto NUMA Balancing(自动 NUMA 平衡)机制** 来倾向将任务调度到该节点、并优先在该节点分配内存. 该功能是对之前被拒绝的"Soft Affinity"提议的重新实现, 其核心思想是:
1. 允许用户设置一个"偏好"节点(numa_preferred_nid);
2. 不强行绑定任务到该节点(不破坏调度灵活性);
3. 利用已有 NUMA 平衡机制, 引导任务和其访问频繁的内存尽量处于同一 NUMA 节点, 以优化性能;
4. 特别适用于有 **RDMA 内存缓冲区** 或 **内存锁定(pinned)区域** 的高性能场景. | v2 ☐☑✓ | [2025/05/02, LORE v2, 0/2](https://lore.kernel.org/all/20250502190059.4121320-1-chris.hyser@oracle.com) | +| 2025/05/02 | chris hyser | [sched/numa, mm/numa: Soft Affinity via numa_preferred_nid.](https://lore.kernel.org/all/20250502190059.4121320-1-chris.hyser@oracle.com) | 本补丁集合旨在实现一种称为 **Soft Affinity** 的机制, 通过用户空间接口 (prctl) 允许用户程序或管理员设置任务 (进程 / 线程) 的首选 NUMA 节点 (numa_preferred_nid), 并利用当前的 **Auto NUMA Balancing(自动 NUMA 平衡) 机制 ** 来倾向将任务调度到该节点、并优先在该节点分配内存. 该功能是对之前被拒绝的 "Soft Affinity" 提议的重新实现, 其核心思想是:
1. 允许用户设置一个 "偏好" 节点 (numa_preferred_nid);
2. 不强行绑定任务到该节点(不破坏调度灵活性);
3. 利用已有 NUMA 平衡机制, 引导任务和其访问频繁的内存尽量处于同一 NUMA 节点, 以优化性能;
4. 特别适用于有 **RDMA 内存缓冲区 ** 或 ** 内存锁定(pinned) 区域 ** 的高性能场景. | v2 ☐☑✓ | [2025/05/02, LORE v2, 0/2](https://lore.kernel.org/all/20250502190059.4121320-1-chris.hyser@oracle.com)
*-*-*-*-*-*-*-*
[2025/06/22, LORE v3, 0/2](https://lore.kernel.org/all/20250622191622.3296825-1-chris.hyser@oracle.com) | @@ -4282,6 +4291,7 @@ y = (1 - \frac{pct^{2}}{10000^{2}} \times x^{2}) \times llc\_weight | 2023/04/10 | K Prateek Nayak | [arch/x86: Set L2 Cache ID on AMD processors](https://lore.kernel.org/all/20230410163527.1626-1-kprateek.nayak@amd.com) | 将 Cluster Scheduler 扩展到 AMD 处理器上. 将 "l2c_id" 与拓扑扩展 "TOPOEXT" 特性连接起来, 用于在 AMD 处理器上设置, 以便共享相同 L2 缓存的线程集可以正确地映射到相同的集群 ID. 参见 phoronix 报道 [Linux Cluster-Aware Scheduling Being Extended To AMD Processors](https://www.phoronix.com/news/AMD-Linux-L2-Cluster-Scheduler) | v1 ☐☑✓ | [LORE v1,0/2](https://lore.kernel.org/all/20230410163527.1626-1-kprateek.nayak@amd.com) | | 2023/05/04 | Tim Chen | [Enable Cluster Scheduling for x86 Hybrid CPUs]https://git.kernel.org/pub/scm/linux/kernel/git/torvalds/linux.git/log/?id=ed74cc4995d314ea6cbf406caf978c442f451fa5) | 当集群调度首次引入 x86 时, 人们注意到, 在混合 CPU 上进行集群调度时, 单线程任务通常会在 Atom 核 (或 E 核) 上完成, 而不是在空闲的 Big 核 (或 P 核) 上, 从而导致性能降低. 因此, x86 混合 CPU 上的集群调度被禁用. 参见: [Linux 5.16's New Cluster Scheduling Is Causing Regression, Further Hurting Alder Lake](https://www.phoronix.com/review/linux-516-regress) 和 [Intel Updates Cluster Scheduling Linux Patches For Hybrid CPUs](https://www.phoronix.com/news/Intel-Cluster-Sched-Hybrid-V2). Ricardo 最近推出了 [sched: Avoid unnecessary migrations within SMT domains](https://lore.kernel.org/lkml/20230406203148.19182-1-ricardo.neri-calderon@linux.intel.com) 系列, 极大地改进了 x86 混合 CPU 上 P 核和 E 核之间的负载平衡逻辑. 然而, 该补丁系列不足以允许在混合 x86 CPU 上启用集群调度. 此补丁系列提供了一些额外的修复程序, 用于在由 Big Core 的 SMT CPU 组成的集群调度组和由 Atom CPU 组成的群集调度组之间进行负载平衡. 在 Ricardo 的补丁系列之上继续 APPLY 当前补丁, 可以在 P 核和 E 核集群之间适当平衡负载. 空闲 CPU 按正确顺序使用: 1). 空闲 P 核上的 SMT CPU, 2). 空闲 E 核, 3). 未使用的 SMT CPU 和繁忙的同级.
在 x86 上, Cluster 中的 CPU 共享 L2. 现在, 在启用 Cluster Scheduling 的情况下, Cluster 之间的负载得到了平衡, 从而可能减少 L2 争用. 参见 [Intel Posts New Linux Patches For Cluster Scheduling With Hybrid CPUs](https://www.phoronix.com/news/Intel-Hybrid-CPU-Cluster-Sched) 和 [Intel Updates x86 Hybrid CPU Cluster Scheduling For The Linux Kernel](https://www.phoronix.com/news/Intel-Hybrid-Cluster-Sched-v3). | v1 ☐☑✓ 6.6-rc1 | [LORE v1,0/4](https://lore.kernel.org/lkml/20220825225529.26465-1-ricardo.neri-calderon@linux.intel.com)
*-*-*-*-*-*-*-*
[LORE v2,0/7](https://lore.kernel.org/lkml/20221122203532.15013-1-ricardo.neri-calderon@linux.intel.com)
*-*-*-*-*-*-*-*
[LORE v3,0/10](https://lore.kernel.org/lkml/20230207045838.11243-1-ricardo.neri-calderon@linux.intel.com)
*-*-*-*-*-*-*-*
[LORE v4,00/12](https://lore.kernel.org/lkml/20230406203148.19182-1-ricardo.neri-calderon@linux.intel.com)
*-*-*-*-*-*-*-*
[LORE v2,0/6](https://lore.kernel.org/all/cover.1683156492.git.tim.c.chen@linux.intel.com)
*-*-*-*-*-*-*-*
[LORE v3,0/6](https://lore.kernel.org/lkml/cover.1688770494.git.tim.c.chen@linux.intel.com) | | 2024/02/01 | alexs@kernel.org | [sched/fair: add SD_CLUSTER in comments](https://lore.kernel.org/all/20240201115447.522627-1-alexs@kernel.org) | TODO | v3 ☐☑✓ | [LORE v3,0/4](https://lore.kernel.org/all/20240201115447.522627-1-alexs@kernel.org) | +| 2025/06/27 | Ricardo Neri | [sched: Fix cluster scheduling in the presence of asymmetric capacity](https://lore.kernel.org/all/20250627-rneri-fix-cas-clusters-v1-0-121ffb50bbc7@linux.intel.com) | 修复在存在不对称 CPU 容量的情况下, 集群调度(cluster scheduling) 的负载均衡问题. 当前调度逻辑在 Intel 混合架构处理器上, 无法正确地在小核(small CPUs) 集群间均衡任务负载. 问题根源在于负载均衡器中的多个判断逻辑错误, 包括未正确判断容量、拒绝在相同容量 CPU 间迁移任务、错误地移除 SD_PREFER_SIBLING 标志等. 补丁逐一修复这些问题, 确保在启用 CONFIG_SCHED_CLUSTER 时任务能在小核集群间合理分布. 作者已在禁用超线程的 Alder Lake 系统上验证补丁, 并确认关闭集群调度时的兼容性. | v1 ☐☑✓ | [2025/06/27, LORE v1, 0/4](https://lore.kernel.org/all/20250627-rneri-fix-cas-clusters-v1-0-121ffb50bbc7@linux.intel.com) | ### 5.5.2 Multiple LLCs @@ -4433,7 +4443,7 @@ y = (1 - \frac{pct^{2}}{10000^{2}} \times x^{2}) \times llc\_weight 2009 年 来自 IBM 的 Gautham R Shenoy 提出了 [sched: Nominate a power-efficient ILB.](https://lwn.net/Articles/326909) -在 Linaro 开发小任务封包的同时, 2012 年 Intel 的 Alex Shi 发起的讨论中, 提出了更高大上的概念 [**能耗感知的调度器**](https://lkml.org/lkml/2012/8/13/139), 功耗和性能本身就是一个矛盾的统一体, 因此由于此特性节省的功耗和降低的性能不成正比, 因此在发到 v7 [PatchWork](https://lore.kernel.org/patchwork/cover/370834) 之后也寿终正寝. +在 Linaro 开发小任务封包的同时, 2012 年 Intel 的 Alex Shi 发起的讨论中, 提出了更高大上的概念 [** 能耗感知的调度器 **](https://lkml.org/lkml/2012/8/13/139), 功耗和性能本身就是一个矛盾的统一体, 因此由于此特性节省的功耗和降低的性能不成正比, 因此在发到 v7 [PatchWork](https://lore.kernel.org/patchwork/cover/370834) 之后也寿终正寝. 功耗感知的调度器是如此的新颖, 以至于 2013 年 10 月, 致力于 ANDROID 调度器优化的 Morten Rasmussen [sched: Power scheduler design proposal](https://lore.kernel.org/patchwork/cover/391530) 也提出了自己的想法, 在发到了 [v2 PatchWork](https://lore.kernel.org/patchwork/cover/412619), 在这之前他刚发出了他 HMP 的补丁. @@ -4444,7 +4454,7 @@ $$ a = \sum_{1}^{n} \frac{concurrency \times time}{period} $$ 如果 concurrency 一直是 1, 那么这个负载 a 就等价于 CPU 利用率 (utilization). -这组补丁最终没有合入主线, 但是用 runnable 数量来 RQ 的 PELT 负载, 的确能很好地反应 CFS_RQ 上的可运行压力, 因此主线在 [Reconcile NUMA balancing decisions with the load balancer v6](https://git.kernel.org/pub/scm/linux/kernel/git/torvalds/linux.git/log/?id=a0f03b617c3b2644d3d47bf7d9e60aed01bd5b10) 补丁集中, 通过 [commit 9f68395333ad ("sched/pelt: Add a new runnable average signal")](https://git.kernel.org/pub/scm/linux/kernel/git/torvalds/linux.git/commit/?id=9f68395333ad7f5bfe2f83473fed363d4229f11c) 实现了直接用 RQ 上 runnable 的数量来计算的 runnable_{sum|avg} 负载信息. 这个 runnable 负载计算方式只在意有多少进程在等待, 而不关心他们的 load_weight, 因此可以跟踪 RQ 上任务的等待压力, 有助于更好地定义 RQ 的状态. 这种计算方式与 load_{sum|avg} 的计算方式是类似的, 这样的好处是, 我们 **可以直接将 runnable 的负载和 running 的负载进行比较**. 当任务竞争同一个 RQ 时, 它们的可运行平均负载将高于 util_avg, 因为它将包含等待时间 (不再包含之前的 load_weight 信息), 我们可以使用这个负载信息更好地对 CFS_RQ 进行分类. +这组补丁最终没有合入主线, 但是用 runnable 数量来 RQ 的 PELT 负载, 的确能很好地反应 CFS_RQ 上的可运行压力, 因此主线在 [Reconcile NUMA balancing decisions with the load balancer v6](https://git.kernel.org/pub/scm/linux/kernel/git/torvalds/linux.git/log/?id=a0f03b617c3b2644d3d47bf7d9e60aed01bd5b10) 补丁集中, 通过 [commit 9f68395333ad ("sched/pelt: Add a new runnable average signal")](https://git.kernel.org/pub/scm/linux/kernel/git/torvalds/linux.git/commit/?id=9f68395333ad7f5bfe2f83473fed363d4229f11c) 实现了直接用 RQ 上 runnable 的数量来计算的 runnable_{sum|avg} 负载信息. 这个 runnable 负载计算方式只在意有多少进程在等待, 而不关心他们的 load_weight, 因此可以跟踪 RQ 上任务的等待压力, 有助于更好地定义 RQ 的状态. 这种计算方式与 load_{sum|avg} 的计算方式是类似的, 这样的好处是, 我们 ** 可以直接将 runnable 的负载和 running 的负载进行比较 **. 当任务竞争同一个 RQ 时, 它们的可运行平均负载将高于 util_avg, 因为它将包含等待时间 (不再包含之前的 load_weight 信息), 我们可以使用这个负载信息更好地对 CFS_RQ 进行分类. 接着 2014 年, Preeti U Murthy 在总结了 Alex Shi 的经验之后, 接着完善了能耗感知调度器的设计, 但是由于缺少热度, 这个特性最终止步 v2 [Power Scheduler Design](https://lore.kernel.org/lkml/20140811113000.31956.52857.stgit@preeti.in.ibm.com) 版本. @@ -4484,7 +4494,7 @@ ARM 的 Morten Rasmussen 一直致力于 ANDROID 调度器优化的: 4. 在 [Power-aware scheduling v2](https://lore.kernel.org/patchwork/cover/412619) 发布之后 版本之后. Morten 有了更多的奇思妙想, 提出了能耗模型 (energy cost model) 的雏形, 以及 energy diff 的思想, 从此一发不可收拾. 可以认为这个就是 EAS 最早的雏形, 并最终发到了 2015/07/07 v5 版本 [sched: Energy cost model for energy-aware scheduling](https://lore.kernel.org/patchwork/cover/576661). -5. EAS 带来了划时代的想法, [EAS调度器缘起](https://zhuanlan.zhihu.com/p/60030839), 最终 [Quentin Perret](http://www.linux-arm.org/git?p=linux-qp.git;a=summary) 接手了 Morten Rasmussen 的工作, 最终在 2018/10/03 v10 版本将 EAS 合入主线 [https://lore.kernel.org/patchwork/cover/1020432/](https://lore.kernel.org/patchwork/cover/1020432) +5. EAS 带来了划时代的想法, [EAS 调度器缘起](https://zhuanlan.zhihu.com/p/60030839), 最终 [Quentin Perret](http://www.linux-arm.org/git?p=linux-qp.git;a=summary) 接手了 Morten Rasmussen 的工作, 最终在 2018/10/03 v10 版本将 EAS 合入主线 [https://lore.kernel.org/patchwork/cover/1020432/](https://lore.kernel.org/patchwork/cover/1020432) 6. EAS 并不适用于所有场景, @@ -4616,7 +4626,7 @@ Donnefort 称: 边距删除使内核能够充分利用能量模型, 任务更有 | 2023/12/08 | Qais Yousef | [sched: cpufreq: Remove magic hardcoded numbers from margins](https://lore.kernel.org/all/20231208002342.367117-1-qyousef@layalina.io) | TODO | v2 ☐☑✓ | [LORE v1,0/7](https://lore.kernel.org/all/20230827233203.1315953-1-qyousef@layalina.io)
*-*-*-*-*-*-*-*
[LORE v2,0/8](https://lore.kernel.org/all/20231208002342.367117-1-qyousef@layalina.io) | | 2024/02/05 | Qais Yousef | [sched/fair: Remove hardcoded fits_capacity() margin](https://lore.kernel.org/all/20240205223344.2280519-1-qyousef@layalina.io) | 从 [LORE v2,0/8](https://lore.kernel.org/all/20231208002342.367117-1-qyousef@layalina.io) 中分离出来的一部分. 本系列仅关注 migration margin 和 fits_capacity(). 之前没有考虑不变性, 现在解决了这个问题. 补丁 1 和 2 添加了助手函数 approximate_util_avg() 和 approximate_runtime(), 用于在 time 和 util 之间进行转换. 补丁 3 的 COMMIT 详细介绍了补丁的思路. | v1 ☐☑✓ | [LORE v1,0/3](https://lore.kernel.org/all/20240205223344.2280519-1-qyousef@layalina.io) | | 2024/07/28 | Qais Yousef | [cpufreq: sched/schedutil: Remove LATENCY_MULTIPLIER](https://lore.kernel.org/all/20240728192659.58115-1-qyousef@layalina.io) | 这个补丁的主要目的是移除 LATENCY_MULTIPLIER. 这是一个已经存在近 20 年的常量, 用于计算 rate_limit_us. 移除这个常量是为了更好地适应现代硬件和工作负载的需求, 提高系统的响应速度. LATENCY_MULTIPLIER 会导致 rate_limit_us 始终处于毫秒范围, 这在现代硬件上显得过于保守. 例如, 在 M1 Mac mini 上, 转换延迟为 50 和 56 微秒, 但由于 1000 的乘数, 最终设置的 rate_limit_us 为 50 和 56 毫秒, 这会被限制在 2 毫秒(之前是 10 毫秒). 在 Intel i5 系统上, 转换延迟为 20 微秒, 但由于乘数, 最终设置的 rate_limit_us 为 20 毫秒, 同样会被限制在 2 毫秒. | v1 ☐☑✓ | [LORE](https://lore.kernel.org/all/20240728192659.58115-1-qyousef@layalina.io) | -| 2024/08/20 | Qais Yousef | [sched/fair/schedutil: Better manage system response time](https://lore.kernel.org/all/20240820163512.1096301-1-qyousef@layalina.io) | 这组补丁集是不久前发布的 [Remove Hardcoded Margings](https://lore.kernel.org/lkml/20231208002342.367117-1-qyousef@layalina.io) 的翻版. 主要目标是解决硬编码的 fits_capacity() 迁移阈值(migration margin) 和 DVFS headroom(参见 apply_dvfs_headroom()) 而导致的响应时间相关问题. 具体来说, 硬编码的迁移边距和固定的 25% DVFS headroom 在高性能系统上对功耗和热管理不利. 这组补丁通过自动调整这些值到最小可能值, 基于预期的最坏情况场景, 来优化功耗和响应时间. 具体改动
1. 移除硬编码的迁移边距: 修改 fits_capacity() 函数中的硬编码迁移边距, 使其能够根据实际情况动态调整.
2. 移除固定的 DVFS headroom: 移除 sugov_apply_dvfs_headroom() 函数中的固定 1.25 倍的 headroom,改为动态计算.
3. 引入新的响应时间管理机制: 添加新的可调参数来控制响应时间, 使系统可以根据实际需求动态调整.
4. 改进 PELT(Per Entity Load Tracking) 机制: 引入新的 PELT 乘数启动参数, 以改进任务的负载预测和响应时间.
5. 扩展 util_est 机制, 以更好地处理任务的启动时间和周期性任务.
6. 引入新的 QoS 接口: 添加新的 sched-qos 接口, 以支持更细粒度的调度质量控制.
7. 引入 rampup_multiplier QoS 参数, 以控制任务的启动速度.
8. 改进 waiting_avg 记录: 添加新的 waiting_avg 记录, 以记录任务在可运行但未运行时的状态.
9. 优化 apply_dvfs_headroom 函数: 在 apply_dvfs_headroom 函数中考虑 waiting_avg, 以更准确地调整 DVFS headroom.
10. 忽略衰减的利用率: 当利用率正在衰减时, 忽略 DVFS headroom, 以避免不必要的频率调整.
11. 禁用 util_est: 通过 rampup_multiplier 参数控制是否禁用 util_est, 以适应不同的应用场景. 参见 [phoronix, 2024/08/21, Experimental Schedutil Patches Yield 30% Boost To Web Browser Benchmark On Linux](https://www.phoronix.com/news/Schedutil-30p-Speedometer-Boost). | v1 ☐☑✓ | [LORE v1,0/16](https://lore.kernel.org/all/20240820163512.1096301-1-qyousef@layalina.io) | +| 2024/08/20 | Qais Yousef | [sched/fair/schedutil: Better manage system response time](https://lore.kernel.org/all/20240820163512.1096301-1-qyousef@layalina.io) | 这组补丁集是不久前发布的 [Remove Hardcoded Margings](https://lore.kernel.org/lkml/20231208002342.367117-1-qyousef@layalina.io) 的翻版. 主要目标是解决硬编码的 fits_capacity() 迁移阈值(migration margin) 和 DVFS headroom(参见 apply_dvfs_headroom()) 而导致的响应时间相关问题. 具体来说, 硬编码的迁移边距和固定的 25% DVFS headroom 在高性能系统上对功耗和热管理不利. 这组补丁通过自动调整这些值到最小可能值, 基于预期的最坏情况场景, 来优化功耗和响应时间. 具体改动
1. 移除硬编码的迁移边距: 修改 fits_capacity() 函数中的硬编码迁移边距, 使其能够根据实际情况动态调整.
2. 移除固定的 DVFS headroom: 移除 sugov_apply_dvfs_headroom() 函数中的固定 1.25 倍的 headroom, 改为动态计算.
3. 引入新的响应时间管理机制: 添加新的可调参数来控制响应时间, 使系统可以根据实际需求动态调整.
4. 改进 PELT(Per Entity Load Tracking) 机制: 引入新的 PELT 乘数启动参数, 以改进任务的负载预测和响应时间.
5. 扩展 util_est 机制, 以更好地处理任务的启动时间和周期性任务.
6. 引入新的 QoS 接口: 添加新的 sched-qos 接口, 以支持更细粒度的调度质量控制.
7. 引入 rampup_multiplier QoS 参数, 以控制任务的启动速度.
8. 改进 waiting_avg 记录: 添加新的 waiting_avg 记录, 以记录任务在可运行但未运行时的状态.
9. 优化 apply_dvfs_headroom 函数: 在 apply_dvfs_headroom 函数中考虑 waiting_avg, 以更准确地调整 DVFS headroom.
10. 忽略衰减的利用率: 当利用率正在衰减时, 忽略 DVFS headroom, 以避免不必要的频率调整.
11. 禁用 util_est: 通过 rampup_multiplier 参数控制是否禁用 util_est, 以适应不同的应用场景. 参见 [phoronix, 2024/08/21, Experimental Schedutil Patches Yield 30% Boost To Web Browser Benchmark On Linux](https://www.phoronix.com/news/Schedutil-30p-Speedometer-Boost). | v1 ☐☑✓ | [LORE v1,0/16](https://lore.kernel.org/all/20240820163512.1096301-1-qyousef@layalina.io) | #### 7.2.3.4 feec improvement @@ -4627,7 +4637,7 @@ Donnefort 称: 边距删除使内核能够充分利用能量模型, 任务更有 | 2021/05/04 | Pierre Gondois | [sched/fair: find_energy_efficient_cpu() enhancements](https://git.kernel.org/pub/scm/linux/kernel/git/torvalds/linux.git/log/?id=619e090c8e409e09bd3e8edcd5a73d83f689890c) | 防止 find_energy_efficient_cpu() 出现下溢. | v3 ☑✓ 5.14-rc1 | [LORE v3,0/2](https://lore.kernel.org/all/20210504090743.9688-1-Pierre.Gondois@arm.com) | | 2021/12/20 | Vincent Donnefort | [Fix stuck overutilized](https://lkml.kernel.org/lkml/20211220114323.22811-1-vincent.donnefort@arm.com) | NA | v1 ☐ | [LORE 0/3](https://lkml.kernel.org/lkml/20211220114323.22811-1-vincent.donnefort@arm.com) | | 2022/10/06 | Pierre Gondois | [sched/fair: feec() improvement](https://lore.kernel.org/all/20221006081052.3862167-1-pierre.gondois@arm.com) | TODO | v2 ☐☑✓ | [LORE v2,0/1](https://lore.kernel.org/all/20221006081052.3862167-1-pierre.gondois@arm.com) | -| 2024/08/30 | Vincent Guittot | [sched/fair: Rework EAS to handle more cases](https://lore.kernel.org/all/20240830130309.2141697-1-vincent.guittot@linaro.org) | 该补丁集的主要目的是改进 Energy Aware Scheduler (EAS) 的实现, 以更好地处理某些特定情况, 并修复已知的一些局限性, 特别是与 uclamp(利用率钳位)特性相关的场景.
现有问题: 当前的 EAS 实现存在一些局限性, 在引入 uclamp 等新特性后变得更加明显. 例如, 任务可能会堆积在同一个 CPU 上, 或者被卡在错误的 CPU 上无法迁移, 导致调度效率下降.
目标: 通过一系列改动, 确保 EAS 能够更灵活地应对不同类型的负载和调度需求, 特别是在异构多核处理器(如大小核架构)上优化性能和功耗.
具体改动:
1. 修正 CPU 过载分类问题: [Patch 1](https://lore.kernel.org/all/20240830130309.2141697-2-vincent.guittot@linaro.org) 修复了当 CPU 被限制到较低的计算容量时, 可能被错误地分类为过载的问题. 由于 group_overloaded 的优先级高于 group_misfit, 这种错误分类可能导致周期性负载均衡器无法正确选择合适的 CPU 来放置任务. 通过修正这一问题, 可以将该组选为最繁忙的组, 而不是具有不匹配任务的组, 从而防止负载均衡选择将 MISFIT 的任务拉到错误的 CPU 上, 从而可以避免不必要的负载均衡操作, 提高调度精度.
2. 创建新的 EM 接口; Patch 2 引入了一个新的能量模型(EM, Energy Model)接口, 该接口将在后续补丁中用于改进任务放置逻辑.
优化任务放置策略: [Patch 3](https://lore.kernel.org/all/20240830130309.2141697-4-vincent.guittot@linaro.org) 改进了 feec() 任务放置策略, 首先在 PD 中寻找成本最低的 CPU, 然后在这些 CPU 之间寻找性能最高的 CPU. feec() 当前策略总是在 PD 中寻找具有最高备用容量的 CPU, 并假设它将是能效 PoV 中最好的 CPU, 因为它需要最小的 OPP 增加. 虽然一般来说这是正确的, 但此策略也会过滤其他一些 CPU, 这些 CPU 由于使用相同的 OPP, 效率更高. 事实上, 我们真正关心的是选择新的 OPP 来处理唤醒任务的成本. 在许多情况下, 多个 CPU 将终止向上选择相同的 OPP, 从而使用相同的能源成本. 在这些情况下, 我们可以使用其他指标来选择相同能源成本的最佳 CPU. 这个补丁就重写 feec(), 在选择目标 CPU 时不仅考虑空闲容量最高的 CPU, 还会评估其他因素, 如运行的任务数量等. 这有助于找到真正最优的放置位置, 而不仅仅是基于单一标准.
Patch 4 即使系统 overutilized, 也要继续通过 feec() 寻找能效最优的 CPU. 否则, 回退到调度器的默认性能和传播模式(performance and spread mode). 在测试中发现当工作队列的任务醒来进行短暂的后台工作(如vmstat更新)时, 系统可能会在短时间内过度使用, overutilized 时继续使用 feec() 寻找节能的 CPU 从而防止破坏任务的 power packing.
Patch 5: 继续对 EAS 进行优化, 解决更多特定场景下的问题, 确保调度器能够在各种情况下都表现出色. | v1 ☐☑✓ | [LORE v1,0/5](https://lore.kernel.org/all/20240830130309.2141697-1-vincent.guittot@linaro.org)
*-*-*-*-*-*-*-*
[2024/12/17, LORE v2,0/7](https://lore.kernel.org/all/20241217160720.2397239-1-vincent.guittot@linaro.org)
*-*-*-*-*-*-*-*
[2025/03/02, LORE v4,0/7](https://lore.kernel.org/all/20250302161321.1476139-1-vincent.guittot@linaro.org)
*-*-*-*-*-*-*-*
[2025/03/02, LORE v5,0/7](https://lore.kernel.org/all/20250302210539.1563190-1-vincent.guittot@linaro.org)
*-*-*-*-*-*-*-*
[2025/03/14, LORE v6,0/7](https://lore.kernel.org/all/20250314163614.1356125-1-vincent.guittot@linaro.org) | +| 2024/08/30 | Vincent Guittot | [sched/fair: Rework EAS to handle more cases](https://lore.kernel.org/all/20240830130309.2141697-1-vincent.guittot@linaro.org) | 该补丁集的主要目的是改进 Energy Aware Scheduler (EAS) 的实现, 以更好地处理某些特定情况, 并修复已知的一些局限性, 特别是与 uclamp(利用率钳位)特性相关的场景.
现有问题: 当前的 EAS 实现存在一些局限性, 在引入 uclamp 等新特性后变得更加明显. 例如, 任务可能会堆积在同一个 CPU 上, 或者被卡在错误的 CPU 上无法迁移, 导致调度效率下降.
目标: 通过一系列改动, 确保 EAS 能够更灵活地应对不同类型的负载和调度需求, 特别是在异构多核处理器 (如大小核架构) 上优化性能和功耗.
具体改动:
1. 修正 CPU 过载分类问题: [Patch 1](https://lore.kernel.org/all/20240830130309.2141697-2-vincent.guittot@linaro.org) 修复了当 CPU 被限制到较低的计算容量时, 可能被错误地分类为过载的问题. 由于 group_overloaded 的优先级高于 group_misfit, 这种错误分类可能导致周期性负载均衡器无法正确选择合适的 CPU 来放置任务. 通过修正这一问题, 可以将该组选为最繁忙的组, 而不是具有不匹配任务的组, 从而防止负载均衡选择将 MISFIT 的任务拉到错误的 CPU 上, 从而可以避免不必要的负载均衡操作, 提高调度精度.
2. 创建新的 EM 接口; Patch 2 引入了一个新的能量模型 (EM, Energy Model) 接口, 该接口将在后续补丁中用于改进任务放置逻辑.
优化任务放置策略: [Patch 3](https://lore.kernel.org/all/20240830130309.2141697-4-vincent.guittot@linaro.org) 改进了 feec() 任务放置策略, 首先在 PD 中寻找成本最低的 CPU, 然后在这些 CPU 之间寻找性能最高的 CPU. feec() 当前策略总是在 PD 中寻找具有最高备用容量的 CPU, 并假设它将是能效 PoV 中最好的 CPU, 因为它需要最小的 OPP 增加. 虽然一般来说这是正确的, 但此策略也会过滤其他一些 CPU, 这些 CPU 由于使用相同的 OPP, 效率更高. 事实上, 我们真正关心的是选择新的 OPP 来处理唤醒任务的成本. 在许多情况下, 多个 CPU 将终止向上选择相同的 OPP, 从而使用相同的能源成本. 在这些情况下, 我们可以使用其他指标来选择相同能源成本的最佳 CPU. 这个补丁就重写 feec(), 在选择目标 CPU 时不仅考虑空闲容量最高的 CPU, 还会评估其他因素, 如运行的任务数量等. 这有助于找到真正最优的放置位置, 而不仅仅是基于单一标准.
Patch 4 即使系统 overutilized, 也要继续通过 feec() 寻找能效最优的 CPU. 否则, 回退到调度器的默认性能和传播模式 (performance and spread mode). 在测试中发现当工作队列的任务醒来进行短暂的后台工作(如 vmstat 更新) 时, 系统可能会在短时间内过度使用, overutilized 时继续使用 feec() 寻找节能的 CPU 从而防止破坏任务的 power packing.
Patch 5: 继续对 EAS 进行优化, 解决更多特定场景下的问题, 确保调度器能够在各种情况下都表现出色. | v1 ☐☑✓ | [LORE v1,0/5](https://lore.kernel.org/all/20240830130309.2141697-1-vincent.guittot@linaro.org)
*-*-*-*-*-*-*-*
[2024/12/17, LORE v2,0/7](https://lore.kernel.org/all/20241217160720.2397239-1-vincent.guittot@linaro.org)
*-*-*-*-*-*-*-*
[2025/03/02, LORE v4,0/7](https://lore.kernel.org/all/20250302161321.1476139-1-vincent.guittot@linaro.org)
*-*-*-*-*-*-*-*
[2025/03/02, LORE v5,0/7](https://lore.kernel.org/all/20250302210539.1563190-1-vincent.guittot@linaro.org)
*-*-*-*-*-*-*-*
[2025/03/14, LORE v6,0/7](https://lore.kernel.org/all/20250314163614.1356125-1-vincent.guittot@linaro.org) | | @@ -4696,8 +4706,8 @@ EAS 原生的 overutilized 机制非常保守, 一旦发现某个 CPU 出现了 |:---:|:----:|:---:|:----:|:---------:|:----:| | 2021/05/04 | Thara Gopinath | [ANDROID: sched: Per-Sched-domain over utilization](https://github.com/aosp-mirror/kernel_common/commit/addef37808728c719d8c095a75bcf81befdacdaf) | per sched-domain 级别的 utilization. | v3 ☐☑✓ | [LORE](https://github.com/aosp-mirror/kernel_common/commit/addef37808728c719d8c095a75bcf81befdacdaf) | | 2024/03/07 | Shrikanth Hegde | [sched/fair: Limit access to overutilized](https://git.kernel.org/pub/scm/linux/kernel/git/torvalds/linux.git/log?id=4d0a63e5b841c759c9a306aff158420421ef016f) | 当在大型系统 (240 核心, SMT8) 上运行 ISV 工作负载时, 从性能配置文件中可以观察到, newidle_balance 和 enque_task_fair 正在消耗更多的周期. 通过 perf 热点分析, 大部分时间都花在了访问 root domain 的 rd->overutilized 字段上. 通过对 `stress-ng --wait` 进行一些更改, 模拟了类似的 perf 配置文件. newidle_balance 和 enqueue_task_fair 的消耗都接近 5-7%. EAS(能量感知调度器)引入 overutilized 机制是为了决策是否进行负载平衡. rd->overutilized 同时被多个 CPU 访问会导致缓存失效. 非 EAS 平台不需要更新 rd->overutilized. 另外由于 rd->overutilized 和 rd->overload 在同一 Cache Line, 因此也存在伪共享的可能. 补丁 1 [sched/fair: Add EAS checks before updating overutilized](https://lore.kernel.org/all/20240307085725.444486-2-sshegde@linux.ibm.com) 这有助于减少上述问题. 带上这个补丁后, ISV 工作负载中的问题也得到了解决, 吞吐量也得到了提高. 补丁 2 和 3 代码重构, 使用 helper 函数 is_rd_overutilized() , 而不再直接访问 rd->overutilized 字段. 因为观察到的大多数模式都是 eas && !overutilzed. | v6 ☐☑✓ v6.10-rc1 | [LORE](https://lore.kernel.org/all/20240326152616.380999-1-sshegde@linux.ibm.com)
*-*-*-*-*-*-*-*
[LORE v6,0/3](https://lore.kernel.org/all/20240307085725.444486-1-sshegde@linux.ibm.com) | -| 2024/03/25 | Shrikanth Hegde | [sched: Minor changes for rd->overload access](https://git.kernel.org/pub/scm/linux/kernel/git/torvalds/linux.git/log?id=4d0a63e5b841c759c9a306aff158420421ef016f) | 当在大型系统中运行工作负载时, 可以观察到对 rd->overload 的访问需要时间.
1. 补丁 1, 更新之前最好检查一下值, 因为值更改的频率较低.
补丁 2, 只有在必要时才会进行修补程序更新. CPU 总线流量有所减少. 工作负载性能没有显著提高. Qais 建议最好使用 helper 函数来访问 rd->overload. | v3 ☐☑✓ v6.10-rc1 | [LORE v3,0/2](https://lore.kernel.org/all/20240325054505.201995-1-sshegde@linux.ibm.com) | -| 2024/08/30 | Vincent Guittot | [4/5, sched/fair: Use EAS also when overutilized](https://lore.kernel.org/all/20240830130309.2141697-5-vincent.guittot@linaro.org/) | overutilized 时继续使用 feec() 寻找节能的 CPU 从而防止破坏任务的 power packing. 在测试中发现当工作队列的任务醒来进行短暂的后台工作(如vmstat更新)时, 系统可能会在短时间内过度使用, 因此 [sched/fair: Rework EAS to handle more cases](https://lore.kernel.org/all/20240830130309.2141697-1-vincent.guittot@linaro.org) 中 Patch 4, 尝试修改系统 overutilized, 也要继续通过 feec() 寻找能效最优的 CPU. 当 feec() 实在找不到合适的 CPU 时, 才回退到调度器的默认性能和传播模式(performance and spread mode). | v1 ☐☑✓ | [LORE v1,0/5](https://lore.kernel.org/all/20240830130309.2141697-1-vincent.guittot@linaro.org) | +| 2024/03/25 | Shrikanth Hegde | [sched: Minor changes for rd->overload access](https://git.kernel.org/pub/scm/linux/kernel/git/torvalds/linux.git/log?id=4d0a63e5b841c759c9a306aff158420421ef016f) | 当在大型系统中运行工作负载时, 可以观察到对 rd->overload 的访问需要时间.
1. 补丁 1, 更新之前最好检查一下值, 因为值更改的频率较低.
补丁 2, 只有在必要时才会进行修补程序更新. CPU 总线流量有所减少. 工作负载性能没有显著提高. Qais 建议最好使用 helper 函数来访问 rd->overload. | v3 ☐☑✓ v6.10-rc1 | [LORE v3,0/2](https://lore.kernel.org/all/20240325054505.201995-1-sshegde@linux.ibm.com) | +| 2024/08/30 | Vincent Guittot | [4/5, sched/fair: Use EAS also when overutilized](https://lore.kernel.org/all/20240830130309.2141697-5-vincent.guittot@linaro.org/) | overutilized 时继续使用 feec() 寻找节能的 CPU 从而防止破坏任务的 power packing. 在测试中发现当工作队列的任务醒来进行短暂的后台工作 (如 vmstat 更新) 时, 系统可能会在短时间内过度使用, 因此 [sched/fair: Rework EAS to handle more cases](https://lore.kernel.org/all/20240830130309.2141697-1-vincent.guittot@linaro.org) 中 Patch 4, 尝试修改系统 overutilized, 也要继续通过 feec() 寻找能效最优的 CPU. 当 feec() 实在找不到合适的 CPU 时, 才回退到调度器的默认性能和传播模式(performance and spread mode). | v1 ☐☑✓ | [LORE v1,0/5](https://lore.kernel.org/all/20240830130309.2141697-1-vincent.guittot@linaro.org) | @@ -4793,7 +4803,7 @@ load_balance() | 时间 | 作者 | 特性 | 描述 | 是否合入主线 | 链接 | |:---:|:----:|:---:|:----:|:---------:|:----:| -| 2023/12/06 | Pierre Gondois | [sched/fair: Use all little CPUs for CPU-bound workload](https://git.kernel.org/pub/scm/linux/kernel/git/torvalds/linux.git/commit/?id=3af7524b14198f5159a86692d57a9f28ec9375ce) | 旨在改进 Linux 内核调度器的行为, 确保在处理 CPU 密集型工作负载时能更有效地利用所有小核心 (little CPUs).
背景: 在具有非对称 CPU 容量的 n CPU 平台上运行 n 个 CPU 密集型任务时, 如果系统不是 DynamIQ 系统(即, 调度域在 PKG 级别上没有设置 SD_SHARE_PKG_RESOURCES 标志), 可能会导致任务分配不是最优的, 如两个任务运行在一个大核心上, 而一个小核心则完全空闲.
使用的测试平台是 Juno-r2, 具有 2 个大核心(CPU 1-2) 和 4 个小核心 (CPU 0,3-5), 它们的最大容量分别是 1024 和 383. 运行 6 个 CPU 密集型任务. 在最初的 100 毫秒内, 除了一个保持空闲的小核心和一个承载两个任务的大核心外, 每个任务都绑定到一个 CPU 上. 100 毫秒后, 移除 CPU 亲和性限制.
补丁前的行为: 在测试的第二步, 调度器从空闲的小核心运行时, 会将调度域标记为 "有备用容量" 或 "过载", 导致最繁忙的运行队列(runqueue) 是承载两个任务的大核心的运行队列, 而空闲的小核心由于容量太小而无法吸引这些任务.
补丁后的行为: 随着调度失败尝试次数的增加(nr_balance_failed), 补丁使得将大任务迁移到空闲的小核心变得更加容易. 这种机制也适用于 "migrate_load" 迁移类型.
在测试工作负载中, 补丁能够将大核心在第二步的负载时间从大约 19.3 秒减少到 18 秒, 性能提升了 6.7%.
在 detach_tasks 函数中, 将判断迁移任务的条件从简单的 `util > env->imbalance` 改为 `shr_bound(util, env->sd->nr_balance_failed) > env->imbalance`, 这允许在多次平衡尝试失败后, 更容易地迁移任务. | v3 ☐☑✓ v6.8-rc1 | [LORE](https://lore.kernel.org/all/20231206090043.634697-1-pierre.gondois@arm.com) | +| 2023/12/06 | Pierre Gondois | [sched/fair: Use all little CPUs for CPU-bound workload](https://git.kernel.org/pub/scm/linux/kernel/git/torvalds/linux.git/commit/?id=3af7524b14198f5159a86692d57a9f28ec9375ce) | 旨在改进 Linux 内核调度器的行为, 确保在处理 CPU 密集型工作负载时能更有效地利用所有小核心 (little CPUs).
背景: 在具有非对称 CPU 容量的 n CPU 平台上运行 n 个 CPU 密集型任务时, 如果系统不是 DynamIQ 系统(即, 调度域在 PKG 级别上没有设置 SD_SHARE_PKG_RESOURCES 标志), 可能会导致任务分配不是最优的, 如两个任务运行在一个大核心上, 而一个小核心则完全空闲.
使用的测试平台是 Juno-r2, 具有 2 个大核心(CPU 1-2) 和 4 个小核心 (CPU 0,3-5), 它们的最大容量分别是 1024 和 383. 运行 6 个 CPU 密集型任务. 在最初的 100 毫秒内, 除了一个保持空闲的小核心和一个承载两个任务的大核心外, 每个任务都绑定到一个 CPU 上. 100 毫秒后, 移除 CPU 亲和性限制.
补丁前的行为: 在测试的第二步, 调度器从空闲的小核心运行时, 会将调度域标记为 "有备用容量" 或 "过载", 导致最繁忙的运行队列(runqueue) 是承载两个任务的大核心的运行队列, 而空闲的小核心由于容量太小而无法吸引这些任务.
补丁后的行为: 随着调度失败尝试次数的增加(nr_balance_failed), 补丁使得将大任务迁移到空闲的小核心变得更加容易. 这种机制也适用于 "migrate_load" 迁移类型.
在测试工作负载中, 补丁能够将大核心在第二步的负载时间从大约 19.3 秒减少到 18 秒, 性能提升了 6.7%.
在 detach_tasks 函数中, 将判断迁移任务的条件从简单的 `util > env->imbalance` 改为 `shr_bound(util, env->sd->nr_balance_failed) > env->imbalance`, 这允许在多次平衡尝试失败后, 更容易地迁移任务. | v3 ☐☑✓ v6.8-rc1 | [LORE](https://lore.kernel.org/all/20231206090043.634697-1-pierre.gondois@arm.com) | #### 7.2.3.x EAS timeline @@ -4838,8 +4848,8 @@ CAS 特性是通过 STATIC_KEY sched_asym_cpucapacity 控制的. EAS 特性是通过 STATIC_KEY sched_energy_present 控制的. -[Linux内核 算力感知调度](https://mp.weixin.qq.com/s/6-UPioWDvED0lQMAmF9Vfw) -[cpu算力归一化](https://zhuanlan.zhihu.com/p/707011550) +[Linux 内核 算力感知调度](https://mp.weixin.qq.com/s/6-UPioWDvED0lQMAmF9Vfw) +[cpu 算力归一化](https://zhuanlan.zhihu.com/p/707011550) #### 7.2.4.1 Capacity Asymmetry Detection ------- @@ -4985,7 +4995,7 @@ v5.13-rc1 [commit 4aed8aa41524 ("sched/fair: Introduce a CPU capacity comparison * Migrate 'misfit' tasks on asymmetric capacity systems -在 AMP(asymmetric CPU capacity systems) 系统上, 负载密集的任务最终可能会使用不适合其计算需求的 CPU. 在这种情况下, "不匹配的" 任务应该及时迁移到具有更高 capacity 的 CPU 上, 以确保更好的吞吐量. v4.20 [sched/fair: Migrate'misfit'tasks on asymmetric capacity systems](https://git.kernel.org/pub/scm/linux/kernel/git/torvalds/linux.git/log/?id=9c63e84db29bcf584040931ad97c2edd11e35f6c) 来使得**负载均衡支持 Misfit Task**. +在 AMP(asymmetric CPU capacity systems) 系统上, 负载密集的任务最终可能会使用不适合其计算需求的 CPU. 在这种情况下, "不匹配的" 任务应该及时迁移到具有更高 capacity 的 CPU 上, 以确保更好的吞吐量. v4.20 [sched/fair: Migrate'misfit'tasks on asymmetric capacity systems](https://git.kernel.org/pub/scm/linux/kernel/git/torvalds/linux.git/log/?id=9c63e84db29bcf584040931ad97c2edd11e35f6c) 来使得 ** 负载均衡支持 Misfit Task**. 引入了 [group_misfit_task](https://elixir.bootlin.com/linux/v4.20/source/kernel/sched/fair.c#L7868) 表示这种场景. Misfit Balancing 只在每 CPU 容量较低的源组和计算容量较高的目标组之间有意义. 否则, 将忽略 misfit. group_misfit_task 具有 [最低优先级](https://elixir.bootlin.com/linux/v4.20/source/kernel/sched/fair.c#L6964), 因此任何由于 [过载造成的不平衡 group_overloaded](https://elixir.bootlin.com/linux/v4.20/source/kernel/sched/fair.c#L6966) 都将首先处理. Misfit 的不平衡值记录在 [rq->misfit_task_load](https://elixir.bootlin.com/linux/v4.20/source/kernel/sched/fair.c#L3724), 并在 update_sd_lb_stats() -=> update_sg_lb_stats() 时更新到 [struct sg_lb_stats 的 group_misfit_task_load](https://elixir.bootlin.com/linux/v4.20/source/kernel/sched/fair.c#L7947) 中. @@ -5009,7 +5019,7 @@ Misfit Task 对调度器 ** 负载均衡 ** 做了如下改造, 参见 [commit c |:---:|:----:|:---:|:----:|:---------:|:----:| | 2018/07/04 | Morten Rasmussen | [sched/fair: Migrate'misfit'tasks on asymmetric capacity systems](https://git.kernel.org/pub/scm/linux/kernel/git/torvalds/linux.git/log/?id=9c63e84db29bcf584040931ad97c2edd11e35f6c) | TODO | v4 ☐☑✓ | [LORE v4,0/12](https://lore.kernel.org/all/1530699470-29808-1-git-send-email-morten.rasmussen@arm.com) | | 2023/02/01 | Vincent Guittot | [unlink misfit task from cpu overutilized](https://git.kernel.org/pub/scm/linux/kernel/git/torvalds/linux.git/log?id=a2e90611b9f425adbbfcdaa5b5e49958ddf6f61b) | uclamp_min 造成的任务 misfit 并不意味着 cpu overutilized, 因为这仅仅是 uclamp_min 的约束, 具有小 util_avg 的任务可能不适合所在高 capacity 的 cpu. 允许 `task_fits_cpu()/asym_fits_cpu()/cpu_overutilized() -=> util_filts_cpu()` 返回 -1 来反映 CPU 不适合指定任务只是因为 uclamp_min, 所以我们可以使用这个状态来采取额外的操作, 以选择与 uclamp_min 匹配的最佳 CPU. 当 util_filts_cpu() 返回 -1 时, 不再认为 CPU 是 overutilized 的, 因此 select_idle_capacity() 和 find_energy_efficient_cpu() 将继续寻找一种可能的性能更好的 CPU, 它用 capacity_orig_of() - thermal_load_avg 代替容量反转检测来检测容量反转. | v5 ☐☑✓ | [LORE v5,0/2](https://lore.kernel.org/all/20230201143628.270912-1-vincent.guittot@linaro.org) | -| 2023/12/09 | Qais Yousef | [sched: Generalize misfit load balance](https://lore.kernel.org/all/20231209011759.398021-1-qyousef@layalina.io) | 当前的 misfit 实现被认为是 MISFIT_PERF, 这意味着我们需要将任务移动到更好的 CPU 以满足其性能要求. 对于被 UCLAMP_MAX 所限制的(大)任务, 引入 MISFIT_POWER, 需要找到一个更好的位置来控制它对 POWER 的影响. 并且当我们有了一个 API 来注释延迟敏感任务, 预计将需要 MISFIT_LATENCY 负载均衡来帮助处理超额订阅情况, 以帮助更好地分配延迟敏感任务, 以帮助减少其唤醒延迟. | v1 ☐☑✓ | [LORE v1,0/3](https://lore.kernel.org/all/20231209011759.398021-1-qyousef@layalina.io) | +| 2023/12/09 | Qais Yousef | [sched: Generalize misfit load balance](https://lore.kernel.org/all/20231209011759.398021-1-qyousef@layalina.io) | 当前的 misfit 实现被认为是 MISFIT_PERF, 这意味着我们需要将任务移动到更好的 CPU 以满足其性能要求. 对于被 UCLAMP_MAX 所限制的 (大) 任务, 引入 MISFIT_POWER, 需要找到一个更好的位置来控制它对 POWER 的影响. 并且当我们有了一个 API 来注释延迟敏感任务, 预计将需要 MISFIT_LATENCY 负载均衡来帮助处理超额订阅情况, 以帮助更好地分配延迟敏感任务, 以帮助减少其唤醒延迟. | v1 ☐☑✓ | [LORE v1,0/3](https://lore.kernel.org/all/20231209011759.398021-1-qyousef@layalina.io) | @@ -5039,7 +5049,7 @@ EAS 基于唤醒事件来有效地将任务放置在系统上, 同样 MISFIT PLA 在某些情况下, 任务将不再有唤醒事件或唤醒速度太慢, 而 Load Balance 的时延明显更高于 WAKEUP. 对于这种情况, 我们可以利用被放回就绪队列中的任务来检查是否应该将其迁移到另一个 CPU 上. 当任务是 CPU 上唯一运行的任务时, 可以在 TICK 中将检查任务是否卡在该 CPU 上(MISFIT), 是否应迁移到另一个 CPU 上. -当然唤醒事件仍然是迁移任务的主要方式, 但我们现以通过检查任务的利用率是否大于最大可用计算容量(最大 CPU 容量或 uclamp 最大设置)来检测任务在 CPU 上 MISFIT 的情况. +当然唤醒事件仍然是迁移任务的主要方式, 但我们现以通过检查任务的利用率是否大于最大可用计算容量 (最大 CPU 容量或 uclamp 最大设置) 来检测任务在 CPU 上 MISFIT 的情况. 1. QCOM 在自己 MSM 的内核(早期 EAS 版本, EAS 合入主线后, 高通使用 vendor-hook) 中引入了 [check_for_migration()](https://git.codelinaro.org/clo/la/kernel/msm-4.19/-/commit/7ebdf76d85e1050f06b52db476d0ef34bd060cbd) 在 TICK 中直接检查任务如果已经 MISFIT 了, 则直接进行强制迁移. 这个优化也被国内很多 ANDROID 厂商沿用. @@ -5124,7 +5134,7 @@ d326aa36e63a ANDROID: PM / OPP: cpufreq-dt: Move power estimation function | v4.4 的 EAS 版本 android-4.4-p-release| [`Documentation/devicetree/bindings/scheduler/sched-energy-costs.txt`](https://github.com/gatieme/aosp_kernel_common/blob/deprecated/android-4.4-p-release/Documentation/devicetree/bindings/scheduler/sched-energy-costs.txt) | [`arch/arm64/boot/dts/arm/juno-sched-energy.dtsi`](https://github.com/gatieme/aosp_kernel_common/blob/deprecated/android-4.4-p-release/arch/arm64/boot/dts/arm/juno-sched-energy.dtsi) | [commit d2b3db032e34 ("sched: Support for extracting EAS energy costs from DT")](https://github.com/gatieme/aosp_kernel_common/commit/d2b3db032e34938c970b148e71cc401fc4c541e8) | [commit 2c6a8a48a701 ("sched: Estimate energy impact of scheduling decisions")](https://github.com/gatieme/aosp_kernel_common/commit/2c6a8a48a701ca5d767f249eacb776f80858cbaa)
[commit c1770a521398 ("sched: Calculate energy consumption of sched_group")](https://github.com/gatieme/aosp_kernel_common/commit/c1770a521398102b6f2447502035887297b17ea0) | select_energy_cpu_brute()
-=>energy_diff()
-=>__energy_diff()
-=>sched_group_energy() | 最基础的 EAS 实现以及静态 EM 框架.
1. 通过 DTS 描述的静态能效数据来支撑 EAS 运行, 参见 init_sched_energy_costs()
2. 同时考虑静态功耗和动态功耗, 参见 sched_group_energy(), 其中: 动态功耗 `sg_busy_energy = (group_util * sg->sge->cap_states[cap_idx].power)`, 静态功耗 `sg_idle_energy = ((SCHED_LOAD_SCALE-group_util) * sg->sge->idle_states[idle_idx].power)` | | v4.9 的 EAS 版本 android-4.9-q-release | [`Documentation/devicetree/bindings/scheduler/sched-energy-costs.txt`](https://github.com/gatieme/aosp_kernel_common/blob/deprecated/android-4.9-q-release/Documentation/devicetree/bindings/scheduler/sched-energy-costs.txt) | [`arch/arm64/boot/dts/arm/juno-sched-energy.dtsi`](https://github.com/gatieme/aosp_kernel_common/blob/deprecated/android-4.9-q-release/arch/arm64/boot/dts/arm/juno-sched-energy.dtsi) | [commit 2ef7a2953c81 ("arm, arm64: factorize common cpu capacity default code")](https://github.com/gatieme/aosp_kernel_common/commit/cf28cf03a33ee33180628aa93fc85a940240f893)
[commit 04b6162839f5 ("sched: Support for extracting EAS energy costs from DT")](https://github.com/gatieme/aosp_kernel_common/commit/04b6162839f50abacbd8e20c48c5561f673c07c5)
[commit 9001b8f1a599 ("ANDROID: sched: Add support for frequency/power energy model")](https://github.com/gatieme/aosp_kernel_common/commit/9001b8f1a599b974ca8f2f925c210a31c0c70d60) | [commit 60664914185b ("ANDROID: sched/fair: re-factor energy_diff to use a single (extensible) energy_env")](https://github.com/gatieme/aosp_kernel_common/commit/60664914185bef21e3abb0a804777171bd488477) | find_energy_efficient_cpu()
-=>find_best_target()
-=>select_energy_cpu_idx()
-=>compute_energy()
-=>calc_sg_energy() | 1. 依旧使用静态 EM 框架, 通过 DTS 来解析.
2. 引入归一的流程 select_energy_cpu_idx() 替代旧的 select_energy_cpu_brute().
3. 同时考虑静态功耗和动态功耗, 参见 calc_sg_energy(), 其中: 其中: 动态功耗 `busy_energy = sge->cap_states[cap_idx].power * sg_util`, 静态功耗 `idle_energy = sge->idle_states[idle_idx].power * (SCHED_CAPACITY_SCALE - sg_util)`. | | v4.14 的 EAS 版本 android-4.14-q-release | [`Documentation/devicetree/bindings/scheduler/sched-energy-costs.txt`](https://github.com/gatieme/aosp_kernel_common/blob/deprecated/android-4.14-q-release/Documentation/devicetree/bindings/scheduler/sched-energy-costs.txt) | [`arch/arm64/boot/dts/arm/juno-sched-energy.dtsi`](https://github.com/gatieme/aosp_kernel_common/blob/deprecated/android-4.14-q-release/arch/arm64/boot/dts/arm/juno-sched-energy.dtsi) | [commit 06073ee26775 ("ARM: 8621/3: parse cpu capacity-dmips-mhz from DT")](https://github.com/gatieme/aosp_kernel_common/commit/06073ee26775809f949823ae18a3affd5f376ee0)
[commit 7202bde8b7ae ("arm64: parse cpu capacity-dmips-mhz from DT")](https://github.com/gatieme/aosp_kernel_common/commit/7202bde8b7aea7c914e33c7bc2dfb145587f1bdc)
[commit 2ef7a2953c81 ("arm, arm64: factorize common cpu capacity default code")](https://github.com/gatieme/aosp_kernel_common/commit/2ef7a2953c81ee6b341e3ffb33570adc894cf4a5)
[commit 04b6162839f5 ("sched: Support for extracting EAS energy costs from DT")](https://github.com/gatieme/aosp_kernel_common/commit/04b6162839f50abacbd8e20c48c5561f673c07c5)
[commit 9001b8f1a599 ("ANDROID: sched: Add support for frequency/power energy model")](https://github.com/gatieme/aosp_kernel_common/commit/9001b8f1a599b974ca8f2f925c210a31c0c70d60) | [commit 60664914185b ("ANDROID: sched/fair: re-factor energy_diff to use a single (extensible) energy_env")](https://github.com/gatieme/aosp_kernel_common/commit/60664914185bef21e3abb0a804777171bd488477) | find_energy_efficient_cpu()
-=>find_best_target()
-=>select_energy_cpu_idx()
-=>compute_energy()
-=>calc_sg_energy() | 1. 引入 cpu capacity-dmips-mhz, 现在可以通过从 DT 提取的值和来自 cpufreq 的信息计算 CPU 容量. 在启动时增加对 DT 信息的解析, 并辅以 cpufreq 信息.
2. 依旧使用静态 EM 框架, 通过 DTS 来解析.
3. 同时考虑静态功耗和动态功耗, 参见 calc_sg_energy(), 其中: 动态功耗 `busy_energy = sge->cap_states[cap_idx].power * sg_util`, 静态功耗 `idle_energy = sge->idle_states[idle_idx].power * (SCHED_CAPACITY_SCALE - sg_util)` | -| v4.19 的 EAS 版本 android-4.19-q-release | NA | NA | 能量感知调度程序(EAS)过去依赖于设备树中静态定义的能量模型(EM). 在新的 v4.19 之后的 EAS 版本, 依靠 EM 框架来获取 CPU 的能耗成本, [commit 9cbf2b68cabf ("FROMLIST: PM: Introduce an Energy Model management framework")](https://github.com/gatieme/aosp_kernel_common/commit/9cbf2b68cabf4660c97674d0a74d5f191c561c2f). 新的模型允许不同设备注册 EM 模型, 参见 em_register_perf_domain() 和 em_create_pd(), 新的 EM 使用 CONFIG_ENERGY_MODEL 控制, 只使用 CPU 的动态功耗, 因此旧 EM 中的集群相关成本和空闲成本将被忽略, 即不考虑动态功耗. android-4.19-q-release 提供了 CONFIG_LEGACY_ENERGY_MODEL_DT `drivers/energy_model/legacy_em_dt.ko` 驱动读取 DT 中的旧式静态 EM, 并将其输入 EM 框架, 从而使 EAS 能够在带有旧式 DT 文件的平台上使用. 随后 v5.0 合入主线时, CONFIG_LEGACY_ENERGY_MODEL_DT 并未合入主线; | 参见 em_pd_energy(), 只考虑动态功耗, 不考虑静态功耗. | 1. 旧的基于 DTS 配置的能效模型 CONFIG_LEGACY_ENERGY_MODEL_DT 逐步被废弃, 转而使用新的能效模型 CONFIG_ENERGY_MODEL, 新能效模型基于 cpu capacity-dmips-mhz, dynamic-power-coefficient 以及 OPP 表直接计算能效数据. | +| v4.19 的 EAS 版本 android-4.19-q-release | NA | NA | 能量感知调度程序 (EAS) 过去依赖于设备树中静态定义的能量模型(EM). 在新的 v4.19 之后的 EAS 版本, 依靠 EM 框架来获取 CPU 的能耗成本, [commit 9cbf2b68cabf ("FROMLIST: PM: Introduce an Energy Model management framework")](https://github.com/gatieme/aosp_kernel_common/commit/9cbf2b68cabf4660c97674d0a74d5f191c561c2f). 新的模型允许不同设备注册 EM 模型, 参见 em_register_perf_domain() 和 em_create_pd(), 新的 EM 使用 CONFIG_ENERGY_MODEL 控制, 只使用 CPU 的动态功耗, 因此旧 EM 中的集群相关成本和空闲成本将被忽略, 即不考虑动态功耗. android-4.19-q-release 提供了 CONFIG_LEGACY_ENERGY_MODEL_DT `drivers/energy_model/legacy_em_dt.ko` 驱动读取 DT 中的旧式静态 EM, 并将其输入 EM 框架, 从而使 EAS 能够在带有旧式 DT 文件的平台上使用. 随后 v5.0 合入主线时, CONFIG_LEGACY_ENERGY_MODEL_DT 并未合入主线; | 参见 em_pd_energy(), 只考虑动态功耗, 不考虑静态功耗. | 1. 旧的基于 DTS 配置的能效模型 CONFIG_LEGACY_ENERGY_MODEL_DT 逐步被废弃, 转而使用新的能效模型 CONFIG_ENERGY_MODEL, 新能效模型基于 cpu capacity-dmips-mhz, dynamic-power-coefficient 以及 OPP 表直接计算能效数据. | #### 7.2.5.2 EAS 的能效模型框架 (Energy Model Framework) 统一管理回合感知所有设备的能效 ------- @@ -5185,7 +5195,7 @@ DTB 中通过 OPP 字段标记 CPU 的电压及频率信息, 参见 [Documentati CPU 的 capacity 通过 capacity-dmips-mhz 来标记. CPU 的 power Energy Model 则提供了两种方式来注册, 一种是通过 dynamic-power-coefficient, 再结合电压和频率进行计算, 一种是不提供 dynamic-power-coefficient, 那么就要求在 OPP 表中通过 opp-microwatt 显式设置功耗数据. > dmips-mhz -> dmips 是 Dhrystone Million Instructions Per Second 的缩写. 它是一个测量 CPU 运行一个叫 Dhrystone (整数运算)的测试程序时表现出来的相对性能高低的一个单位. Dhrystone 并不包括浮点运算, 其输出结果为每秒钟运行 Dhrystone 的次数, 即每秒钟迭代主循环的次数. Dhrystone的重要性在于其能作为处理器整数计算性能的指标. +> dmips 是 Dhrystone Million Instructions Per Second 的缩写. 它是一个测量 CPU 运行一个叫 Dhrystone (整数运算)的测试程序时表现出来的相对性能高低的一个单位. Dhrystone 并不包括浮点运算, 其输出结果为每秒钟运行 Dhrystone 的次数, 即每秒钟迭代主循环的次数. Dhrystone 的重要性在于其能作为处理器整数计算性能的指标. | DTB 结构 | DTB 字段 | 描述 | |:-------:|:--------:|:---:| @@ -5275,8 +5285,8 @@ EAS 合入的时候, 使用 map_util_freq() 将 util 按照 schedutil 的调频 | 时间 | 作者 | 特性 | 描述 | 是否合入主线 | 链接 | |:---:|:----:|:---:|:----:|:---------:|:----:| -| 2023/12/11 | Vincent Guittot | [consolidate and cleanup CPU capacity](https://git.kernel.org/pub/scm/linux/kernel/git/torvalds/linux.git/log/?id=1f023007f5e782bda19ad9104830c404fd622c5d) | 整合调度器中如何使用最大 CAPACITY 以及我们如何计算某一利用率级别的频率的第一部分. 下一步将是在 CPU 的原始最大计算容量和永久应用上限(秒或更长时间)时当前可用的容量之间进行区分. 第一部分修复在计算利用率的频率时出现的一些不公平现象. `cpuinfo.max_freq` 可以在运行时更改, 这意味着该值可能与用于计算 CPU 容量的频率不同, 性能域的最后一项并不总是用于计算 CPU CAPACITY 的频点, 这可能导致目标频率与系统的其他部分(如时间表)不同, 并可能导致错误的能量估计. 新的 `get_capacity_ref_freq() -=> arch_scale_freq_ref()` 可用于返回一个固定且一致的频率参考, 该频率参考可在计算某个利用率级别的 CPU 频率时使用, 使用这个函数得到这个参考频率. | v7 ☐☑✓ v6.8-rc1 | [LORE v7,0/7](https://lore.kernel.org/all/20231211104855.558096-1-vincent.guittot@linaro.org) | -| 2024/01/08 | Vincent Guittot | [Rework system pressure interface to the scheduler](https://lore.kernel.org/all/20240108134843.429769-1-vincent.guittot@linaro.org) | 整合调度器中如何使用最大 CAPACITY 以及我们如何计算某一利用率级别的频率的第二部分. 在 [consolidate and cleanup CPU capacity](https://lore.kernel.org/all/20231211104855.558096-1-vincent.guittot@linaro.org) 中对 CPU 容量进行了整合和清理之后, 这个补丁集重新研究了调度器如何获取 CPU 的压力. 我们需要考虑 cpufreq 在数十毫秒或更长时间内对 CPU 计算能力施加的所有压力, 而不仅仅是 cpufreq cooling 设备 HW mitigiations 延迟. 我们将施加在 CPU 容量上的压力分为两部分: 1. 一个来自 cpufreq 和 freq_qos, 2. 一个来自 HW 高频抑制.
下一步将添加一个专用接口, 用于长期限制 CPU 容量(即几秒钟或更长时间), 如 cpufreq-sysfs 的 scaling_max_freq. | v3 ☐☑✓ | [LORE v3,0/5](https://lore.kernel.org/all/20240108134843.429769-1-vincent.guittot@linaro.org) | +| 2023/12/11 | Vincent Guittot | [consolidate and cleanup CPU capacity](https://git.kernel.org/pub/scm/linux/kernel/git/torvalds/linux.git/log/?id=1f023007f5e782bda19ad9104830c404fd622c5d) | 整合调度器中如何使用最大 CAPACITY 以及我们如何计算某一利用率级别的频率的第一部分. 下一步将是在 CPU 的原始最大计算容量和永久应用上限 (秒或更长时间) 时当前可用的容量之间进行区分. 第一部分修复在计算利用率的频率时出现的一些不公平现象. `cpuinfo.max_freq` 可以在运行时更改, 这意味着该值可能与用于计算 CPU 容量的频率不同, 性能域的最后一项并不总是用于计算 CPU CAPACITY 的频点, 这可能导致目标频率与系统的其他部分 (如时间表) 不同, 并可能导致错误的能量估计. 新的 `get_capacity_ref_freq() -=> arch_scale_freq_ref()` 可用于返回一个固定且一致的频率参考, 该频率参考可在计算某个利用率级别的 CPU 频率时使用, 使用这个函数得到这个参考频率. | v7 ☐☑✓ v6.8-rc1 | [LORE v7,0/7](https://lore.kernel.org/all/20231211104855.558096-1-vincent.guittot@linaro.org) | +| 2024/01/08 | Vincent Guittot | [Rework system pressure interface to the scheduler](https://lore.kernel.org/all/20240108134843.429769-1-vincent.guittot@linaro.org) | 整合调度器中如何使用最大 CAPACITY 以及我们如何计算某一利用率级别的频率的第二部分. 在 [consolidate and cleanup CPU capacity](https://lore.kernel.org/all/20231211104855.558096-1-vincent.guittot@linaro.org) 中对 CPU 容量进行了整合和清理之后, 这个补丁集重新研究了调度器如何获取 CPU 的压力. 我们需要考虑 cpufreq 在数十毫秒或更长时间内对 CPU 计算能力施加的所有压力, 而不仅仅是 cpufreq cooling 设备 HW mitigiations 延迟. 我们将施加在 CPU 容量上的压力分为两部分: 1. 一个来自 cpufreq 和 freq_qos, 2. 一个来自 HW 高频抑制.
下一步将添加一个专用接口, 用于长期限制 CPU 容量(即几秒钟或更长时间), 如 cpufreq-sysfs 的 scaling_max_freq. | v3 ☐☑✓ | [LORE v3,0/5](https://lore.kernel.org/all/20240108134843.429769-1-vincent.guittot@linaro.org) | #### 7.2.5.4 Energy Model Management Framework 的改进与优化 @@ -5364,7 +5374,7 @@ LPC-2022 [Dynamic Energy Model to handle leakage power](https://lpc.events/event | 时间 | 作者 | 特性 | 描述 | 是否合入主线 | 链接 | |:---:|:----:|:---:|:----:|:---------:|:----:| | 2021/08/11 | Viresh Kumar | [cpufreq: Auto-register with energy model](https://lore.kernel.org/all/cover.1628682874.git.viresh.kumar@linaro.org) | TODO | v2 ☐☑✓ | [LORE v1,0/8](https://lore.kernel.org/all/cover.1628579170.git.viresh.kumar@linaro.org)
*-*-*-*-*-*-*-*
[LORE v2,0/9](https://lore.kernel.org/all/cover.1628682874.git.viresh.kumar@linaro.org) | -| 2023/11/29 | Lukasz Luba | [Introduce runtime modifiable Energy Model](https://git.kernel.org/pub/scm/linux/kernel/git/torvalds/linux.git/log/?id=eb1ad4d431674368bab4ef4e312f2e8c158294f9) | 本补丁集增加了一项新功能, 允许在运行时修改能量模型(EM)功率值. 它能更好地反映能耗模型. 不同的功率使用特性. 在 EAS 中进行任务分配时, 可以利用不同的功耗特性做出更好的决策. 这是动态能量模型功能集的一部分. 最近在 并在最近的 OSPM2023 会议上进行了讨论, 该补丁集实现了 EM 的第一次 改进. [LPC2022, Android MC, Dynamic Energy Model to handle leakage power](https://lpc.events/event/16/contributions/1341), [LPC2022, Power Management and Thermal Control MC](https://lpc.events/event/16/contributions/1194). | v5 ☐☑✓ v6.9-rc1 | [LORE v5,0/23](https://lore.kernel.org/all/20231129110853.94344-1-lukasz.luba@arm.com) | +| 2023/11/29 | Lukasz Luba | [Introduce runtime modifiable Energy Model](https://git.kernel.org/pub/scm/linux/kernel/git/torvalds/linux.git/log/?id=eb1ad4d431674368bab4ef4e312f2e8c158294f9) | 本补丁集增加了一项新功能, 允许在运行时修改能量模型 (EM) 功率值. 它能更好地反映能耗模型. 不同的功率使用特性. 在 EAS 中进行任务分配时, 可以利用不同的功耗特性做出更好的决策. 这是动态能量模型功能集的一部分. 最近在 并在最近的 OSPM2023 会议上进行了讨论, 该补丁集实现了 EM 的第一次 改进. [LPC2022, Android MC, Dynamic Energy Model to handle leakage power](https://lpc.events/event/16/contributions/1341), [LPC2022, Power Management and Thermal Control MC](https://lpc.events/event/16/contributions/1194). | v5 ☐☑✓ v6.9-rc1 | [LORE v5,0/23](https://lore.kernel.org/all/20231129110853.94344-1-lukasz.luba@arm.com) | @@ -5426,12 +5436,12 @@ $Pdyn = C \times V^2 \times f = dynamic-power-coefficient \times V^2 \times f$ ------- -> 数字线性电压调节器 DLVR 是 Meteor Lake 的一项功能(最初在 Raptor Lake 中发现, 但已禁用)作为附加电压调节器, 可以帮助降低处理器的功耗. 参见 phoronix 报道 [Linux Patches Posted For Intel Lunar Lake DLVR Support](https://www.phoronix.com/news/Intel-Lunar-Lake-DLVR-Linux). +> 数字线性电压调节器 DLVR 是 Meteor Lake 的一项功能 (最初在 Raptor Lake 中发现, 但已禁用) 作为附加电压调节器, 可以帮助降低处理器的功耗. 参见 phoronix 报道 [Linux Patches Posted For Intel Lunar Lake DLVR Support](https://www.phoronix.com/news/Intel-Lunar-Lake-DLVR-Linux). | 时间 | 作者 | 特性 | 描述 | 是否合入主线 | 链接 | |:---:|:----:|:---:|:----:|:---------:|:----:| -| 2024/06/19 | Srinivas Pandruvada | [Processor thermal interrupts for Lunar Lake](https://lore.kernel.org/all/20240619172109.497639-1-srinivas.pandruvada@linux.intel.com) | 用于处理器热中断的 Lunar Lake 补丁, 增加了对工作负载提示(WLT)的支持和对英特尔 int340x 驱动程序的电源底支持. 对 Lunar Lake 的热中断支持进行了全面检查, 热设备不再支持传统的 PCI 中断. 取而代之的是, MSI 源依赖于封装热、DDR 热、电源底和工作负载类型提示. 参见 phoronix 报道 [Intel Lunar Lake Workload Hints & Power Floor Patches Posted For Linux](https://www.phoronix.com/news/Intel-LunarLake-WLT-Power-Floor). | v1 ☐☑✓ | [LORE v1,0/3](https://lore.kernel.org/all/20240619172109.497639-1-srinivas.pandruvada@linux.intel.com) | +| 2024/06/19 | Srinivas Pandruvada | [Processor thermal interrupts for Lunar Lake](https://lore.kernel.org/all/20240619172109.497639-1-srinivas.pandruvada@linux.intel.com) | 用于处理器热中断的 Lunar Lake 补丁, 增加了对工作负载提示 (WLT) 的支持和对英特尔 int340x 驱动程序的电源底支持. 对 Lunar Lake 的热中断支持进行了全面检查, 热设备不再支持传统的 PCI 中断. 取而代之的是, MSI 源依赖于封装热、DDR 热、电源底和工作负载类型提示. 参见 phoronix 报道 [Intel Lunar Lake Workload Hints & Power Floor Patches Posted For Linux](https://www.phoronix.com/news/Intel-LunarLake-WLT-Power-Floor). | v1 ☐☑✓ | [LORE v1,0/3](https://lore.kernel.org/all/20240619172109.497639-1-srinivas.pandruvada@linux.intel.com) | | 2023/08/28 | Srinivas Pandruvada | [thermal: processor_thermal: Suport workload hint](https://git.kernel.org/pub/scm/linux/kernel/git/torvalds/linux.git/log/?id=27801542b2b815dad2759b7b1f85858627671a3b) | [Linux 6.7 Adds Support For Intel Meteor Lake Workload Type Hints](https://www.phoronix.com/news/Linux-6.7-Power-Management) | v3 ☐☑✓ v6.7-rc1 | [LORE v3,0/7](https://lore.kernel.org/all/20230829002346.2104251-1-srinivas.pandruvada@linux.intel.com) | @@ -5509,7 +5519,7 @@ CPUFreq 驱动是处理和平台相关的逻辑, Governor 中实现了具体的 | 2021/08/12 | Viresh Kumar | [Add callback to register with energy model](https://lore.kernel.org/patchwork/cover/1424708) | 当前许多 cpufreq 驱动程序向每个策略的注册了能耗模型, 并通过相同的操作 dev_pm_opp_of_register_em() 来完成. 但是随着 thermal-cooling 的完善, 可以在 cpufreq 层次通过新的回调 register_em 来完成这个工作. | v3 ☐ | [PatchWork V3,0/9](https://patchwork.kernel.org/project/linux-arm-kernel/cover/cover.1628742634.git.viresh.kumar@linaro.org) | | 2021/09/08| Viresh Kumar | [Inefficient OPPs](https://patchwork.kernel.org/project/linux-pm/cover/1631109930-290049-1-git-send-email-vincent.donnefort@arm.com) | schedutil 中增加了对低能效 (inefficient) OPP 的感知, 引入 CPUFREQ_RELATION_E 标记来使得 CPUFREQ 只使用和引用有效的频点.
Arm 的 Power 团队在为谷歌的 Pixel4 开发一个实验性内核, 以评估和改进现实生活中 Android 设备上的主线性能和能耗. 发现 SD855 SoC 有几个效率低下的 OPP. 这些 OPP 尽管频率较低, 但功耗却较高, 任务这种频率下工作, 性能不光下降了, 功耗也很高. 通过将它们从 EAS 能效模型中移除, 使得最高效的 CPU 在任务分配上更有吸引力, 有助于减少中、大型 CPU 的运行时间, 同时提高了集群的空闲时间. 由于集群之间存在巨大的能源成本差异, 因此增加空闲时间对该平台来说至关重要. | v7 ☑ 5.16-rc1 | [PatchWork v7,0/9](https://patchwork.kernel.org/project/linux-pm/cover/1631109930-290049-1-git-send-email-vincent.donnefort@arm.com) | | 2023/07/24 | Jie Zhan | [cpufreq: Support per-policy performance boost](https://git.kernel.org/pub/scm/linux/kernel/git/torvalds/linux.git/commit/?id=218a06a79d9a98a96ef46bb003d4d8adb0962056) | 通过添加 "local_boost" sysfs 接口启用按策略提升. 与全局升压开关相同, 将 1/0 写入 "local_boost" 可分别启用 / 禁用 cpufreq 策略上的升压.
全局和本地增压控制的用户视图应为:
1. 启用全局增强最初会对所有策略启用本地增强, 然后可以对每个策略单独启用或禁用本地增强, 前提是平台确实支持.
2. 禁用全局 boost 会使启用本地 boost 成为非法, 而将 0 写入 "local_boost" 是可以的, 但不会生效. [Per-Policy CPU Performance Boosting Proposed For Linux](https://www.phoronix.com/news/Linux-Per-Policy-CPU-Perf-Boost) | v1 ☐☑✓ 6.6-rc1 | [LORE](https://lore.kernel.org/all/20230724075827.4160512-1-zhanjie9@hisilicon.com) | -| 2024/07/28 | Qais Yousef | [cpufreq: sched/schedutil: Remove LATENCY_MULTIPLIER](https://lore.kernel.org/all/20240728192659.58115-1-qyousef@layalina.io) | 1. 移除 LATENCY_MULTIPLIER: 旧版内核中存在一个称为 LATENCY_MULTIPLIER 的常量, 其值为 1000. 这个常量被用来放大频率转换延迟(transition latency), 以计算频率请求的速率限制(rate_limit_us). 但是, 由于现代硬件的快速响应能力, 这种放大已不再必要, 且可能导致不必要的延迟.
2. 更新 transition_delay_us 的计算方式: 补丁提出了一个新算法来计算 transition_delay_us, 即频率转换延迟的 1.5 倍. 这样做的目的是为了给硬件处理频率转换请求留出一定的余地, 但同时又避免了过大的延迟.
3. 考虑现代硬件的响应时间: 补丁指出, 现代硬件的响应时间通常很短, 例如在 M1 Mac Mini 上, 频率转换延迟仅为 50 到 56 微秒. 然而, 由于之前的 LATENCY_MULTIPLIER, 实际设置的 rate_limit_us 为 50 至 56 毫秒, 这被限制为 2 毫秒. 因此, 这个补丁旨在更好地反映现代硬件的能力.
4. 考虑突发负载的需求: 补丁提到现代工作负载经常需要系统能够快速响应负载的变化, 例如任务的睡眠/唤醒、迁移, 或者由于 uclamp 导致的突然提升或限制. 因此, 2 毫秒的延迟可能不再是最佳选择, 尤其是考虑到 2 毫秒大约是 120 Hz 显示刷新率周期的四分之一. | v1 ☐☑✓ | [LORE](https://lore.kernel.org/all/20240728192659.58115-1-qyousef@layalina.io) | +| 2024/07/28 | Qais Yousef | [cpufreq: sched/schedutil: Remove LATENCY_MULTIPLIER](https://lore.kernel.org/all/20240728192659.58115-1-qyousef@layalina.io) | 1. 移除 LATENCY_MULTIPLIER: 旧版内核中存在一个称为 LATENCY_MULTIPLIER 的常量, 其值为 1000. 这个常量被用来放大频率转换延迟(transition latency), 以计算频率请求的速率限制(rate_limit_us). 但是, 由于现代硬件的快速响应能力, 这种放大已不再必要, 且可能导致不必要的延迟.
2. 更新 transition_delay_us 的计算方式: 补丁提出了一个新算法来计算 transition_delay_us, 即频率转换延迟的 1.5 倍. 这样做的目的是为了给硬件处理频率转换请求留出一定的余地, 但同时又避免了过大的延迟.
3. 考虑现代硬件的响应时间: 补丁指出, 现代硬件的响应时间通常很短, 例如在 M1 Mac Mini 上, 频率转换延迟仅为 50 到 56 微秒. 然而, 由于之前的 LATENCY_MULTIPLIER, 实际设置的 rate_limit_us 为 50 至 56 毫秒, 这被限制为 2 毫秒. 因此, 这个补丁旨在更好地反映现代硬件的能力.
4. 考虑突发负载的需求: 补丁提到现代工作负载经常需要系统能够快速响应负载的变化, 例如任务的睡眠 / 唤醒、迁移, 或者由于 uclamp 导致的突然提升或限制. 因此, 2 毫秒的延迟可能不再是最佳选择, 尤其是考虑到 2 毫秒大约是 120 Hz 显示刷新率周期的四分之一. | v1 ☐☑✓ | [LORE](https://lore.kernel.org/all/20240728192659.58115-1-qyousef@layalina.io) | #### 7.3.3.2 各个手机厂商基于 schedutil 的进一步优化和改进 @@ -5532,11 +5542,11 @@ CPUFreq 驱动是处理和平台相关的逻辑, Governor 中实现了具体的 | 2016/08/01 | Rafael J. Wysocki | [cpufreq / sched: cpufreq_update_util() flags and iowait boosting](https://lore.kernel.org/all/3752826.3sXAQIvcIA@vostro.rjw.lan) | TODO | v1 ☐☑✓ | [LORE v1,0/7](https://lore.kernel.org/all/3752826.3sXAQIvcIA@vostro.rjw.lan) | | 2016/09/03 | Rafael J. Wysocki | [cpufreq / sched: iowait boost in intel_pstate and schedutil](https://git.kernel.org/pub/scm/linux/kernel/git/torvalds/linux.git/log/?id=21ca6d2c52f8ca8638129c1dfc489d0b0ae68532) | TODO | v1 ☐☑✓ | [LORE v1,0/4](https://lore.kernel.org/all/2730042.XLMy9dAKI1@vostro.rjw.lan)
*-*-*-*-*-*-*-*
[cpufreq / sched: iowait boost in intel_pstate and schedutil](https://lore.kernel.org/all/21371892.ALJNnHKoBY@vostro.rjw.lan) | TODO | v1 ☐☑✓ v4.9-rc1 | [LORE v1,0/3](https://lore.kernel.org/all/21371892.ALJNnHKoBY@vostro.rjw.lan) | | 2018/05/22 | Patrick Bellasi | [Fix and cleanup iowait boost](https://git.kernel.org/pub/scm/linux/kernel/git/torvalds/linux.git/log/?id=fd7d5287fd65df054bdade3e52ceb645cb411e72) | TODO | v4 ☐☑✓ v4.18-rc1 | [LORE v4,0/2](https://lore.kernel.org/all/20180522110754.20832-1-patrick.bellasi@arm.com) | -| 2024/03/04 | Christian Loehle | [Introduce per-task io utilization boost](https://lore.kernel.org/all/20240304201625.100619-1-christian.loehle@arm.com) | 引入每个任务的 I/O 利用率提升(io utilization boost), 以改善 Linux 内核调度器(schedutil)和英特尔 P-state(intel_pstate)驱动的 I/O 等待提升功能. | v1 ☐☑✓ | [LORE v1,0/2](https://lore.kernel.org/all/20240304201625.100619-1-christian.loehle@arm.com) | -| 2024/09/11 | Jens Axboe | [io_uring: gate iowait schedule on having pending requests](https://git.kernel.org/pub/scm/linux/kernel/git/torvalds/linux.git/commit/?id=7b72d661f1f2f950ab8c12de7e2bc48bdac8ed69) | 问题描述: 之前的一个提交使得所有 cqring(completion queue ring) 的等待都被标记为 iowait(I/O 等待), 这是为了提高有待处理 I/O 的短时间调度的性能. 然而, 对于那些有专门的收割线程(reaper thread)只等待 ring 上的事件的使用场景, 这会导致一个核心被错误地标记为 "忙"" 且有 100% 的 iowait, 尽管实际上并没有进行 I/O 操作.
解决方案: 为了避免这种情况, 补丁提出了一种方法, 即仅当等待的任务有待处理的请求时, 才将当前任务标记为处于 iowait 状态. 这通过引入一个新的函数 current_pending_io() 来检查当前任务是否有挂起的请求, 并相应地设置 current->in_iowait 标志.
影响: 这个改动可以减少对用户的误导, 因为它更准确地反映了任务的实际状态. 对于那些使用专门的收割线程的应用, 它们不会错误地显示高 iowait, 从而更清楚地表明系统资源的使用情况. 参见 [LWN, 2024/09/10, The trouble with iowait](https://lwn.net/Articles/989272). | v1 ☐☑✓ v6.5-rc4 | [COMMIT](https://git.kernel.org/pub/scm/linux/kernel/git/torvalds/linux.git/commit/?id=7b72d661f1f2f950ab8c12de7e2bc48bdac8ed69) | +| 2024/03/04 | Christian Loehle | [Introduce per-task io utilization boost](https://lore.kernel.org/all/20240304201625.100619-1-christian.loehle@arm.com) | 引入每个任务的 I/O 利用率提升 (io utilization boost), 以改善 Linux 内核调度器(schedutil) 和英特尔 P-state(intel_pstate)驱动的 I/O 等待提升功能. | v1 ☐☑✓ | [LORE v1,0/2](https://lore.kernel.org/all/20240304201625.100619-1-christian.loehle@arm.com) | +| 2024/09/11 | Jens Axboe | [io_uring: gate iowait schedule on having pending requests](https://git.kernel.org/pub/scm/linux/kernel/git/torvalds/linux.git/commit/?id=7b72d661f1f2f950ab8c12de7e2bc48bdac8ed69) | 问题描述: 之前的一个提交使得所有 cqring(completion queue ring) 的等待都被标记为 iowait(I/O 等待), 这是为了提高有待处理 I/O 的短时间调度的性能. 然而, 对于那些有专门的收割线程 (reaper thread) 只等待 ring 上的事件的使用场景, 这会导致一个核心被错误地标记为 "忙"" 且有 100% 的 iowait, 尽管实际上并没有进行 I/O 操作.
解决方案: 为了避免这种情况, 补丁提出了一种方法, 即仅当等待的任务有待处理的请求时, 才将当前任务标记为处于 iowait 状态. 这通过引入一个新的函数 current_pending_io() 来检查当前任务是否有挂起的请求, 并相应地设置 current->in_iowait 标志.
影响: 这个改动可以减少对用户的误导, 因为它更准确地反映了任务的实际状态. 对于那些使用专门的收割线程的应用, 它们不会错误地显示高 iowait, 从而更清楚地表明系统资源的使用情况. 参见 [LWN, 2024/09/10, The trouble with iowait](https://lwn.net/Articles/989272). | v1 ☐☑✓ v6.5-rc4 | [COMMIT](https://git.kernel.org/pub/scm/linux/kernel/git/torvalds/linux.git/commit/?id=7b72d661f1f2f950ab8c12de7e2bc48bdac8ed69) | | 2024/08/19 | Jens Axboe | [Split iowait into two states](https://lore.kernel.org/all/20240819154259.215504-1-axboe@kernel.dk) | 参见 [LWN, 2024/09/10, The trouble with iowait](https://lwn.net/Articles/989272). | v6 ☐☑✓ | [LORE v6,0/4](https://lore.kernel.org/all/20240819154259.215504-1-axboe@kernel.dk) | -| 2024/08/19 | Jens Axboe | [Split iowait into two states](https://lore.kernel.org/all/20240819154259.215504-1-axboe@kernel.dk) | 这组补丁集将 in_iowait 分为两个状态, 以便可以分别控制它们. 第一种状态是"任务正在睡眠等待 I/O", 并希望在睡眠和唤醒延迟方面获得 cpufreq 的好处. 第二种状态是上述状态, 并且也会计入 iowait 统计数据中. 补丁 1~3 是准备补丁, 它们更改了 task_struct->nr_iowait 的类型, 并添加了帮助程序来操作 iowait 计数. 补丁 4 执行了实际的状态拆分. 参见 [LWN, 2024/09/10, The trouble with iowait](https://lwn.net/Articles/989272). | v6 ☐☑✓ | [LORE v6,0/4](https://lore.kernel.org/all/20240819154259.215504-1-axboe@kernel.dk) | -| 2024/09/05 | Christian Loehle | [cpufreq: cpuidle: Remove iowait behaviour](https://lore.kernel.org/all/20240905092645.2885200-1-christian.loehle@arm.com) | 从 Linux 内核的 cpufreq(CPU 频率调节)和 cpuidle(CPU 空闲)管理中移除基于 iowait(I/O 等待)的行为.
问题描述: 当前内核中存在一些基于 iowait 的启发式方法, 这些方法长期以来似乎难以改进. 随着 I/O 工作负载的变化, 这些启发式方法可以被移除, 而只影响基准测试. iowait 的定义本身很模糊, 它在内核代码中被广泛使用. 传统上它只用于块设备 I/O, 但内核代码中存在许多反例.
1. cpuidle 问题: 在 cpuidle 管理器中, 使用 iowait 任务的数量来确定 CPU 的交互性需求. 依赖于 iowait 进行 cpuidle 管理存在多个问题, 包括: 没有保证 iowait 任务会在相同的 CPU 上被唤醒. iowait 状态并不能说明空闲持续时间. iowait 状态并不总是意味着性能会受到延迟增加的影响.
2. cpufreq 问题: cpufreq 管理器长期以来基于 iowait 行为进行调节, 但这种方法存在问题, 如: 对于异步或多线程 I/O, 假设因为设备空闲而错过了块设备吞吐量是不正确的, 假设等待 I/O 的任务将来会发送 I/O 请求.
性能影响: 补丁系列提供了在不同平台上, 使用带和不带 iowait 提升的调度实用程序(schedutil)进行的性能测试结果. 测试表明, 大多数真实世界的 I/O 工作负载不会受到 io 利用率问题的影响. 参见 [LWN, 2024/09/10, The trouble with iowait](https://lwn.net/Articles/989272). | v1 ☐☑✓ | [LORE v1,0/8](https://lore.kernel.org/all/20240905092645.2885200-1-christian.loehle@arm.com) | +| 2024/08/19 | Jens Axboe | [Split iowait into two states](https://lore.kernel.org/all/20240819154259.215504-1-axboe@kernel.dk) | 这组补丁集将 in_iowait 分为两个状态, 以便可以分别控制它们. 第一种状态是 "任务正在睡眠等待 I/O", 并希望在睡眠和唤醒延迟方面获得 cpufreq 的好处. 第二种状态是上述状态, 并且也会计入 iowait 统计数据中. 补丁 1~3 是准备补丁, 它们更改了 task_struct->nr_iowait 的类型, 并添加了帮助程序来操作 iowait 计数. 补丁 4 执行了实际的状态拆分. 参见 [LWN, 2024/09/10, The trouble with iowait](https://lwn.net/Articles/989272). | v6 ☐☑✓ | [LORE v6,0/4](https://lore.kernel.org/all/20240819154259.215504-1-axboe@kernel.dk) | +| 2024/09/05 | Christian Loehle | [cpufreq: cpuidle: Remove iowait behaviour](https://lore.kernel.org/all/20240905092645.2885200-1-christian.loehle@arm.com) | 从 Linux 内核的 cpufreq(CPU 频率调节)和 cpuidle(CPU 空闲)管理中移除基于 iowait(I/O 等待)的行为.
问题描述: 当前内核中存在一些基于 iowait 的启发式方法, 这些方法长期以来似乎难以改进. 随着 I/O 工作负载的变化, 这些启发式方法可以被移除, 而只影响基准测试. iowait 的定义本身很模糊, 它在内核代码中被广泛使用. 传统上它只用于块设备 I/O, 但内核代码中存在许多反例.
1. cpuidle 问题: 在 cpuidle 管理器中, 使用 iowait 任务的数量来确定 CPU 的交互性需求. 依赖于 iowait 进行 cpuidle 管理存在多个问题, 包括: 没有保证 iowait 任务会在相同的 CPU 上被唤醒. iowait 状态并不能说明空闲持续时间. iowait 状态并不总是意味着性能会受到延迟增加的影响.
2. cpufreq 问题: cpufreq 管理器长期以来基于 iowait 行为进行调节, 但这种方法存在问题, 如: 对于异步或多线程 I/O, 假设因为设备空闲而错过了块设备吞吐量是不正确的, 假设等待 I/O 的任务将来会发送 I/O 请求.
性能影响: 补丁系列提供了在不同平台上, 使用带和不带 iowait 提升的调度实用程序 (schedutil) 进行的性能测试结果. 测试表明, 大多数真实世界的 I/O 工作负载不会受到 io 利用率问题的影响. 参见 [LWN, 2024/09/10, The trouble with iowait](https://lwn.net/Articles/989272). | v1 ☐☑✓ | [LORE v1,0/8](https://lore.kernel.org/all/20240905092645.2885200-1-christian.loehle@arm.com) | @@ -5677,8 +5687,8 @@ schedtune 与 uclamp 都是由 ARM 公司的 Patrick Bellasi 主导开发. | 2019/08/22 | Patrick Bellasi | [Add utilization clamping support (CGroups API)](https://git.kernel.org/pub/scm/linux/kernel/git/torvalds/linux.git/log/?id=0413d7f33e60751570fd6c179546bde2f7d82dcb) | TASK util clamp(Android schedtune 的主线替代方案) | v14 ☑✓ 5.4-rc1 | [LORE v14,0/6](https://lore.kernel.org/all/20190822132811.31294-1-patrick.bellasi@arm.com) | | 2024/02/01 | Hongyan Xia | [uclamp sum aggregation](https://lore.kernel.org/all/cover.1706792708.git.hongyan.xia2@arm.com) | 本系列通过跟踪任务和 cfs_rq 中的 util_ag_uclip 信号来解决 UCLAMP 的一系列问题. 在任务级别, p->se.avg.util_ag_uclip 基本上是跟踪正常的 util_avg, 但在其 uclamp 最小值和最大值内被箝住. rq->cfs.avg.util_avg_uclamp 是所有钳制值的总和, 这暗示了该 rq 应该运行的频率和利用率. 该建议与虚拟机工作负载的 util_cuest 系列有一些相似之处, 因为它为请求它的任务带来了所需的性能, 而不是为任务份额不可预测的 rq 带来了所期望的性能. 当然这同样会改变 UCLAMP 的预期行为. | v2 ☐☑✓ | [LORE v2,0/7](https://lore.kernel.org/all/cover.1706792708.git.hongyan.xia2@arm.com)
*-*-*-*-*-*-*-*
[2024/06/24, LORE, 0/7](https://lore.kernel.org/all/cover.1719223916.git.hongyan.xia2@arm.com)
*-*-*-*-*-*-*-*
[2024/05/07, LORE v3,0/7](https://lore.kernel.org/all/cover.1715082714.git.hongyan.xia2@arm.com/)
*-*-*-*-*-*-*-*
[2025/03/04, LORE v2,0/8](https://lore.kernel.org/all/cover.1741091349.git.hongyan.xia2@arm.com/) | | 2023/11/22 | Vincent Guittot | [Rework interface between scheduler and schedutil governor](https://git.kernel.org/pub/scm/linux/kernel/git/torvalds/linux.git/log/?id=f12560779f9d734446508f3df17f5632e9aaa2c8) | 这个补丁集的目标是重新设计 Linux 内核中调度器 (scheduler) 与 schedutil 频率调节器 (governor) 之间的接口, 以提供更多的信息给后者, 从而让频率调节更加精确和高效. 在新的设计中, 调度器 (特别是 EAS) 不再需要猜测 governor 想要应用的余量 (headroom), 而是直接请求目标频率. 同时, governor 直接接收实际的利用率和新的最小、最大边界值, 以此选择目标频率, 不再需要处理调度器内部的细节, 包括了两个修改:
1. 在估计目标频率时考虑 ulamp 提示, 重新设计调度程序和 schedutil 治理器之间的接口 effective_cpu_util(), 以便将所有信息传递给 cpufreq schedutil. 使它能够根据实际的 CPU 利用率和 UCLAMP 边界 MIN/MAX 来选择目标频率, 而不是依赖调度器的利用率信号和 uclamp 性能提示的混合计算, 这种方法可能会导致信息丢失和不准确的假设.
2. I/O 等待提升的重构: 补丁改变了 iowait boost 的处理方式, 使其不再依赖于 uclamp_rq_util_with() 函数, 该函数原本用于将 I/O 等待提升限制在 uclamp(用户级 CPU 限制)范围之内. 取而代之的是, 补丁使用了在 sugov_get_util() 函数中已经计算出的 max 值来上限 iowait boost. | v4 ☐☑✓ v6.8-rc1 | [LORE v4,0/2](https://lore.kernel.org/all/20231122133904.446032-1-vincent.guittot@linaro.org) | -| 2021/12/16 | Qais Yousef | [uclamp_max vs schedutil fixes](https://git.kernel.org/pub/scm/linux/kernel/git/torvalds/linux.git/log/?id=d37aee9018e68b0d356195caefbb651910e0bbfa) | 解决 uclamp_max 与 schedutil 交互问题的两个补丁, 在使用 `sugov_update_single_{freq, perf}()` 的系统上, uclamp_max 功能由于 busy 过滤器的存在而变得无效. 该过滤器会在没有空闲时间的情况下忽略频率改变的请求, 而这在使用 uclamp 的系统上并不成立. 同样地, 被 uclamp_max 限制的 I/O 密集型任务仍能获得更高的频率, 因为 sugov_iowait_apply() 不会使用 uclamp_rq_util_with() 来钳制提升.
Yousef 提出的两个补丁解决了上述两个问题:
第一个补丁是关于在 uclamp 正在使用时忽略 “忙碌” 过滤器, 确保即使在系统繁忙时也能响应频率调整的请求.
第二个补丁修复了 I/O 等待提升逃逸 uclamp 限制的问题, 确保被 uclamp_max 约束的任务不会因 I/O 等待提升而获得超出限制的频率. | v1 ☐☑✓ v5.18-rc1 | [LORE v1,0/2](https://lore.kernel.org/all/20211216225320.2957053-1-qais.yousef@arm.com) | -| 2025/02/27 | Hongyan Xia | [sched/uclamp: Let each sched_class handle uclamp](https://lore.kernel.org/all/84441660bef0a5e67fd09dc3787178d0276dad31.1740664400.git.hongyan.xia2@arm.com) | 在解决延迟 dequeue 问题的同时, uclamp 与 cpufreq 不同步, 尤其是在 enqueue_task() 中.
例如, 当带有 uclamp_min 的任务通过 enqueue_task() 并更新 cpufreq 时, 其 uclamp_min 甚至不会在 cpufreq 更新中被考虑. 只有在 enqueue 之后, uclamp_min 才会被添加到 rq buckets, 而 cpufreq 只会在下一次更新时接收它. 这与旧版本的行为截然不同, 旧版本中的 uclamp 值会在 enqueue 时立即生效. 更糟糕的是,像 fair.c 这样的子类会在使用率发生变化时发布 cpufreq 更新. 如果一段时间内利用率没有变化, 新的 uclamp 值就会进一步延迟.
因此, 让每个 sched_class 在自己的类中处理 uclamp, 以防延迟 dequeue 需要进一步调整或未来可能出现类似的变化, 并确保 uclamp 在 enqueue 时立即生效. 在 fair.c 中, 我们重新使用了 util_est 的防护逻辑. | v1 ☐☑✓ | [LORE](https://lore.kernel.org/all/84441660bef0a5e67fd09dc3787178d0276dad31.1740664400.git.hongyan.xia2@arm.com) | +| 2021/12/16 | Qais Yousef | [uclamp_max vs schedutil fixes](https://git.kernel.org/pub/scm/linux/kernel/git/torvalds/linux.git/log/?id=d37aee9018e68b0d356195caefbb651910e0bbfa) | 解决 uclamp_max 与 schedutil 交互问题的两个补丁, 在使用 `sugov_update_single_{freq, perf}()` 的系统上, uclamp_max 功能由于 busy 过滤器的存在而变得无效. 该过滤器会在没有空闲时间的情况下忽略频率改变的请求, 而这在使用 uclamp 的系统上并不成立. 同样地, 被 uclamp_max 限制的 I/O 密集型任务仍能获得更高的频率, 因为 sugov_iowait_apply() 不会使用 uclamp_rq_util_with() 来钳制提升.
Yousef 提出的两个补丁解决了上述两个问题:
第一个补丁是关于在 uclamp 正在使用时忽略 “忙碌” 过滤器, 确保即使在系统繁忙时也能响应频率调整的请求.
第二个补丁修复了 I/O 等待提升逃逸 uclamp 限制的问题, 确保被 uclamp_max 约束的任务不会因 I/O 等待提升而获得超出限制的频率. | v1 ☐☑✓ v5.18-rc1 | [LORE v1,0/2](https://lore.kernel.org/all/20211216225320.2957053-1-qais.yousef@arm.com) | +| 2025/02/27 | Hongyan Xia | [sched/uclamp: Let each sched_class handle uclamp](https://lore.kernel.org/all/84441660bef0a5e67fd09dc3787178d0276dad31.1740664400.git.hongyan.xia2@arm.com) | 在解决延迟 dequeue 问题的同时, uclamp 与 cpufreq 不同步, 尤其是在 enqueue_task() 中.
例如, 当带有 uclamp_min 的任务通过 enqueue_task() 并更新 cpufreq 时, 其 uclamp_min 甚至不会在 cpufreq 更新中被考虑. 只有在 enqueue 之后, uclamp_min 才会被添加到 rq buckets, 而 cpufreq 只会在下一次更新时接收它. 这与旧版本的行为截然不同, 旧版本中的 uclamp 值会在 enqueue 时立即生效. 更糟糕的是,像 fair.c 这样的子类会在使用率发生变化时发布 cpufreq 更新. 如果一段时间内利用率没有变化, 新的 uclamp 值就会进一步延迟.
因此, 让每个 sched_class 在自己的类中处理 uclamp, 以防延迟 dequeue 需要进一步调整或未来可能出现类似的变化, 并确保 uclamp 在 enqueue 时立即生效. 在 fair.c 中, 我们重新使用了 util_est 的防护逻辑. | v1 ☐☑✓ | [LORE](https://lore.kernel.org/all/84441660bef0a5e67fd09dc3787178d0276dad31.1740664400.git.hongyan.xia2@arm.com) | | 2025/04/17 | Xuewen Yan | [sched: Align uclamp and util_est](https://lore.kernel.org/all/20250417043457.10632-1-xuewen.yan@unisoc.com) | TODO | v3 ☐☑✓ | [LORE v3,0/2](https://lore.kernel.org/all/20250417043457.10632-1-xuewen.yan@unisoc.com) | @@ -5835,6 +5845,7 @@ CONFIG_SCHED_CORE_CTL 的方案, 不光通过 do_isolation_work_cpu_stop() 支 | 2021/01/18 | Frederic Weisbecker & Peter Zijlstra 等 | [preempt: Tune preemption flavour on boot v4](https://lore.kernel.org/patchwork/cover/1366962) | 增加了 PREEMPT_DYNAMIC 配置选项, 允许内核启动阶段选择使用哪种抢占模式 (none, voluntary, full) 等, 同时支持 debugfs 中提供开关, 在系统运行过程中动态的修改这个配置. | RFC v4 ☑ 5.12-rc1 | [PatchWork](https://lkml.org/lkml/2021/1/18/672), [LORE](https://lore.kernel.org/all/20210118141223.123667-1-frederic@kernel.org) | | 2021/10/25 | Frederic Weisbecker | [arm64: Support dynamic preemption v2](https://lore.kernel.org/patchwork/cover/1366962) | 增加了 PREEMPT_DYNAMIC 配置选项, 允许内核启动阶段选择使用哪种抢占模式 (none, voluntary, full) 等, 同时支持 debugfs 中提供开关, 在系统运行过程中动态的修改这个配置. | RFC v4 ☑ 5.12-rc1 | [PatchWork](https://lkml.org/lkml/2021/10/25/500) | | 2023/11/07 | Ankur Arora | [Make the kernel preemptible](https://lore.kernel.org/all/20231107215742.363031-1-ankur.a.arora@oracle.com) | TODO | v1 ☐☑✓ | [LORE v1,0/86](https://lore.kernel.org/all/20231107215742.363031-1-ankur.a.arora@oracle.com) | +| 2023/11/07 | Shrikanth Hegde | [powerpc: enable dynamic preemption](https://git.kernel.org/pub/scm/linux/kernel/git/torvalds/linux.git/log/?id=6ad7751537e884c45b5340a4a24c25535f0d9c13) | [phoronix, 2025/05/26, POWER CPUs Ready With Dynamic Preemption For Linux 6.16](https://www.phoronix.com/news/POWER-Dynamic-Preempt-Linux-616) | v1 ☐☑✓ | [LORE v1,0/86](https://patch.msgid.link/20250210184334.567383-2-sshegde@linux.ibm.com) | | 日期 | LWN | 翻译 | @@ -5872,9 +5883,9 @@ CONFIG_SCHED_CORE_CTL 的方案, 不光通过 do_isolation_work_cpu_stop() 支 |:---:|:----:|:---:|:----:|:---------:|:----:| | 2023/11/07 | Ankur Arora | [Make the kernel preemptible](https://lore.kernel.org/all/20231107215742.363031-1-ankur.a.arora@oracle.com) | [New Set Of 86 Patches Overhaul The Linux Kernel's Preemption Model](https://www.phoronix.com/news/Overhaul-Linux-Preemptible-RFC) | v1 ☐☑✓ | [LORE v1,0/86](https://lore.kernel.org/all/20231107215742.363031-1-ankur.a.arora@oracle.com) | | 2024/02/12 | Ankur Arora | [PREEMPT_AUTO: support lazy rescheduling](https://lore.kernel.org/all/20240213055554.1802415-1-ankur.a.arora@oracle.com) | 本系列增加了一个新的调度模型 PREEMPT_AUTO, 它与 PREEMPT_DYNAMIC 一样, 允许在无 / 自愿 / 完全抢占模型之间进行动态切换. 然而, 与 PREEMPT_DYNAMIC 不同, 它不依赖于自愿模型的显式抢占点. 该系列基于托马斯在 [1](https://lore.kernel.org/lkml/87cyyfxd4k.ffs@tglx)、[2](https://lore.kernel.org/lkml/87led2wdj0.ffs@tglx) 和他的 [PoC](https://lore.kernel.org/lkml/87jzshhexi.ffs@tglx) 中概述的原始提议. 早期的 RFC 版本位于 [Make the kernel preemptible](https://lore.kernel.org/all/20231107215742.363031-1-ankur.a.arora@oracle.com).
PREEMPT_AUTO 的工作原理是始终启用 CONFIG_PREEMPTION(从而启用 PREEMPT_COUNT). 这意味着调度器总是可以安全地抢占. 这与 CONFIG_PREEMPT 相同. 有了这一点, 下一步是使重新调度策略取决于所选的调度模型. 目前, 调度程序使用一个需要重新调度的位(TIF_NEED_RESCHED) 来声明需要重新调度. PREEMPT_AUTO 通过添加一个额外的需求补救位 TIF_NEED_RESCHED_LAZY. | v1 ☐☑✓ | [LORE v1,0/30](https://lore.kernel.org/all/20240213055554.1802415-1-ankur.a.arora@oracle.com)
*-*-*-*-*-*-*-*
[LORE v2,00/35](https://lore.kernel.org/all/20240528003521.979836-1-ankur.a.arora@oracle.com) | -| 2024/10/07 | Peter Zijlstra | [sched: Lazy preemption muck](https://git.kernel.org/pub/scm/linux/kernel/git/torvalds/linux.git/log/?id=7c70cb94d29cd325fabe4a818c18613e3b9919a1) | 这组补丁的主要目的是为调度器添加懒惰抢占(lazy preemption)功能 CONFIG_PREEMPT_LAZY, 该模型通过将抢占请求延迟到 tick 边界来优化公平类抢占, 同时作为 RR/FIFO/DEADLINE 类的完全抢占. 懒惰抢占是一种优化技术, 旨在减少不必要的上下文切换, 提高系统的性能和响应时间. 引入 TIF_NEED_RESCHED_LAZY 标志, 用于标记任务需要懒惰抢占. 实现懒惰抢占模型, 允许任务在适当的时候进行抢占, 而不是立即进行. 处理懒惰抢占模式下的高延迟警告, 帮助调试和优化系统性能. 为 RCU 添加懒惰抢占支持, 确保在不同配置下的正确性和稳定性. 参见 [phoronix, 2024/11/06, Lazy Preemption "PREEMPT_LAZY" Slated To Land In Linux 6.13](https://www.phoronix.com/news/Linux-6.13-Lazy-Preemption) 和 [phoronix, 2024/11/19, Lazy Preemption Merged Along With Other Scheduler Improvements For Linux 6.13](https://www.phoronix.com/news/Linux-6.13-Sched-Lazy-Preempt). | v1 ☐☑✓ | [LORE v1,0/5](https://lore.kernel.org/all/20241007074609.447006177@infradead.org) | -| 2024/10/09 | Ankur Arora | [Lazy preemption bits](https://lore.kernel.org/all/20241009165411.3426937-1-ankur.a.arora@oracle.com) | 这组补丁的主要目的是为 Linux 内核添加 RCU(Read-Copy-Update)和调度器相关的懒惰抢占(Lazy preemption)功能. 懒惰抢占是一种优化技术, 旨在减少不必要的上下文切换, 提高系统的性能和响应时间. 包括 7 个补丁, 主要目标是: 为 RCU 添加懒惰抢占支持. 为调度器添加一些遗留的懒惰抢占功能, 解决与懒惰抢占相关的各种问题,如高延迟警告、配置限制等.
具体改动1. 添加 RCU 懒惰抢占支持: 限制 PREEMPT_RCU 配置, 以确保懒惰抢占的正确性.
2. 修复 rcu_all_qs() 的头文件保护, 以防止重复定义.
3. 处理 PREEMPT_RCU=n 且 PREEMPT_COUNT=y 时的静止状态
4. 将 PREEMPT_AUTO 重命名为 PREEMPT_LAZY, 以更好地反映其功能. | v1 ☐☑✓ | [LORE v1,0/7](https://lore.kernel.org/all/20241009165411.3426937-1-ankur.a.arora@oracle.com) | -| 2025/03/14 | Sebastian Andrzej Siewior | [preempt: Add a generic function to return the preemption string.](https://lore.kernel.org/all/20250314160810.2373416-1-bigeasy@linutronix.de) | 主要目的是向 Linux 内核添加调度器规范监视器(scheduler specification monitors). 以下是该系列补丁的一些关键点:
1. 引入调度器跟踪点: 为 RV(Runtime Verification) 任务模型添加了与调度相关的跟踪点(tracepoints).
2. 支持嵌套监视器: 通过在 sysfs 监控文件夹中创建一个名为 sched 的监控器来实现对其他监控器的支持. 这个 sched 监控器本身是一个空容器, 用于容纳其他监控器. 控制这个 sched 监控器(启用、禁用、设置反应器)可以同时控制所有嵌套的监控器.
3. 新增多种监控器: 增加了每任务(per-task)和每 CPU(per-cpu)监控器, 如 snroc, scpd, snep, sncid 等. 添加了 sco 和 tss 每 CPU 监控器. 该系列补丁旨在使 Linux 内核能够更好地支持运行时验证, 特别是针对调度器的行为进行更细致的监控和验证. 这包括但不限于提高对不同调度策略和抢占模式下行为的理解, 以及帮助开发者更容易地发现和调试与调度相关的问题. 此外, 它还使得能够区分不同的预抢占禁用情况成为可能, 这对于确保系统的实时性和响应性至关重要. | v4 ☐☑✓ | [LORE v4,0/9](https://lore.kernel.org/all/20250314160810.2373416-1-bigeasy@linutronix.de) | +| 2024/10/07 | Peter Zijlstra | [sched: Lazy preemption muck](https://git.kernel.org/pub/scm/linux/kernel/git/torvalds/linux.git/log/?id=7c70cb94d29cd325fabe4a818c18613e3b9919a1) | 这组补丁的主要目的是为调度器添加懒惰抢占 (lazy preemption) 功能 CONFIG_PREEMPT_LAZY, 该模型通过将抢占请求延迟到 tick 边界来优化公平类抢占, 同时作为 RR/FIFO/DEADLINE 类的完全抢占. 懒惰抢占是一种优化技术, 旨在减少不必要的上下文切换, 提高系统的性能和响应时间. 引入 TIF_NEED_RESCHED_LAZY 标志, 用于标记任务需要懒惰抢占. 实现懒惰抢占模型, 允许任务在适当的时候进行抢占, 而不是立即进行. 处理懒惰抢占模式下的高延迟警告, 帮助调试和优化系统性能. 为 RCU 添加懒惰抢占支持, 确保在不同配置下的正确性和稳定性. 参见 [phoronix, 2024/11/06, Lazy Preemption"PREEMPT_LAZY"Slated To Land In Linux 6.13](https://www.phoronix.com/news/Linux-6.13-Lazy-Preemption) 和 [phoronix, 2024/11/19, Lazy Preemption Merged Along With Other Scheduler Improvements For Linux 6.13](https://www.phoronix.com/news/Linux-6.13-Sched-Lazy-Preempt). | v1 ☐☑✓ | [LORE v1,0/5](https://lore.kernel.org/all/20241007074609.447006177@infradead.org) | +| 2024/10/09 | Ankur Arora | [Lazy preemption bits](https://lore.kernel.org/all/20241009165411.3426937-1-ankur.a.arora@oracle.com) | 这组补丁的主要目的是为 Linux 内核添加 RCU(Read-Copy-Update)和调度器相关的懒惰抢占 (Lazy preemption) 功能. 懒惰抢占是一种优化技术, 旨在减少不必要的上下文切换, 提高系统的性能和响应时间. 包括 7 个补丁, 主要目标是: 为 RCU 添加懒惰抢占支持. 为调度器添加一些遗留的懒惰抢占功能, 解决与懒惰抢占相关的各种问题,如高延迟警告、配置限制等.
具体改动 1. 添加 RCU 懒惰抢占支持: 限制 PREEMPT_RCU 配置, 以确保懒惰抢占的正确性.
2. 修复 rcu_all_qs() 的头文件保护, 以防止重复定义.
3. 处理 PREEMPT_RCU=n 且 PREEMPT_COUNT=y 时的静止状态
4. 将 PREEMPT_AUTO 重命名为 PREEMPT_LAZY, 以更好地反映其功能. | v1 ☐☑✓ | [LORE v1,0/7](https://lore.kernel.org/all/20241009165411.3426937-1-ankur.a.arora@oracle.com) | +| 2025/03/14 | Sebastian Andrzej Siewior | [preempt: Add a generic function to return the preemption string.](https://lore.kernel.org/all/20250314160810.2373416-1-bigeasy@linutronix.de) | 主要目的是向 Linux 内核添加调度器规范监视器 (scheduler specification monitors). 以下是该系列补丁的一些关键点:
1. 引入调度器跟踪点: 为 RV(Runtime Verification) 任务模型添加了与调度相关的跟踪点(tracepoints).
2. 支持嵌套监视器: 通过在 sysfs 监控文件夹中创建一个名为 sched 的监控器来实现对其他监控器的支持. 这个 sched 监控器本身是一个空容器, 用于容纳其他监控器. 控制这个 sched 监控器(启用、禁用、设置反应器) 可以同时控制所有嵌套的监控器.
3. 新增多种监控器: 增加了每任务 (per-task) 和每 CPU(per-cpu)监控器, 如 snroc, scpd, snep, sncid 等. 添加了 sco 和 tss 每 CPU 监控器. 该系列补丁旨在使 Linux 内核能够更好地支持运行时验证, 特别是针对调度器的行为进行更细致的监控和验证. 这包括但不限于提高对不同调度策略和抢占模式下行为的理解, 以及帮助开发者更容易地发现和调试与调度相关的问题. 此外, 它还使得能够区分不同的预抢占禁用情况成为可能, 这对于确保系统的实时性和响应性至关重要. | v4 ☐☑✓ | [LORE v4,0/9](https://lore.kernel.org/all/20250314160810.2373416-1-bigeasy@linutronix.de) | ## 8.2 NO_HZ @@ -6060,7 +6071,7 @@ CPU 的周期性调度, 和基于时间片的调度, 是要基于时钟中断来 然而, 对于调度时间粒度为微秒 (10^-6) 级别的精度来说, 这每秒 1000 次的粒度就显得太粗糙了. -2.6.25 引入了所谓的 **高清嘀哒 (High Resolution Tick)**, 以提供更精确的调度时钟中断.这个功能是基于 **高精度时钟 (High Resolution Timer) 框架**, 这个框架让内核支持可以提供纳秒级别的精度的硬件时钟 (将会在时钟子系统里讲). +2.6.25 引入了所谓的 ** 高清嘀哒 (High Resolution Tick)**, 以提供更精确的调度时钟中断.这个功能是基于 ** 高精度时钟 (High Resolution Timer) 框架 **, 这个框架让内核支持可以提供纳秒级别的精度的硬件时钟 (将会在时钟子系统里讲). ## 8.6 混乱的 RT 优先级 (RT 进程优先级管控) @@ -6145,7 +6156,7 @@ PREEMPT-RT PATCH 的核心思想是最小化内核中不可抢占部分的代码 | 2019/07/17 | Thomas Gleixner | [Kconfig: Introduce CONFIG_PREEMPT_RT](https://lore.kernel.org/all/alpine.DEB.2.21.1907172200190.1778@nanos.tec.linutronix.de) | 在抢占菜单中添加一个新条目 PREEMPT_RT, 以支持内核的实时支持. 该选项仅在体系结构支持时启用. 它选择抢占, 因为 RT 特性依赖于它. 为了实现将现有的 PREEMPT 选项重命名为 `PREEMPT_LL`, 该选项也会选择 PREEMPT. 没有功能上的改变. | v2 ☐☑✓ | [LORE v2,0/1](https://lore.kernel.org/all/alpine.DEB.2.21.1907172200190.1778@nanos.tec.linutronix.de) | | 2019/7/15 | Thomas Gleixner | [locking, sched: The PREEMPT-RT locking infrastructure](https://git.kernel.org/pub/scm/linux/kernel/git/torvalds/linux.git/log/?id=026659b9774e4c586baeb457557fcfc4e0ad144b) | PREEMPT_RT 的基础支持, 完成了锁语义的转换. 在支持 PREEMPT-RT 的内核中, 以下锁被基于 RT Mutex 的变体替换: mutex, ww_mutex, rw_semaphore, spinlock, rwlock. 但是 semaphores 没有被修改, 因为它并不严格提供 owner 的语义. raw_spinlocks 也没有被修改, 因为它被用在保护调度器、定时器和硬件访问中的低级别操作中. | v1 ☑ 5.3-rc1 | [LORE v5,00/72](https://lore.kernel.org/all/20210815203225.710392609@linutronix.de)
*-*-*-*-*-*-*-*
[LKML](https://lkml.org/lkml/2019/7/15/1386) | | 2022/12/19 | Krzysztof Kozlowski | [PM: Fixes for Realtime systems](https://lore.kernel.org/all/20221219151503.385816-1-krzysztof.kozlowski@linaro.org) | TODO | v2 ☐☑✓ | [LORE v2,0/5](https://lore.kernel.org/all/20221219151503.385816-1-krzysztof.kozlowski@linaro.org) | -| 2024/09/06 | Sebastian Andrzej Siewior | [Allow to enable PREEMPT_RT.](https://git.kernel.org/pub/scm/linux/kernel/git/torvalds/linux.git/log/?id=2638e4e6b18233d7ec54edb953f253ae9515bac2) | 允许在 x86、ARM64 和 RISC-V 架构上启用 PREEMPT_RT 选项. PREEMPT_RT 功能仅剩的最后一个障碍是围绕[非阻塞控制台/原子控制台支持](https://www.phoronix.com/news/Printk-Rework-v2-Linux) 的, 这项工作也已经计划合入 v6.12 了, 因此 PREEMPT_RT 可以正常打开了. 参见 phoronix 报道 [phoronix, 2024/09/06, Linux Very Close To Enabling Real-Time "PREEMPT_RT" Support](https://www.phoronix.com/news/Linux-PREEMPT_RT-Close-Patches) 和 [LWN, 2024/09/06, The realtime preemption end game — for real this time](https://lwn.net/Articles/989212), [phoronix, 2024/09/20, Real-Time "PREEMPT_RT" Support Merged For Linux 6.12](https://www.phoronix.com/news/Linux-6.12-Does-Real-Time). | v1 ☐☑✓ v6.12-rc1 | [LORE v1,0/3](https://lore.kernel.org/all/20240906111841.562402-1-bigeasy@linutronix.de)| +| 2024/09/06 | Sebastian Andrzej Siewior | [Allow to enable PREEMPT_RT.](https://git.kernel.org/pub/scm/linux/kernel/git/torvalds/linux.git/log/?id=2638e4e6b18233d7ec54edb953f253ae9515bac2) | 允许在 x86、ARM64 和 RISC-V 架构上启用 PREEMPT_RT 选项. PREEMPT_RT 功能仅剩的最后一个障碍是围绕[非阻塞控制台 / 原子控制台支持](https://www.phoronix.com/news/Printk-Rework-v2-Linux) 的, 这项工作也已经计划合入 v6.12 了, 因此 PREEMPT_RT 可以正常打开了. 参见 phoronix 报道 [phoronix, 2024/09/06, Linux Very Close To Enabling Real-Time"PREEMPT_RT"Support](https://www.phoronix.com/news/Linux-PREEMPT_RT-Close-Patches) 和 [LWN, 2024/09/06, The realtime preemption end game — for real this time](https://lwn.net/Articles/989212), [phoronix, 2024/09/20, Real-Time"PREEMPT_RT"Support Merged For Linux 6.12](https://www.phoronix.com/news/Linux-6.12-Does-Real-Time). | v1 ☐☑✓ v6.12-rc1 | [LORE v1,0/3](https://lore.kernel.org/all/20240906111841.562402-1-bigeasy@linutronix.de)| | 2024/11/22 | Huacai Chen | [LoongArch: Allow to enable PREEMPT_LAZY](https://git.kernel.org/pub/scm/linux/kernel/git/torvalds/linux.git/log/?id=704f06eeff65f898364981e6803e587cd941a3ed) | 参见 phoronix 报道 [phoronix, 2024/11/27, LoongArch Wires Up Real-Time Kernel Support & Lazy Preemption](https://www.phoronix.com/news/Linux-6.13-LoongArch) | v1 ☐☑✓ v6.13-rc1 | [LORE](https://git.kernel.org/pub/scm/linux/kernel/git/torvalds/linux.git/commit/?id=704f06eeff65) | @@ -6314,7 +6325,7 @@ PREEMPT-RT PATCH 的核心思想是最小化内核中不可抢占部分的代码 两年后, 2022 年, Vincent Guittot 在 Parth Shah 工作的基础上, 重提了 [Add latency_nice priority](https://lore.kernel.org/all/20220311161406.23497-1-vincent.guittot@linaro.org). -[latency-nice优先级补丁源码分析](https://blog.csdn.net/qq_23662505/article/details/123977540) +[latency-nice 优先级补丁源码分析](https://blog.csdn.net/qq_23662505/article/details/123977540) * 唤醒抢占时考虑 latency_nice @@ -6360,7 +6371,7 @@ enqueue_task_fair() | 2020/02/28 | Parth Shah | [Introduce per-task latency_nice for scheduler hints](https://lore.kernel.org/all/20200228090755.22829-1-parth@linux.ibm.com) | 20200228090755.22829-1-parth@linux.ibm.com | v5 ☐☑✓ | [LORE v4,0/4](https://lore.kernel.org/lkml/20200224085918.16955-1-parth@linux.ibm.com)
*-*-*-*-*-*-*-*
[LORE v5,0/4](https://lore.kernel.org/all/20200228090755.22829-1-parth@linux.ibm.com) | | 2020/05/07 | Parth Shah | [IDLE gating in presence of latency-sensitive tasks](https://lore.kernel.org/all/20200507133723.18325-1-parth@linux.ibm.com) | 20200507133723.18325-1-parth@linux.ibm.com | v1 ☐☑✓ | [LORE v1,0/4](https://lore.kernel.org/all/20200507133723.18325-1-parth@linux.ibm.com) | | 2022/09/16 | Vincent Guittot | [Add latency_nice priority](https://lore.kernel.org/all/20220311161406.23497-1-vincent.guittot@linaro.org) | 参见 [Improved response times with latency nice](https://lwn.net/Articles/887842). | v1 ☐☑✓ | [2022/03/11 LORE v1,0/6](https://lore.kernel.org/all/20220311161406.23497-1-vincent.guittot@linaro.org)
*-*-*-*-*-*-*-*
[2022/05/12 LORE v2,0/7](https://lore.kernel.org/all/20220512163534.2572-1-vincent.guittot@linaro.org)
*-*-*-*-*-*-*-*
[2022/09/09 LORE v3,0/8](https://lore.kernel.org/all/20220909130309.25458-1-vincent.guittot@linaro.org)
*-*-*-*-*-*-*-*
[2022/09/16 LORE v4,0/8](https://lore.kernel.org/all/20220916080305.29574-1-vincent.guittot@linaro.org)
*-*-*-*-*-*-*-*
[2022/09/25 LORE v5,0/8](https://lore.kernel.org/all/20220925143908.10846-1-vincent.guittot@linaro.org)
*-*-*-*-*-*-*-*
[2022/10/28 LORE v6,0/9](https://lore.kernel.org/all/20221028073637.31195-1-vincent.guittot@linaro.org)
*-*-*-*-*-*-*-*
[2022/10/28 LORE v7,0/9](https://lore.kernel.org/all/20221028093403.6673-1-vincent.guittot@linaro.org)
*-*-*-*-*-*-*-*
[2022/11/10 LORE v8,0/9](https://lore.kernel.org/all/20221110175009.18458-1-vincent.guittot@linaro.org)
*-*-*-*-*-*-*-*
[2022/11/15 LORE v9,0/9](https://lore.kernel.org/all/20221115171851.835-1-vincent.guittot@linaro.org)
*-*-*-*-*-*-*-*
[2023/01/13 LORE v10,0/9](https://lore.kernel.org/all/20230113141234.260128-1-vincent.guittot@linaro.org)
*-*-*-*-*-*-*-*
[2023/02/23 LORE v11,0/9](https://lore.kernel.org/all/20230223191041.577305-1-vincent.guittot@linaro.org)
*-*-*-*-*-*-*-*
[2023/02/24 LORE v12,0/8](https://lore.kernel.org/all/20230224093454.956298-1-vincent.guittot@linaro.org) | -| 2024/05/05 | fuyuanli | [sched: Introduce task_struct::latency_sensi_flag.](https://lore.kernel.org/all/20240505030615.GA5131@didi-ThinkCentre-M920t-N000) | 在 `local_bh_enable()->__local_bh_enable_ip()` 路径下, softirq 处理程序将在当前任务的上下文中执行. 但对于某些 对运行延迟敏感的任务, 我们希望它们不会花费额外的时间来执行 softirq. 额外时间来执行 softirq. 因此, 我们在 任务结构中引入了 latency_sensi_flag, 当设置为 1 时, 任务只会在 local_bh_enable_ip()中唤醒 softirq 守护进程.
在名为 A 和 B 的两台主机上进行了测试. 以最快速度同时向 B 中的一台服务器发送 udp 数据包. 数据包. 在 B 中, 这些数据流的 IRQ 被 flow 在 B 中, 这些数据流的 IRQ 被 flow director 绑定到 CPU 0, 因此 CPU 0 上总有一个被触发的 net_rx softirq. 在 B 中启动一个测试程序, 该程序也绑定到 CPU 0, 并在 B 中不断调用 sendto() 不断循环调用 sendto(). 使用 perf 采样, 结果显示 测试程序约 25% 的运行时间用于执行 sendto()中的 local_bh_enable(), 但在设置了 latency_sensi_flag为1后, 这一比例降至0.5%. | v1 ☐☑✓ | [LORE](https://lore.kernel.org/all/20240505030615.GA5131@didi-ThinkCentre-M920t-N000) | +| 2024/05/05 | fuyuanli | [sched: Introduce task_struct::latency_sensi_flag.](https://lore.kernel.org/all/20240505030615.GA5131@didi-ThinkCentre-M920t-N000) | 在 `local_bh_enable()->__local_bh_enable_ip()` 路径下, softirq 处理程序将在当前任务的上下文中执行. 但对于某些 对运行延迟敏感的任务, 我们希望它们不会花费额外的时间来执行 softirq. 额外时间来执行 softirq. 因此, 我们在 任务结构中引入了 latency_sensi_flag, 当设置为 1 时, 任务只会在 local_bh_enable_ip()中唤醒 softirq 守护进程.
在名为 A 和 B 的两台主机上进行了测试. 以最快速度同时向 B 中的一台服务器发送 udp 数据包. 数据包. 在 B 中, 这些数据流的 IRQ 被 flow 在 B 中, 这些数据流的 IRQ 被 flow director 绑定到 CPU 0, 因此 CPU 0 上总有一个被触发的 net_rx softirq. 在 B 中启动一个测试程序, 该程序也绑定到 CPU 0, 并在 B 中不断调用 sendto() 不断循环调用 sendto(). 使用 perf 采样, 结果显示 测试程序约 25% 的运行时间用于执行 sendto()中的 local_bh_enable(), 但在设置了 latency_sensi_flag 为 1 后, 这一比例降至 0.5%. | v1 ☐☑✓ | [LORE](https://lore.kernel.org/all/20240505030615.GA5131@didi-ThinkCentre-M920t-N000) | @@ -6417,7 +6428,7 @@ EEVDF 的核心理念就可以从它的名字中看出, 它将首先运行那些 | 2023/04/01 | Xi Wang | [Morphing CFS into FDL, The Fair Deadline Scheduling Class](https://lore.kernel.org/all/20230401230556.2781604-1-xii@google.com) | TODO | v1 ☐☑✓ | [LORE v1,0/1](https://lore.kernel.org/all/20230401230556.2781604-1-xii@google.com) | | 2023/03/28 | Peter Zijlstra | [sched: EEVDF using latency-nice](https://lore.kernel.org/all/20230328092622.062917921@infradead.org) | [EEVDF Scheduler Patches Updated For The Linux Kernel](https://www.phoronix.com/news/Linux-EEVDF-EO-March) | v1 ☐☑✓ | [LORE 00/10](https://lore.kernel.org/all/20230306132521.968182689@infradead.org)
*-*-*-*-*-*-*-*
[LORE v1,0/17](https://lore.kernel.org/all/20230328092622.062917921@infradead.org) | | 2023/07/19 | Peter Zijlstra | [sched: EEVDF and latency-nice and/or slice-attr](https://git.kernel.org/pub/scm/linux/kernel/git/torvalds/linux.git/log/?id=b41bbb33cf75d251a816768580819aec17be718d) | [Updated EEVDF Linux CPU Scheduler Patches Posted That Plan To Replace CFS](https://www.phoronix.com/news/EEVDF-Scheduler-Linux-EO-May) 以及 [EEVDF Scheduler May Be Ready For Landing With Linux 6.6](https://www.phoronix.com/news/Linux-6.6-EEVDF-Likely), [EEVDF Scheduler Merged For Linux 6.6, Intel Hybrid Cluster Scheduling Re-Introduced](https://www.phoronix.com/news/Linux-6.6-EEVDF-Merged) | v1 ☐☑✓ 6.6-rc1 | [LORE v1,0/15](https://lore.kernel.org/all/20230531115839.089944915@infradead.org), [CGIT](https://git.kernel.org/pub/scm/linux/kernel/git/torvalds/linux.git/log/?id=d07f09a1f99cabbc86bc5c97d962eb8a466106b5) | -| 2024/01/11 | Ze Gao | [sched/eevdf: Use tunable knob sysctl_sched_base_slice as explicit time quanta](https://lore.kernel.org/all/20240111115745.62813-2-zegao@tencent.com) | 这组补丁使用可调的内核参数 `sysctl_sched_base_slice` 作为显式的时间量子(time quanta), 可以更自由地选择请求长度范围, 同时避免过度或不足调度的问题, 以改善调度程序的性能和公平性.
EEVDF 的实现忽略了论文中时间量子(time quanta)概念在 EEVDF 中的作用, 为了避免不公平的调度, 时间量子(q)和最大用户请求(r_max)都不应过大. 为了提高吞吐量, 目前的实现 [Re: schbench v1.0](https://lore.kernel.org/all/20230420150537.GC4253@hirez.programming.kicks-ass.net/T/#u) 选择在每个请求边界(即一旦一个请求被满足)进行 tick preemtion 的抢占式调度, 这意味着实际上没有定义时间量子. 当允许自定义切片时, 由于没有明确的时间量子, 可能会导致失去很多调度机会来维护公平性和响应性, 并可能导致意外的不公平性和延迟. 例如, 两个具有相同权重的 CPU 密集型进程绑定到同一个 CPU 上时, 如果没有时间量子, 调度的滞后界限将仅取决于用户请求的切片分布. 即使用自定义时间片可能会损害公平性. 但是, 如果让时间量子等于每个请求的长度 sysctl_sched_base_slice, 那么实际上会创建一个隐含的时间量子, 可以更好地控制分配的准确性和平均延迟, 这在当前情况下工作得很好. 此外, 通过调整这个参数, 可以在吞吐量和延迟之间找到更好的平衡. | v1 ☐☑✓ | [LORE](https://lore.kernel.org/all/20240111115745.62813-2-zegao@tencent.com) | +| 2024/01/11 | Ze Gao | [sched/eevdf: Use tunable knob sysctl_sched_base_slice as explicit time quanta](https://lore.kernel.org/all/20240111115745.62813-2-zegao@tencent.com) | 这组补丁使用可调的内核参数 `sysctl_sched_base_slice` 作为显式的时间量子 (time quanta), 可以更自由地选择请求长度范围, 同时避免过度或不足调度的问题, 以改善调度程序的性能和公平性.
EEVDF 的实现忽略了论文中时间量子(time quanta) 概念在 EEVDF 中的作用, 为了避免不公平的调度, 时间量子 (q) 和最大用户请求 (r_max) 都不应过大. 为了提高吞吐量, 目前的实现 [Re: schbench v1.0](https://lore.kernel.org/all/20230420150537.GC4253@hirez.programming.kicks-ass.net/T/#u) 选择在每个请求边界 (即一旦一个请求被满足) 进行 tick preemtion 的抢占式调度, 这意味着实际上没有定义时间量子. 当允许自定义切片时, 由于没有明确的时间量子, 可能会导致失去很多调度机会来维护公平性和响应性, 并可能导致意外的不公平性和延迟. 例如, 两个具有相同权重的 CPU 密集型进程绑定到同一个 CPU 上时, 如果没有时间量子, 调度的滞后界限将仅取决于用户请求的切片分布. 即使用自定义时间片可能会损害公平性. 但是, 如果让时间量子等于每个请求的长度 sysctl_sched_base_slice, 那么实际上会创建一个隐含的时间量子, 可以更好地控制分配的准确性和平均延迟, 这在当前情况下工作得很好. 此外, 通过调整这个参数, 可以在吞吐量和延迟之间找到更好的平衡. | v1 ☐☑✓ | [LORE](https://lore.kernel.org/all/20240111115745.62813-2-zegao@tencent.com) | #### 8.9.2.2 公式推导与实现 @@ -6437,7 +6448,7 @@ $\sum \limits_{0}^{n}lag_{i} = \sum \limits_{0}^{n}S - s_i = \sum \limits_{0}^{n $V = \frac{\sum \limits_{0}^{n}w_{i} \times v_{i}}{\sum \limits_{0}^{n}w_{i}} = \frac{\sum \limits_{0}^{n}w_{i} \times v_{i}}{W} = \frac{\sum \limits_{0}^{n}w_{i} \times (v_{i} - v_{0}+ v_{0})}{W} = \frac{\sum \limits_{0}^{n}w_{i} \times (v_{i} - v_{0})}{W} + v_{0}$ -那么如何在原有的额CFS 实现中表示出这些值呢 ?, 参见内核注释代码 [Compute virtual time from the per-task service numbers](https://elixir.bootlin.com/linux/v6.6/source/kernel/sched/fair.c#L581). +那么如何在原有的额 CFS 实现中表示出这些值呢 ?, 参见内核注释代码 [Compute virtual time from the per-task service numbers](https://elixir.bootlin.com/linux/v6.6/source/kernel/sched/fair.c#L581). $v_{0} = min\_vruntime_{cfs\_rq}$ @@ -6551,9 +6562,10 @@ $deadline_{se} = vruntime_{se} + slice \times \frac{weight_0}{weight_{se}}$ | 时间 | 作者 | 特性 | 描述 | 是否合入主线 | 链接 | |:---:|:----:|:---:|:----:|:---------:|:----:| -| 2025/04/18 | Vincent Guittot | [sched/fair: Increase max lag clamping](https://lore.kernel.org/all/20250418151225.3006867-1-vincent.guittot@linaro.org) | 这个补丁旨在修正 `sched_entity` 的滞后(lag) 限制问题. 当前 lag 上限为 `TICK_NSEC` 或任务时间片的两倍, 但该限制在任务设置了较大自定义时间片(如 100ms) 时显得不足, 导致其他任务可能在等待时积累正 lag, 从而在出队时被不当地截断.
补丁将 lag 的上限改为统一使用系统允许的最大时间片( `SCHED_SLICE_MAX`) , 并定义了最小时间片( `SCHED_SLICE_MIN`) 用于约束设置. 此举确保了调度公平性, 避免因 lag 截断造成信息丢失.
代码修改包括更新 `update_entity_lag( ) ` 中的 lag 限制逻辑, 并在 `__setparam_fair( ) ` 中使用统一的宏定义. | v1 ☐☑✓ | [LORE](https://lore.kernel.org/all/20250418151225.3006867-1-vincent.guittot@linaro.org) | -| 2025/06/13 | Vincent Guittot | [sched/fair: Manage lag and run to parity with different slices](https://lore.kernel.org/all/20250613140514.2781138-1-vincent.guittot@linaro.org) | 旨在改进 Linux 调度器(sched/fair) 中任务 lag 的管理和公平性机制. 核心内容包括:
补丁2: 基于 Peter Zijlstra 的建议, 通过追踪入队任务的最大 slice 来限制出队任务的 lag.
补丁3: 修改当前任务 slice 的保护机制, 考虑短 slice 任务等待运行的情况.
补丁4: 扩展 slice 保护机制至 NO_RUN_TO_PARITY 场景, 确保定期设置 resched, 且运行任务至少运行 0. 7ms, 除非触发 PREEMPT_SHORT. | v1 ☐☑✓ | [2025/06/13, LORE v1, 0/4](https://lore.kernel.org/all/20250613140514.2781138-1-vincent.guittot@linaro.org) | -| 2025/06/19 | Huang Shijie | [sched/fair: set the se->vlag strictly following the paper](https://lore.kernel.org/all/20250619031942.25474-1-shijie@os.amperecomputing.com) | 修正 `se-> vlag` 的计算逻辑, 使其严格符合论文中的规定: `-r_max < lag < max( r_max, q) `. 当前代码中, `vlag` 被限制在 `[-max(r_max, q), max(r_max, q)] `, 偏离了原始设计.
为此, 补丁引入了 `limit_hi`、`limit_lo` 和 `r_max` 变量, 分别表示上限、下限与最大延迟基准值, 从而实现更精确的 `vlag` 限制. 修改后, `vlag` 被正确限制在 `[ -limit_lo, limit_hi] ` 范围内.
该修改提升了调度器公平性计算的准确性, 并通过了相关测试. | v1 ☐☑✓ | [LORE](https://lore.kernel.org/all/20250619031942.25474-1-shijie@os.amperecomputing.com) | +| 2025/04/18 | Vincent Guittot | [sched/fair: Increase max lag clamping](https://lore.kernel.org/all/20250418151225.3006867-1-vincent.guittot@linaro.org) | 这个补丁旨在修正 `sched_entity` 的滞后(lag) 限制问题. 当前 lag 上限为 `TICK_NSEC` 或任务时间片的两倍, 但该限制在任务设置了较大自定义时间片(如 100ms) 时显得不足, 导致其他任务可能在等待时积累正 lag, 从而在出队时被不当地截断.
补丁将 lag 的上限改为统一使用系统允许的最大时间片(`SCHED_SLICE_MAX`) , 并定义了最小时间片(`SCHED_SLICE_MIN`) 用于约束设置. 此举确保了调度公平性, 避免因 lag 截断造成信息丢失.
代码修改包括更新 `update_entity_lag() ` 中的 lag 限制逻辑, 并在 `__setparam_fair() ` 中使用统一的宏定义. | v1 ☐☑✓ | [LORE](https://lore.kernel.org/all/20250418151225.3006867-1-vincent.guittot@linaro.org) | +| 2025/06/13 | Vincent Guittot | [sched/fair: Manage lag and run to parity with different slices](https://lore.kernel.org/all/20250613140514.2781138-1-vincent.guittot@linaro.org) | 旨在改进 Linux 调度器(sched/fair) 中任务 lag 的管理和公平性机制. 核心内容包括:
补丁 2: 基于 Peter Zijlstra 的建议, 通过追踪入队任务的最大 slice 来限制出队任务的 lag.
补丁 3: 修改当前任务 slice 的保护机制, 考虑短 slice 任务等待运行的情况.
补丁 4: 扩展 slice 保护机制至 NO_RUN_TO_PARITY 场景, 确保定期设置 resched, 且运行任务至少运行 0. 7ms, 除非触发 PREEMPT_SHORT. | v1 ☐☑✓ | [2025/06/13, LORE v1, 0/4](https://lore.kernel.org/all/20250613140514.2781138-1-vincent.guittot@linaro.org)
*-*-*-*-*-*-*-*
[2025/07/04, LORE v2, 0/6](https://lore.kernel.org/all/20250704143612.998419-1-vincent.guittot@linaro.org)
*-*-*-*-*-*-*-*
[2025/07/08, LORE v3, 0/6](https://lore.kernel.org/all/20250708165630.1948751-1-vincent.guittot@linaro.org) | +| 2025/06/19 | Huang Shijie | [sched/fair: set the se->vlag strictly following the paper](https://lore.kernel.org/all/20250619031942.25474-1-shijie@os.amperecomputing.com) | 修正 `se-> vlag` 的计算逻辑, 使其严格符合论文中的规定: `-r_max 为此, 补丁引入了 `limit_hi`、`limit_lo` 和 `r_max` 变量, 分别表示上限、下限与最大延迟基准值, 从而实现更精确的 `vlag` 限制. 修改后, `vlag` 被正确限制在 `[-limit_lo, limit_hi] ` 范围内.
该修改提升了调度器公平性计算的准确性, 并通过了相关测试. | v1 ☐☑✓ | [LORE](https://lore.kernel.org/all/20250619031942.25474-1-shijie@os.amperecomputing.com) | +| 2025/07/14 | Mel Gorman | [sched/fair: Enable scheduler feature NEXT_BUDDY](https://lore.kernel.org/all/20250714134429.19624-2-mgorman@techsingularity.net) | 这组补丁旨在重新启用并改进 CFS 中的 NEXT_BUDDY 调度特性, 以更好地契合 EEVDF 调度策略目标. 新增 PREEMPT_BUDDY 策略判断逻辑, 并调整唤醒抢占流程. 此改进有助于提高缓存亲和性和响应速度.
1. 补丁 1 启用了 NEXT_BUDDY 功能, 该功能曾在早期内核版本中因公平性问题被禁用.
2. 补丁 2 对其进行了重新实现, 使其在任务唤醒时基于 deadline 和 eligibility 做出调度决策.
补丁对同步唤醒(WF_SYNC) 和其他类型唤醒分别处理: 前者视作建议而非硬性规则, 后者在 wakee deadline 更早且可运行时触发抢占.
测试结果显示, 在 dbench4 中吞吐量和执行时间均有提升, 特别是在高并发场景下; 公平性表现有波动但仍可接受. hackbench 测试结果显示影响较小, 大部分中性或轻微下降. 整体目标是在不影响其他负载的前提下提升特定应用场景的性能. | v1 ☐☑✓ | [2025/07/14, LORE v1, 0/2](https://lore.kernel.org/all/20250714134429.19624-2-mgorman@techsingularity.net) | ### 8.9.4 EEVDF 如何处理睡眠唤醒的任务 @@ -6566,22 +6578,22 @@ $deadline_{se} = vruntime_{se} + slice \times \frac{weight_0}{weight_{se}}$ | 2023/10/23 | Daniel Jordan | [sched/fair: Preserve PLACE_DEADLINE_INITIAL deadline](https://lore.kernel.org/all/20231023154319.102437-1-daniel.m.jordan@oracle.com) | TODO | v3 ☐☑✓ | [LORE](https://lore.kernel.org/all/20231023154319.102437-1-daniel.m.jordan@oracle.com) | | 2023/09/15 | peterz@infradead.org | [sched/eevdf: sched_attr::sched_runtime slice hint](https://git.kernel.org/pub/scm/linux/kernel/git/torvalds/linux.git/log/?id=650cad561cce04b62a8c8e0446b685ef171bc3bb) | TODO | v1 ☐☑✓ | [LORE v1,0/2](https://lore.kernel.org/all/20230915124354.416936110@noisy.programming.kicks-ass.net) | | 2023/11/04 | Yiwei Lin | [sched/fair: Track current se's EEVDF parameters](https://lore.kernel.org/all/20231104090054.124945-1-s921975628@gmail.com) | TODO | v4 ☐☑✓ | [LORE v4,0/1](https://lore.kernel.org/all/20231104090054.124945-1-s921975628@gmail.com) | -| 2023/09/19 | Ingo Molnar | [sched/fair: Do not wakeup-preempt same-prio SCHED_OTHER tasks](https://git.kernel.org/pub/scm/linux/kernel/git/torvalds/linux.git/commit/?id=147f3efaa24182a21706bca15eab2f3f4630b5fe) | Mike 和其他人注意到, EEVDF 确实喜欢过多地安排时间--这确实会造成[许多基准测试/工作负载的性能](https://lore.kernel.org/all/202308101628.7af4631a-oliver.sang@intel.com) 的劣化. 特别是, 似乎导致过度调度的原因是, 当滞后 lag 与请求/切片的顺序相同(或更大)时, 放置不仅会导致任务被放置在当前任务的左边, 而且最后期限比当前任务小, 这会导致立即先发制人, 从另外一个角度上讲, 就是这些任务被过多的安排了时间片. Mike 建议, 只要它有资格运行, 我们就坚持选择 "current", 让它不间断地运行, 直到它与包持平. 引入 sched_feature RUN_TO_PARITY 的实现, 标记 current 的任务的 `curr->vlag = curr->deadline`, 只允许它用尽最初的请求来增强. | v1 ☐☑✓ 6.6-rc1 | [LORE](https://lore.kernel.org/all/ZQljoiSBhZLEFI/G@gmail.com) | -| 2023/11/07 | Abel Wu | [sched/eevdf: Optimize reweight and pick](https://git.kernel.org/pub/scm/linux/kernel/git/torvalds/linux.git/log/?id=ee4373dc902c0a403dd084b254ce70a78f95466f) | 1. 解决了重新加权时vruntime无法调整的问题 !0-tag 滞点.
2. 按照虚拟截止日期对任务时间线进行排序, 并将 min_vruntime 保留在增强树中, 这样实现了一种基于最后期限排序的最左侧缓存红黑树( deadline-sorted leftmost-cached rbtree). 通过在 best_left 上进行回退搜索, 可以避免在最坏的情况下会使成本翻倍的问题.
3. 充分利用缓存的最左边节点, 可以达成 O(1) 复杂度的 PICK TASK.
4. 最后一个补丁是 EEVDF 的统计维测补丁, 不用于 UPSTREAM. | v1 ☐☑✓ v6.8-rc1 | [LORE v1,0/4](https://lore.kernel.org/all/20231107090510.71322-1-wuyun.abel@bytedance.com) | -| 2024/04/05 | Peter Zijlstra | [sched/fair: Complete EEVDF](https://lore.kernel.org/all/20240405102754.435410987@infradead.org) | 这是 EEVDF 补丁集的最终版本. 补丁集中包含了大量错误修复以及一些新的特性, 具体包括:
1. 分割大型的延迟卸载(delay-dequeue)补丁: 补丁集中的一个大型补丁被拆分成了多个较小的补丁, 以便更好地理解和维护.
2. CFS 带宽测试与修复: CFS (Completely Fair Scheduler) 带宽相关的功能进行了测试并修复了一些问题.
3. PLACE_REL_DEADLINE: 引入了一个新特性, 可以在任务迁移时保留相对截止时间.
4. SCHED_BATCH 等同于 RESPECT_SLICE: SCHED_BATCH 任务现在等同于 RESPECT_SLICE, 这意味着批处理任务将受到切片限制.
5. min_slice 在控制组层级传播: 最小切片(min_slice)的设置现在会在控制组(cgroup)层级中向上传播.
6. CLOCK_THREAD_DVFS_ID: 引入了一个新的线程时钟标识符(CLOCK_THREAD_DVFS_ID), 这可能与动态电压和频率缩放(DVFS)相关. 参见 [New EEVDF Linux Scheduler Patches Make It Functionally "Complete"](https://www.phoronix.com/news/Linux-Completing-EEVDF-Sched) 以及 [Completing the EEVDF scheduler](https://lwn.net/Articles/969062), [phoronix, 2024/07/27, EEVDF Scheduler On The Verge Of Being "Complete"](https://www.phoronix.com/news/Linux-Completing-EEVDF). | v1 ☐☑✓ | [2024/04/05, LORE v1,0/10](https://lore.kernel.org/all/20240405102754.435410987@infradead.org)
*-*-*-*-*-*-*-*
[2024/07/27, LORE 02,00/24](https://lore.kernel.org/all/20240727102732.960974693@infradead.org) | +| 2023/09/19 | Ingo Molnar | [sched/fair: Do not wakeup-preempt same-prio SCHED_OTHER tasks](https://git.kernel.org/pub/scm/linux/kernel/git/torvalds/linux.git/commit/?id=147f3efaa24182a21706bca15eab2f3f4630b5fe) | Mike 和其他人注意到, EEVDF 确实喜欢过多地安排时间 -- 这确实会造成 [许多基准测试 / 工作负载的性能](https://lore.kernel.org/all/202308101628.7af4631a-oliver.sang@intel.com) 的劣化. 特别是, 似乎导致过度调度的原因是, 当滞后 lag 与请求 / 切片的顺序相同(或更大) 时, 放置不仅会导致任务被放置在当前任务的左边, 而且最后期限比当前任务小, 这会导致立即先发制人, 从另外一个角度上讲, 就是这些任务被过多的安排了时间片. Mike 建议, 只要它有资格运行, 我们就坚持选择 "current", 让它不间断地运行, 直到它与包持平. 引入 sched_feature RUN_TO_PARITY 的实现, 标记 current 的任务的 `curr->vlag = curr->deadline`, 只允许它用尽最初的请求来增强. | v1 ☐☑✓ 6.6-rc1 | [LORE](https://lore.kernel.org/all/ZQljoiSBhZLEFI/G@gmail.com) | +| 2023/11/07 | Abel Wu | [sched/eevdf: Optimize reweight and pick](https://git.kernel.org/pub/scm/linux/kernel/git/torvalds/linux.git/log/?id=ee4373dc902c0a403dd084b254ce70a78f95466f) | 1. 解决了重新加权时 vruntime 无法调整的问题 !0-tag 滞点.
2. 按照虚拟截止日期对任务时间线进行排序, 并将 min_vruntime 保留在增强树中, 这样实现了一种基于最后期限排序的最左侧缓存红黑树(deadline-sorted leftmost-cached rbtree). 通过在 best_left 上进行回退搜索, 可以避免在最坏的情况下会使成本翻倍的问题.
3. 充分利用缓存的最左边节点, 可以达成 O(1) 复杂度的 PICK TASK.
4. 最后一个补丁是 EEVDF 的统计维测补丁, 不用于 UPSTREAM. | v1 ☐☑✓ v6.8-rc1 | [LORE v1,0/4](https://lore.kernel.org/all/20231107090510.71322-1-wuyun.abel@bytedance.com) | +| 2024/04/05 | Peter Zijlstra | [sched/fair: Complete EEVDF](https://lore.kernel.org/all/20240405102754.435410987@infradead.org) | 这是 EEVDF 补丁集的最终版本. 补丁集中包含了大量错误修复以及一些新的特性, 具体包括:
1. 分割大型的延迟卸载 (delay-dequeue) 补丁: 补丁集中的一个大型补丁被拆分成了多个较小的补丁, 以便更好地理解和维护.
2. CFS 带宽测试与修复: CFS (Completely Fair Scheduler) 带宽相关的功能进行了测试并修复了一些问题.
3. PLACE_REL_DEADLINE: 引入了一个新特性, 可以在任务迁移时保留相对截止时间.
4. SCHED_BATCH 等同于 RESPECT_SLICE: SCHED_BATCH 任务现在等同于 RESPECT_SLICE, 这意味着批处理任务将受到切片限制.
5. min_slice 在控制组层级传播: 最小切片 (min_slice) 的设置现在会在控制组 (cgroup) 层级中向上传播.
6. CLOCK_THREAD_DVFS_ID: 引入了一个新的线程时钟标识符 (CLOCK_THREAD_DVFS_ID), 这可能与动态电压和频率缩放(DVFS) 相关. 参见 [New EEVDF Linux Scheduler Patches Make It Functionally"Complete"](https://www.phoronix.com/news/Linux-Completing-EEVDF-Sched) 以及 [Completing the EEVDF scheduler](https://lwn.net/Articles/969062), [phoronix, 2024/07/27, EEVDF Scheduler On The Verge Of Being"Complete"](https://www.phoronix.com/news/Linux-Completing-EEVDF). | v1 ☐☑✓ | [2024/04/05, LORE v1,0/10](https://lore.kernel.org/all/20240405102754.435410987@infradead.org)
*-*-*-*-*-*-*-*
[2024/07/27, LORE v2,00/24](https://lore.kernel.org/all/20240727102732.960974693@infradead.org) | | 2024/01/11 | Ze Gao | [sched/eevdf: Use tunable knob sysctl_sched_base_slice as explicit time quanta](https://lore.kernel.org/all/20240111115745.62813-2-zegao@tencent.com) | TODO | v1 ☐☑✓ | [LORE](https://lore.kernel.org/all/20240111115745.62813-2-zegao@tencent.com) | | 2023/09/05 | Mathieu Desnoyers | [sched/eevdf: Rate limit task migration](https://lore.kernel.org/all/20230905171105.1005672-1-mathieu.desnoyers@efficios.com) | 实现任务迁移速率限制, 以加快触发频繁迁移的工作负载模式, 如 hackbbench. 第一个补丁 [sched: Rate limit migrations to 1 per 2ms per task](https://lore.kernel.org/lkml/20230905171105.1005672-2-mathieu.desnoyers@efficios.com) 实现了一个简单的速率限制, 即每 2ms 迁移一次. 第二个补丁 [sched: Implement adaptative rate limiting of task migrations](https://lore.kernel.org/lkml/20230905171105.1005672-3-mathieu.desnoyers@efficios.com) 实现了自适应任务迁移速率限制. | v1 ☐☑✓ | [LORE v1,0/2](https://lore.kernel.org/all/20230905171105.1005672-1-mathieu.desnoyers@efficios.com) | | 2024/02/28 | Tobias Huschle | [sched/eevdf: avoid task starvation in cgroups](https://lore.kernel.org/all/20240228161023.14310-1-huschle@linux.ibm.com) | TODO | v1 ☐☑✓ | [LORE](https://lore.kernel.org/all/20240228161023.14310-1-huschle@linux.ibm.com) | | 2024/05/24 | Chunxin Zang | [sched/fair: Reschedule the cfs_rq when current is ineligible](https://lore.kernel.org/all/20240524134011.270861-1-spring.cxz@gmail.com) | 作者发现有些任务运行了足够长的时间, 已经成为非法任务, 但它们仍未释放 CPU. 这会增加其他进程的调度延迟. 因此, 作者尝试在 wakeup_preempt 和 entity_tick 中检查当前进程, 如果是非法进程, 则重新调度该 cfs 队列. 当启用 RUN_TO_PARITY 时, 这一修改可以将调度延迟减少约 30%. | v1 ☐☑✓ | [LORE](https://lore.kernel.org/all/20240524134011.270861-1-spring.cxz@gmail.com) | -| 2024/02/28 | Tobias Huschle | [sched/eevdf: sched feature to dismiss lag on wakeup](https://lore.kernel.org/all/20240228161018.14253-1-huschle@linux.ibm.com) | 旨在任务被唤醒时忽略其之前的延迟(lag).
背景: 之前的CFS(Completely Fair Scheduler)调度器通过在任务唤醒时从其虚拟运行时间(vruntime)中减去一定值, 增加了任务立即获得运行时间的机会. 这种特性被某些组件, 如 vhost, 用来确保特定的 kworker 在被唤醒后能够立即被调度执行. 然而, EEVDF 调度器目前并不支持这种行为.
问题: 在EEVDF调度器中, 如果一个被唤醒的实体带有之前执行的负延迟, 它将不得不等待当前时间片结束, 这可能会对期望立即执行的进程的性能产生负面影响.
提议的解决方案: Tobias 提出了实现 用于重新加入实体, 该策略忽略之前执行的延迟, 并允许被唤醒的任务立即运行(如果EEVDF没有认为其他实体更值得调度).
实现细节: 为了确保被唤醒的任务能够实际运行, vruntime 额外减去了 1. 这虽然不是严格按照之前讨论的策略来实现的, 但可以保证上述场景的预期行为. | v1 ☐☑✓ | [LORE](https://lore.kernel.org/all/20240228161018.14253-1-huschle@linux.ibm.com) | +| 2024/02/28 | Tobias Huschle | [sched/eevdf: sched feature to dismiss lag on wakeup](https://lore.kernel.org/all/20240228161018.14253-1-huschle@linux.ibm.com) | 旨在任务被唤醒时忽略其之前的延迟 (lag).
背景: 之前的 CFS(Completely Fair Scheduler) 调度器通过在任务唤醒时从其虚拟运行时间 (vruntime) 中减去一定值, 增加了任务立即获得运行时间的机会. 这种特性被某些组件, 如 vhost, 用来确保特定的 kworker 在被唤醒后能够立即被调度执行. 然而, EEVDF 调度器目前并不支持这种行为.
问题: 在 EEVDF 调度器中, 如果一个被唤醒的实体带有之前执行的负延迟, 它将不得不等待当前时间片结束, 这可能会对期望立即执行的进程的性能产生负面影响.
提议的解决方案: Tobias 提出了实现 用于重新加入实体, 该策略忽略之前执行的延迟, 并允许被唤醒的任务立即运行(如果 EEVDF 没有认为其他实体更值得调度).
实现细节: 为了确保被唤醒的任务能够实际运行, vruntime 额外减去了 1. 这虽然不是严格按照之前讨论的策略来实现的, 但可以保证上述场景的预期行为. | v1 ☐☑✓ | [LORE](https://lore.kernel.org/all/20240228161018.14253-1-huschle@linux.ibm.com) | | 2024/10/31 | Tianchen Ding | [sched/eevdf: Force propagating min_slice of cfs_rq when a task changing slice](https://lore.kernel.org/all/20241031094822.30531-1-dtcccc@linux.alibaba.com) | 这组补丁的主要目的是为调度器的 eevdf(Enhanced Earliest Deadline First)调度类引入一个 cgroup 接口, 以便更好地控制和管理任务的切片(slice). | v2 ☐☑✓ | [LORE](https://lore.kernel.org/all/20241031094822.30531-1-dtcccc@linux.alibaba.com) | | 2024/10/31 | Tianchen Ding | [sched/eevdf: Introduce a cgroup interface for slice(PART1)](https://lore.kernel.org/all/20241028063313.8039-1-dtcccc@linux.alibaba.com) | TODO | v2 ☐☑✓ | [LORE](https://lore.kernel.org/all/20241028063313.8039-1-dtcccc@linux.alibaba.com) | -| 2025/02/08 | zihan zhou <15645113830zzh@gmail.com> | [sched: Reduce the default slice to avoid tasks getting an extra tick](https://lore.kernel.org/all/20250208074821.11832-1-15645113830zzh@gmail.com) | 该补丁旨在改进 Linux 内核调度器的精度, 具体来说是通过减少默认的时间片 (slice) 大小来避免任务获取额外的时钟周期(tick), 从而让调度更加精确.
主要内容包括
1. 时间片调整: 原有的默认时间片值为 0.75 毫秒乘以(1 + ilog(ncpus)). 这意味着对于不同的 CPU 数量有不同的默认时间片值. 将默认时间片从 0.75 毫秒调整为 0.70 毫秒例如, 对于 1 个 CPU, 默认时间片变为 0.70 毫秒; 对于多达 3 个 CPU, 默认时间片变为 1.40 毫秒; 多达 7 个 CPU 则为 2.10 毫秒; 8 个或更多 CPU 则是 2.8 毫秒.
调试相关更新: 通过 debugfs 更新 sysctl_sched_base_slice(系统控制参数, 用于设置调度器的基础时间片), 限制其值, 并更新 normalized_sysctl_sched_base_slice. 这样可以更好地控制和管理时间片相关参数, 提高调度的稳定性和可靠性
3. 解决的问题: 在 HZ=1000 且拥有 8 个或更多 CPU 的情况下, 尽管时钟周期的准确性已经足够好, 但由于时钟事件的精度和配置项(CONFIG_IRQ_TIME_ACCOUNTING/CONFIG_PARAVIRT_TIME_ACCOUNTING)的影响, 仍然存在任务会获得额外的时钟周期的问题. 这导致任务可能会运行比预期多出大约 1 毫秒的时间, 因为它们只能等待到下一个时钟周期才认为达到了其截止时间. | v3 ☐☑✓ | [LORE v3,0/2](https://lore.kernel.org/all/20250208074821.11832-1-15645113830zzh@gmail.com) | +| 2025/02/08 | zihan zhou <15645113830zzh@gmail.com> | [sched: Reduce the default slice to avoid tasks getting an extra tick](https://lore.kernel.org/all/20250208074821.11832-1-15645113830zzh@gmail.com) | 该补丁旨在改进 Linux 内核调度器的精度, 具体来说是通过减少默认的时间片 (slice) 大小来避免任务获取额外的时钟周期 (tick), 从而让调度更加精确.
主要内容包括
1. 时间片调整: 原有的默认时间片值为 0.75 毫秒乘以(1 + ilog(ncpus)). 这意味着对于不同的 CPU 数量有不同的默认时间片值. 将默认时间片从 0.75 毫秒调整为 0.70 毫秒例如, 对于 1 个 CPU, 默认时间片变为 0.70 毫秒; 对于多达 3 个 CPU, 默认时间片变为 1.40 毫秒; 多达 7 个 CPU 则为 2.10 毫秒; 8 个或更多 CPU 则是 2.8 毫秒.
调试相关更新: 通过 debugfs 更新 sysctl_sched_base_slice(系统控制参数, 用于设置调度器的基础时间片), 限制其值, 并更新 normalized_sysctl_sched_base_slice. 这样可以更好地控制和管理时间片相关参数, 提高调度的稳定性和可靠性
3. 解决的问题: 在 HZ=1000 且拥有 8 个或更多 CPU 的情况下, 尽管时钟周期的准确性已经足够好, 但由于时钟事件的精度和配置项(CONFIG_IRQ_TIME_ACCOUNTING/CONFIG_PARAVIRT_TIME_ACCOUNTING) 的影响, 仍然存在任务会获得额外的时钟周期的问题. 这导致任务可能会运行比预期多出大约 1 毫秒的时间, 因为它们只能等待到下一个时钟周期才认为达到了其截止时间. | v3 ☐☑✓ | [LORE v3,0/2](https://lore.kernel.org/all/20250208074821.11832-1-15645113830zzh@gmail.com) | 滞后计算仅与可运行的任务相关; 休眠很久的任务实际上并没有错过它的虚拟运行时间(因为它没有), 所以它不会累积巨大的滞后值. 但是, EEVDF 调度器实现的时候, 在任务进入睡眠状态时会保留任务的当前滞后值, 并在任务唤醒时从该值开始. 因此, 如果一个任务在它进入睡眠状态之前已经超出了它的分配范围, 那么当它醒来时, 它将为此付出代价. -但是, 确实存在一点, 保留任务的滞后可能没有意义. 一个睡眠了一天的任务真的应该因为昨天被允许超出其分配而受到惩罚吗? 很明显, 任务的滞后迟早会恢复为零. 但何时应该发生这种情况尚不完全清楚. 正如 Peter Zijlstra 在[补丁中](https://lwn.net/ml/linux-kernel/20240405110010.631664251@infradead.org) 指出的那样, 在睡眠时立即忘记延迟将使任务有可能通过在时间片结束时短暂睡眠来玩弄系统(当它们的延迟可能为负数时), 结果他们获得的 CPU 时间超过了他们的份额. 他总结说, 简单地随着时间的推移衰减滞后值也不会奏效, 因为滞后与虚拟运行时有关, 虚拟运行时以不同(且变化)的速率传递. +但是, 确实存在一点, 保留任务的滞后可能没有意义. 一个睡眠了一天的任务真的应该因为昨天被允许超出其分配而受到惩罚吗? 很明显, 任务的滞后迟早会恢复为零. 但何时应该发生这种情况尚不完全清楚. 正如 Peter Zijlstra 在 [补丁中](https://lwn.net/ml/linux-kernel/20240405110010.631664251@infradead.org) 指出的那样, 在睡眠时立即忘记延迟将使任务有可能通过在时间片结束时短暂睡眠来玩弄系统(当它们的延迟可能为负数时), 结果他们获得的 CPU 时间超过了他们的份额. 他总结说, 简单地随着时间的推移衰减滞后值也不会奏效, 因为滞后与虚拟运行时有关, 虚拟运行时以不同(且变化) 的速率传递. > Extend / fix 86bfbb7ce4f6 ("sched/fair: Add lag based placement") by noting that lag is fundamentally a temporal measure. It should not be carried around indefinitely. > @@ -6600,7 +6612,7 @@ $deadline_{se} = vruntime_{se} + slice \times \frac{weight_0}{weight_{se}}$ latency_nice 影响的就是 `se->slice`. -EEVDF 的基础实现中, 具有较短时间片的任务将具有更早的虚拟截止日期, 从而导致调度程序更快地选择它们. 但是, 在当前内核中, 该隐式优先级仅在调度程序查找要运行的新任务时生效. 如果具有短时间片的延迟敏感型任务被唤醒, 它可能仍必须等待当前任务耗尽其时间片(可能很长)才能运行. Peter Zijlstra 的补丁 [[RFC][PATCH 09/10] sched/eevdf: Allow shorter slices to wakeup-preempt](https://lore.kernel.org/all/20240405110010.788110341@infradead.org) 改变了这一点,引入 SCHED_FEAT(PREEMPT_SHORT) 允许一个任务抢占另一个任务, 如果它的虚拟截止日期更早. 此更改为短时间切片的任务提供了更一致的时间, 同时可能会略微减慢长时间运行的任务. +EEVDF 的基础实现中, 具有较短时间片的任务将具有更早的虚拟截止日期, 从而导致调度程序更快地选择它们. 但是, 在当前内核中, 该隐式优先级仅在调度程序查找要运行的新任务时生效. 如果具有短时间片的延迟敏感型任务被唤醒, 它可能仍必须等待当前任务耗尽其时间片 (可能很长) 才能运行. Peter Zijlstra 的补丁 [[RFC][PATCH 09/10] sched/eevdf: Allow shorter slices to wakeup-preempt](https://lore.kernel.org/all/20240405110010.788110341@infradead.org) 改变了这一点, 引入 SCHED_FEAT(PREEMPT_SHORT) 允许一个任务抢占另一个任务, 如果它的虚拟截止日期更早. 此更改为短时间切片的任务提供了更一致的时间, 同时可能会略微减慢长时间运行的任务. 然而, 这留下了一个悬而未决的问题: 如何指定一个给定的任务应该被赋予一个短的时间片? 在当前的内核中, 非实时进程无法告诉内核其时间片应该是什么, 因此补丁 [[RFC][PATCH 10/10] sched/eevdf: Use sched_attr::sched_runtime to set request/slice suggestion](https://lore.kernel.org/all/20240405110010.934104715@infradead.org) 增加了该功能. 具体来说, 任务可以使用 sched_setattr() 系统调用, 在 sched_attr 结构 sched_runtime 字段中传递所需的切片时间(以纳秒为单位). 在当前内核中, 此字段仅用于截止时间调度. 通过此功能, 任何任务都可以请求更短的时间片, 这将导致它更快地运行, 并且可能更频繁地运行. 但是, 如果请求的时间片太短, 则任务将发现自己经常被抢占, 并且总体运行速度会变慢. 时间片的允许范围为 100μs 到 100ms. 出于好奇, Peter Zijlstra 在此补丁的更新日志中以一组令人印象深刻的 ASCII 艺术图的形式说明了各种时间片选择的结果. @@ -6612,8 +6624,8 @@ EEVDF 的基础实现中, 具有较短时间片的任务将具有更早的虚拟 | 时间 | 作者 | 特性 | 描述 | 是否合入主线 | 链接 | |:-----:|:----:|:----:|:----:|:------------:|:----:| -| 2024/11/13 | Prakash Sangappa | [Scheduler time slice extension](https://lore.kernel.org/all/20241113000126.967713-1-prakash.sangappa@oracle.com) | 这组补丁的主要目的是为 Linux 内核调度器引入一个机制, 允许用户线程请求额外的执行时间, 以完成关键区段的执行, 从而提高性能.
1. 引入每线程的用户-内核共享结构:
引入一个每线程的用户-内核共享结构, 该结构在用户空间和内核之间共享, 允许用户线程设置标志请求额外的执行时间, 内核可以访问并处理这些请求.
2. 实现调度器时间扩展机制: 实现调度器时间扩展机制, 允许用户线程请求额外的 50 微秒执行时间. 内核会启动一个定时器, 在定时器到期时抢占线程, 如果线程仍在运行.
3. 指示是否授予调度器抢占延迟请求: 在共享结构中添加标志, 指示内核是否授予了用户线程的抢占延迟请求. 用户线程可以通过检查这些标志来确定请求是否被授予.
4. 添加调度器抢占延迟授予统计信息: 添加统计信息,记录调度器授予的抢占延迟请求次数,以便进行性能分析和调试. | v1 ☐☑✓ | [2024/11/13, LORE v1, 0/4](https://lore.kernel.org/all/20241113000126.967713-1-prakash.sangappa@oracle.com)
*-*-*-*-*-*-*-*
[2025/02/15, LORE v1, 0/2](https://lore.kernel.org/all/20250215005414.224409-1-prakash.sangappa@oracle.com)
*-*-*-*-*-*-*-*
[2025/04/18, LORE v2, 0/3](https://lore.kernel.org/all/20250418193410.2010058-1-prakash.sangappa@oracle.com)
*-*-*-*-*-*-*-*
[2025/05/02, LORE v3, 0/4](https://lore.kernel.org/all/20250502015955.3146733-1-prakash.sangappa@oracle.com)
*-*-*-*-*-*-*-*
[2025/05/13, LORE v4, 0/6](https://lore.kernel.org/all/20250513214554.4160454-1-prakash.sangappa@oracle.com)
*-*-*-*-*-*-*-*
[2025/06/03, LORE v5, 0/6](lore.kernel.org/all/20250603233654.1838967-1-prakash.sangappa@oracle.com) | -| 2025/01/31 | Steven Rostedt | [sched: Extended Scheduler Time Slice](https://lore.kernel.org/all/20250131225837.972218232@goodmis.org) | 这是为了改进 user space implemented spin locks 或任务处于任何关键临界区. 它还可以扩展到虚拟机及 guest spin locks. 当任务在用户态处于关键临界区的时候, 要求调度器引入一个机制, 允许用户线程请求额外的执行时间, 以完成关键区段的执行, 从而提高性能.
这与 PREEMPT_LAZY 配合使用, 任务可以通过 rseq 结构告诉内核, 它正处于一个关键部分(如持有一个 user space spin locks)将很快离开, 并要求内核在此刻不要抢先执行.
这将在 struct rseq 中添加一个名为 cr_counter 的新字段, 其工作原理是, 在进入临界区段之前, 用户空间线程会将 cr_counter 增加 2. 如果任务时间耗尽且 NEED_RESCHED_LAZY 被设置, 那么在返回用户空间的途中, 内核将允许用户空间继续运行. 目前, 内核会让用户空间多运行一个 tick. 当内核允许线程有一些延长时间时, 它将设置 rseq cr_counter 的第 0 位, 以通知用户线程它获得了延长时间, 并应在离开临界区后立即调用系统调用.
当用户线程离开临界区段时, 它会将计数器递减 2. 如果计数器等于 1, 那么它就知道内核 就知道内核延长了它的时间片, 然后它将调用系统调用, 让内核调度它. 如果设置了 NEED_RESCHED, 那么 rseq 将被忽略, 内核将进行调度. 测试用例 [code/extend-sched.c](https://rostedt.org/code/extend-sched.c). | v1 ☐☑✓ | [LORE POC(https://lore.kernel.org/all/20231025054219.1acaa3dd@gandalf.local.home)
*-*-*-*-*-*-*-*
[LORE v1,0/2](https://lore.kernel.org/all/20250131225837.972218232@goodmis.org) | +| 2024/11/13 | Prakash Sangappa | [Scheduler time slice extension](https://lore.kernel.org/all/20241113000126.967713-1-prakash.sangappa@oracle.com) | 这组补丁的主要目的是为 Linux 内核调度器引入一个机制, 允许用户线程请求额外的执行时间, 以完成关键区段的执行, 从而提高性能.
1. 引入每线程的用户 - 内核共享结构:
引入一个每线程的用户 - 内核共享结构, 该结构在用户空间和内核之间共享, 允许用户线程设置标志请求额外的执行时间, 内核可以访问并处理这些请求.
2. 实现调度器时间扩展机制: 实现调度器时间扩展机制, 允许用户线程请求额外的 50 微秒执行时间. 内核会启动一个定时器, 在定时器到期时抢占线程, 如果线程仍在运行.
3. 指示是否授予调度器抢占延迟请求: 在共享结构中添加标志, 指示内核是否授予了用户线程的抢占延迟请求. 用户线程可以通过检查这些标志来确定请求是否被授予.
4. 添加调度器抢占延迟授予统计信息: 添加统计信息,记录调度器授予的抢占延迟请求次数,以便进行性能分析和调试. | v1 ☐☑✓ | [2024/11/13, LORE v1, 0/4](https://lore.kernel.org/all/20241113000126.967713-1-prakash.sangappa@oracle.com)
*-*-*-*-*-*-*-*
[2025/02/15, LORE v1, 0/2](https://lore.kernel.org/all/20250215005414.224409-1-prakash.sangappa@oracle.com)
*-*-*-*-*-*-*-*
[2025/04/18, LORE v2, 0/3](https://lore.kernel.org/all/20250418193410.2010058-1-prakash.sangappa@oracle.com)
*-*-*-*-*-*-*-*
[2025/05/02, LORE v3, 0/4](https://lore.kernel.org/all/20250502015955.3146733-1-prakash.sangappa@oracle.com)
*-*-*-*-*-*-*-*
[2025/05/13, LORE v4, 0/6](https://lore.kernel.org/all/20250513214554.4160454-1-prakash.sangappa@oracle.com)
*-*-*-*-*-*-*-*
[2025/06/03, LORE v5, 0/6](https://lore.kernel.org/all/lore.kernel.org/all/20250603233654.1838967-1-prakash.sangappa@oracle.com)
*-*-*-*-*-*-*-*
[2025/07/01, LORE v6, 0/7](https://lore.kernel.org/all/20250701003749.50525-1-prakash.sangappa@oracle.com)
*-*-*-*-*-*-*-*
[2025/07/24, LORE v7, 00/11](https://lore.kernel.org/all/all/20250724161625.2360309-1-prakash.sangappa@oracle.com) | +| 2025/01/31 | Steven Rostedt | [sched: Extended Scheduler Time Slice](https://lore.kernel.org/all/20250131225837.972218232@goodmis.org) | 这是为了改进 user space implemented spin locks 或任务处于任何关键临界区. 它还可以扩展到虚拟机及 guest spin locks. 当任务在用户态处于关键临界区的时候, 要求调度器引入一个机制, 允许用户线程请求额外的执行时间, 以完成关键区段的执行, 从而提高性能.
这与 PREEMPT_LAZY 配合使用, 任务可以通过 rseq 结构告诉内核, 它正处于一个关键部分 (如持有一个 user space spin locks) 将很快离开, 并要求内核在此刻不要抢先执行.
这将在 struct rseq 中添加一个名为 cr_counter 的新字段, 其工作原理是, 在进入临界区段之前, 用户空间线程会将 cr_counter 增加 2. 如果任务时间耗尽且 NEED_RESCHED_LAZY 被设置, 那么在返回用户空间的途中, 内核将允许用户空间继续运行. 目前, 内核会让用户空间多运行一个 tick. 当内核允许线程有一些延长时间时, 它将设置 rseq cr_counter 的第 0 位, 以通知用户线程它获得了延长时间, 并应在离开临界区后立即调用系统调用.
当用户线程离开临界区段时, 它会将计数器递减 2. 如果计数器等于 1, 那么它就知道内核 就知道内核延长了它的时间片, 然后它将调用系统调用, 让内核调度它. 如果设置了 NEED_RESCHED, 那么 rseq 将被忽略, 内核将进行调度. 测试用例 [code/extend-sched.c](https://rostedt.org/code/extend-sched.c). | v1 ☐☑✓ | [LORE POC(https://lore.kernel.org/all/20231025054219.1acaa3dd@gandalf.local.home)
*-*-*-*-*-*-*-*
[LORE v1,0/2](https://lore.kernel.org/all/20250131225837.972218232@goodmis.org) | ### 8.9.7 EEVDF DEBUG @@ -6621,7 +6633,7 @@ EEVDF 的基础实现中, 具有较短时间片的任务将具有更早的虚拟 | 时间 | 作者 | 特性 | 描述 | 是否合入主线 | 链接 | |:---:|:----:|:---:|:----:|:---------:|:----:| -| 2025/04/23 | Dhaval Giani (AMD) | [sched/eevdf: Introduce functional invariants for EEVDF](https://lore.kernel.org/all/20250422-b4-eevdf-tests-v1-post-v1-0-35d158254c72@gianis.ca) | 为 Linux 调度器中的 EEVDF( Earliest Eligible Virtual Deadline First) 算法引入功能不变性测试. 主要测试两个基于论文的引理:
1. 被选中运行的任务应具有正的 lag, 即若任务可运行, 则其 lag 应为正;
2. 所有任务的 lag 总和为零.
测试通过新增 debugfs 目录提供触发接口, 用于开发调试, 不适用于生产环境.更新内容包括: 增加任务数调节参数、去除递归计算、使用函数检测溢出等. | v1 ☐☑✓ | [2025/04/23, LORE v1, 0/3](https://lore.kernel.org/all/20250422-b4-eevdf-tests-v1-post-v1-0-35d158254c72@gianis.ca) | +| 2025/04/23 | Dhaval Giani (AMD) | [sched/eevdf: Introduce functional invariants for EEVDF](https://lore.kernel.org/all/20250422-b4-eevdf-tests-v1-post-v1-0-35d158254c72@gianis.ca) | 为 Linux 调度器中的 EEVDF(Earliest Eligible Virtual Deadline First) 算法引入功能不变性测试. 主要测试两个基于论文的引理:
1. 被选中运行的任务应具有正的 lag, 即若任务可运行, 则其 lag 应为正;
2. 所有任务的 lag 总和为零.
测试通过新增 debugfs 目录提供触发接口, 用于开发调试, 不适用于生产环境. 更新内容包括: 增加任务数调节参数、去除递归计算、使用函数检测溢出等. | v1 ☐☑✓ | [2025/04/23, LORE v1, 0/3](https://lore.kernel.org/all/20250422-b4-eevdf-tests-v1-post-v1-0-35d158254c72@gianis.ca) | @@ -6768,6 +6780,16 @@ Intel 的 [Wult/Wake Up Latency Tracer](https://github.com/intel/wult) 一个在 | 2021/04/12 | Pratik Rajesh Sampat | [CPU-Idle latency selftest framework](https://lore.kernel.org/all/20210412074309.38484-1-psampat@linux.ibm.com) | TODO | v4 ☐☑✓ | [LORE RFC,0/2](https://lore.kernel.org/all/20210315114827.46036-1-psampat@linux.ibm.com)
*-*-*-*-*-*-*-*
[LORE v2,0/2](https://lore.kernel.org/all/20210401114504.13466-1-psampat@linux.ibm.com)
*-*-*-*-*-*-*-*
[LORE v3,0/2](https://lore.kernel.org/all/20210404083354.23060-1-psampat@linux.ibm.com)
*-*-*-*-*-*-*-*
[LORE v4,0/2](https://lore.kernel.org/all/20210412074309.38484-1-psampat@linux.ibm.com)
*-*-*-*-*-*-*-*
[LORE v5,0/2](https://lore.kernel.org/all/20210430082804.38018-1-psampat@linux.ibm.com) | +## 9.4 Idle Polling +------- + + +| 时间 | 作者 | 特性 | 描述 | 是否合入主线 | 链接 | +|:---:|:----:|:---:|:----:|:---------:|:----:| +| 2025/06/21 | Aaron Tomlin | [sched: idle: Introduce CPU-specific idle=poll](https://lore.kernel.org/all/20250621235745.3994-1-atomlin@atomlin.com) | 该补丁旨在改进系统空闲时的能耗与性能平衡. 目前的 `idle=poll` 内核参数为全局设置, 强制所有 CPU 进入轮询空闲状态, 虽然降低了延迟, 但导致高 CPU 数量系统 (尤其是启用 Full Dynticks 的系统) 功耗过高.
这个补丁引入了 per-CPU 级别的 `idle=poll` 配置能力, 允许仅对特定 CPU 启用轮询空闲模式, 其余 CPU 可进入更深的节能状态. 通过该机制, 可实现更精细的电源管理策略: 对延迟敏感的 CPU 保持高性能, 而其他 CPU 则节省电力.
该改进在多核系统中 (如 48 核) 可实现关键任务 CPU 的低延迟响应与非关键 CPU 的显著能耗降低, 解决了原有 "全有或全无" 的配置限制, 提升了灵活性与系统整体效率. | v1 ☐☑✓ | [2025/06/21, LORE](https://lore.kernel.org/all/20250621235745.3994-1-atomlin@atomlin.com) | + + + # 10 进程管理 ------- @@ -6838,12 +6860,12 @@ Huawei CONFIG_BOOST_KILL 用来在进程接收到 `KILL -9` 信号时, 临时提 | 时间 | 作者 | 特性 | 描述 | 是否合入主线 | 链接 | |:---:|:----:|:---:|:----:|:---------:|:----:| -| 2010/05/27 | Luis Claudio R. Goncalves | [oom-kill: give the dying task a higher priority](https://git.kernel.org/pub/scm/linux/kernel/git/torvalds/linux.git/log/?id=93b43fa55088fe977503a156d1097cc2055449a2) | 在一个负载很重的系统中, 我们观察到, 即使在 oom-killer 选择了一个即将消亡的任务, 但该任务可能需要很长时间才能消亡.
就在向所选任务发送 SIGKILL 之前, Oom-killer 会提高任务的优先级, 以便快速退出, 释放内存. | v1 ☐☑✓ v2.6.36-rc1 | [LORE](https://lore.kernel.org/all/20100527180431.GP13035@uudg.org) | +| 2010/05/27 | Luis Claudio R. Goncalves | [oom-kill: give the dying task a higher priority](https://git.kernel.org/pub/scm/linux/kernel/git/torvalds/linux.git/log/?id=93b43fa55088fe977503a156d1097cc2055449a2) | 在一个负载很重的系统中, 我们观察到, 即使在 oom-killer 选择了一个即将消亡的任务, 但该任务可能需要很长时间才能消亡.
就在向所选任务发送 SIGKILL 之前, Oom-killer 会提高任务的优先级, 以便快速退出, 释放内存. | v1 ☐☑✓ v2.6.36-rc1 | [LORE](https://lore.kernel.org/all/20100527180431.GP13035@uudg.org) | | 时间 | 作者 | 特性 | 描述 | 是否合入主线 | 链接 | |:---:|:----:|:---:|:----:|:---------:|:----:| -| 2015/11/27 | Michal Hocko | [mm, oom: introduce oom reaper](https://lore.kernel.org/all/1448640772-30147-1-git-send-email-mhocko@kernel.org) | OOM 受害者可能需要无限制的时间才能退出, 因为它可能被阻塞在不间断状态中, 等待某个事件(如锁), 而该事件被另一个在页面分配器中循环的任务阻塞.
本补丁通过引入一个专门的内核线程 (oom_reaper) 来降低此类锁定的发生概率, 该线程试图通过抢先获取 oom 受害者所拥有的匿名或已交换的内存来回收额外的内存, 并假设当其所有者被杀死并从用户空间踢出时, 将不再需要这些内存.
有一个值得注意的例外情况, 如果 OOM 受害者正在进行 coreump, 那么结果将是不完整的. 这被认为是一个合理的限制, 因为系统的整体健康比特定应用程序的可调试性更重要. 之所以选择内核线程, 是因为我们需要一种可靠的调用方式, 因此工作队列上下文并不合适, 因为所有工作进程都可能在忙(例如分配内存). | v1 ☐☑✓ | [LORE](https://lore.kernel.org/all/1448640772-30147-1-git-send-email-mhocko@kernel.org)[](https://lore.kernel.org/all/1458644426-22973-1-git-send-email-mhocko@kernel.org/) | +| 2015/11/27 | Michal Hocko | [mm, oom: introduce oom reaper](https://lore.kernel.org/all/1448640772-30147-1-git-send-email-mhocko@kernel.org) | OOM 受害者可能需要无限制的时间才能退出, 因为它可能被阻塞在不间断状态中, 等待某个事件(如锁), 而该事件被另一个在页面分配器中循环的任务阻塞.
本补丁通过引入一个专门的内核线程 (oom_reaper) 来降低此类锁定的发生概率, 该线程试图通过抢先获取 oom 受害者所拥有的匿名或已交换的内存来回收额外的内存, 并假设当其所有者被杀死并从用户空间踢出时, 将不再需要这些内存.
有一个值得注意的例外情况, 如果 OOM 受害者正在进行 coreump, 那么结果将是不完整的. 这被认为是一个合理的限制, 因为系统的整体健康比特定应用程序的可调试性更重要. 之所以选择内核线程, 是因为我们需要一种可靠的调用方式, 因此工作队列上下文并不合适, 因为所有工作进程都可能在忙(例如分配内存). | v1 ☐☑✓ | [LORE](https://lore.kernel.org/all/1448640772-30147-1-git-send-email-mhocko@kernel.org)[](https://lore.kernel.org/all/1458644426-22973-1-git-send-email-mhocko@kernel.org/) | ### 10.1.4 进程冻结与恢复 @@ -7043,9 +7065,9 @@ Google 的 Peter Oskolkov 发布了 [最早的 RFC v0.1 补丁](https://lore.ker | 来源 | 论文 | 概述 | |:----:|:---:|:----:| -| NSDI '19 | [Shinjuku: preemptive scheduling for µsecond-scale tail latency](https://dl.acm.org/doi/10.5555/3323234.3323264) | 最近提出的用于微秒级应用的数据平面(如 IX 和 ZygOS)使用非抢占式策略为内核调度请求. 在现实世界的许多应用场景中, 请求服务时间的分布具有高度分散性或较重的尾部, 它们允许短请求被阻塞在长请求之后, 从而导致较差的尾部延迟. Shinjuku 是一个单地址空间操作系统, 它利用硬件支持虚拟化, 在微秒级实现抢占. 这使得 Shinjuku 可以实施集中式调度策略, 每 5 微秒抢占一次请求, 并能很好地处理轻度和重度尾部请求服务时间分布. 论文中们证明, 与 IX 和 ZygOS 相比, Shinjuku 能在各种工作负载场景下显著改善尾端延迟和吞吐量. 在 RocksDB 服务器同时处理点查询和范围查询的情况下, Shinjuku 的吞吐量提高了 6.6 倍, 尾部延迟降低了 88%. | -| NA | [LibPreemptible: Enabling Fast, Adaptive, and Hardware-Assisted User-Space Scheduling](https://arxiv.org/abs/2308.02896) | [Towards Fast, Adaptive, and Hardware-Assisted User-Space Scheduling](https://arxiv.org/abs/2308.02896), 现代云应用很容易出现高尾部延迟, 因为它们的请求通常遵循高度分散的分布. 先前的工作提出了操作系统和系统级解决方案, 通过更好的调度来减少微秒级工作负载的尾部延迟. 遗憾的是, 现有的方法(如定制的数据平面操作系统)需要对操作系统进行重大修改, 在可扩展性方面受到限制, 或者无法充分发挥硬件提供的性能.
论文提出了 LibPreemptible, 一个灵活、轻量级、可扩展的抢占式用户级线程库. LibPreemptible 基于三项关键技术:
1. 快速、轻量级的硬件机制, 用于提供定时中断;
2. 通用的用户级调度接口
3. 用户应用程序接口, 用于表达适合其应用需求的自适应调度策略.
与之前最先进的调度系统 Shinjuku 相比, 论文提出的系统无需修改内核即可显著改善各种工作负载的尾部延迟和吞吐量. 还展示了 LibPreemptible 在不同调度策略下的灵活性, 适用于负载水平和特性各不相同的实际应用. | -| SOSP '21 | [Syrup: User-Defined Scheduling Across the Stack](https://dl.acm.org/doi/10.1145/3477132.3483548) | SOSP '21: Proceedings of the ACM SIGOPS 28th Symposium on Operating Systems Principles 的论文, Syrup 时基于 Ghost 和 eBPF 构建的用户态自定义调度框架, 可使不受信任的应用开发人员在这些系统层之间表达特定于应用的调度策略, 而不必为实现这些策略的底层系统机制所累. 应用程序开发人员使用 Syrup 编写调度策略, 将其作为输入(线程、网络数据包、网络连接)和执行器(内核、网络套接字、网卡队列)之间的一组匹配函数, 然后将其部署到各系统层, 而无需修改代码. Syrup 支持多租户, 因为多个位于同一地点的应用程序可以各自安全可靠地指定自定义策略. 我们介绍了几个使用 Syrup 的示例, 它们只需几行代码就能定义应用程序和特定工作负载的调度策略, 并将其部署到整个堆栈中, 与默认策略相比, 性能最多可提高 8 倍. 参见 [slides](https://systems-rg.github.io/slides/2022-07-08-syrup.pdf) | +| NSDI '19 | [Shinjuku: preemptive scheduling for µsecond-scale tail latency](https://dl.acm.org/doi/10.5555/3323234.3323264) | 最近提出的用于微秒级应用的数据平面 (如 IX 和 ZygOS) 使用非抢占式策略为内核调度请求. 在现实世界的许多应用场景中, 请求服务时间的分布具有高度分散性或较重的尾部, 它们允许短请求被阻塞在长请求之后, 从而导致较差的尾部延迟. Shinjuku 是一个单地址空间操作系统, 它利用硬件支持虚拟化, 在微秒级实现抢占. 这使得 Shinjuku 可以实施集中式调度策略, 每 5 微秒抢占一次请求, 并能很好地处理轻度和重度尾部请求服务时间分布. 论文中们证明, 与 IX 和 ZygOS 相比, Shinjuku 能在各种工作负载场景下显著改善尾端延迟和吞吐量. 在 RocksDB 服务器同时处理点查询和范围查询的情况下, Shinjuku 的吞吐量提高了 6.6 倍, 尾部延迟降低了 88%. | +| NA | [LibPreemptible: Enabling Fast, Adaptive, and Hardware-Assisted User-Space Scheduling](https://arxiv.org/abs/2308.02896) | [Towards Fast, Adaptive, and Hardware-Assisted User-Space Scheduling](https://arxiv.org/abs/2308.02896), 现代云应用很容易出现高尾部延迟, 因为它们的请求通常遵循高度分散的分布. 先前的工作提出了操作系统和系统级解决方案, 通过更好的调度来减少微秒级工作负载的尾部延迟. 遗憾的是, 现有的方法 (如定制的数据平面操作系统) 需要对操作系统进行重大修改, 在可扩展性方面受到限制, 或者无法充分发挥硬件提供的性能.
论文提出了 LibPreemptible, 一个灵活、轻量级、可扩展的抢占式用户级线程库. LibPreemptible 基于三项关键技术:
1. 快速、轻量级的硬件机制, 用于提供定时中断;
2. 通用的用户级调度接口
3. 用户应用程序接口, 用于表达适合其应用需求的自适应调度策略.
与之前最先进的调度系统 Shinjuku 相比, 论文提出的系统无需修改内核即可显著改善各种工作负载的尾部延迟和吞吐量. 还展示了 LibPreemptible 在不同调度策略下的灵活性, 适用于负载水平和特性各不相同的实际应用. | +| SOSP '21 | [Syrup: User-Defined Scheduling Across the Stack](https://dl.acm.org/doi/10.1145/3477132.3483548) | SOSP '21: Proceedings of the ACM SIGOPS 28th Symposium on Operating Systems Principles 的论文, Syrup 时基于 Ghost 和 eBPF 构建的用户态自定义调度框架, 可使不受信任的应用开发人员在这些系统层之间表达特定于应用的调度策略, 而不必为实现这些策略的底层系统机制所累. 应用程序开发人员使用 Syrup 编写调度策略, 将其作为输入 (线程、网络数据包、网络连接) 和执行器 (内核、网络套接字、网卡队列) 之间的一组匹配函数, 然后将其部署到各系统层, 而无需修改代码. Syrup 支持多租户, 因为多个位于同一地点的应用程序可以各自安全可靠地指定自定义策略. 我们介绍了几个使用 Syrup 的示例, 它们只需几行代码就能定义应用程序和特定工作负载的调度策略, 并将其部署到整个堆栈中, 与默认策略相比, 性能最多可提高 8 倍. 参见 [slides](https://systems-rg.github.io/slides/2022-07-08-syrup.pdf) | | NSDI '19 |[Shenango: Achieving High CPU Efficiency for Latency-sensitive Datacenter Workloads](https://www.usenix.org/conference/nsdi19/presentation/ousterhout) | 数据中心应用需要微秒级的尾延迟和操作系统的高请求率, 而且大多数应用处理的负载在多个时间尺度上都有很大差异. 如何以 CPU 效率高的方式实现这些目标是一个尚未解决的问题. 由于当今内核的开销很大, 实现微秒级延迟的最佳解决方案是内核旁路联网, 即把 CPU 内核专门用于应用程序对网卡进行旋转轮询. 但这种方法会浪费 CPU: 即使在平均负荷不大的情况下, 也必须为峰值预期负荷分配足够的内核.
Shenango 可实现类似的延迟, 但 CPU 效率却高得多. 它能以非常精细的粒度(每 5 微秒)在各个应用之间重新分配内核, 从而使对延迟敏感的应用未使用的周期能被批处理应用有效利用. 实现如此快的重新分配率, 得益于: (1) 一种高效的算法, 该算法可检测应用程序何时可从更多内核中获益;(2) 一个名为 IOKernel 的特权组件, 该组件在专用内核上运行, 引导来自网卡的数据包, 并协调内核的重新分配. 在处理对延迟敏感的应用(如 memcached)时, 我们发现 Shenango 的尾部延迟和吞吐量可与最先进的内核旁路网络协议栈 ZygOS 相媲美, 但却能以线性方式将对延迟敏感的应用吞吐量换成批处理应用吞吐量, 从而大大提高了 CPU 效率. | @@ -7085,7 +7107,6 @@ BPF 钩子 (它已经成功地用于各种内核子系统) 为外部代码 (安 [sched-ext 研究](https://hackmd.io/@vax-r/sched_ext_exp) [Linux CPU 调度器之我见](https://zhui.dev/2022-11/linux-cpu-schedulers) -[Pluggable CPU schedulers](https://en.opensuse.org/Pluggable_CPU_schedulers) [A Minimal Scheduler with eBPF, sched_ext and C](https://mostlynerdless.de/blog/2024/10/25/a-minimal-scheduler-with-ebpf-sched_ext-and-c) [eBPF Tutorial: Introduction to the BPF Scheduler](https://eunomia.dev/tutorials/44-scx-simple/) @@ -7104,29 +7125,29 @@ Roman Gushchin 在邮件列表发起了 BPF 对调度器的潜在应用的讨论 作者在 [github--sched-ext/scx](https://github.com/sched-ext/scx)提供了 sched_ext 的工具集和开发套件, 并提供了一些基于 c/rust 的用户态调度程序. 以及一个用户态服务用来管理这些用户态调度程序. 参见 LWN 报道 [Improving performance with SCHED_EXT and IOCost](https://lwn.net/Articles/966618). -2024 年 01 月, Ubuntu/Canonical 的工程师 Andrea Righi(随后离职去了 NVIDIA), 在 X(Twitter) 上发文谈到, 他利用圣诞假期通过 sched_ext 实现了能够在运行时加载的 Rust 调度器 scx_rustland, 他在自己的博客中展示了这个调度器的巨大潜力和希望, 在某些负载(例如游戏)下性能甚至可以超越 Linux 内核默认的 EEVDF 调度器. [Righi: Writing a scheduler for Linux in Rust that runs in user-space](https://arighi.blogspot.com/2024/02/writing-scheduler-for-linux-in-rust.html), 参见 LWN 报道 [Righi: Writing a scheduler for Linux in Rust that runs in user-space](https://lwn.net/Articles/962897), phoronix 的报道 [Rust-Written Linux Scheduler Showing Promising Results For Gaming Performance](https://www.phoronix.com/news/Rust-Linux-Scheduler-Experiment) 和 [Ubuntu Blog Talks Up Rust Schedulers, Potential For Micro-Kernel Design Future](https://www.phoronix.com/news/Ubuntu-Rust-Scheduler-Micro), 以及 Ubuntu blog [Crafting new Linux schedulers with sched-ext, Rust and Ubuntu](https://ubuntu.com//blog/crafting-new-linux-schedulers-with-sched-ext-rust-and-ubuntu). scx_rustland 调度器的瓶颈是内核和用户空间之间通信的开销. 为了解决这个问题, 同年 8 月份, Andrea Righi 在 eBPF 中完全实现了 scx_rustland, 讲新的调度器命名为 scx_bpfland. scx_bpfland 调度器采用与 scx_rustland 相同的逻辑, 但没有内核/用户空间的通信开销. Andrea 已经运行了一些基准测试, 新的 bpfland 代码显示出非常有希望的结果. PostgreSQL 快 30~39%, FFmpeg 快几个百分点, nginx 快 8% 左右, 等等. 参见 [phoronix, 2024/08/10, Reimplementing A Linux Rust Scheduler In eBPF Shows Very Promising Results](https://www.phoronix.com/news/Linux-Rust-Sched-To-eBPF) 以及作者博客 [blog, 2024/08/10, Reimplementing my Linux Rust Scheduler In eBPF](https://arighi.blogspot.com/2024/08/re-implementing-my-linux-rust-scheduler.html). +2024 年 01 月, Ubuntu/Canonical 的工程师 Andrea Righi(随后离职去了 NVIDIA), 在 X(Twitter) 上发文谈到, 他利用圣诞假期通过 sched_ext 实现了能够在运行时加载的 Rust 调度器 scx_rustland, 他在自己的博客中展示了这个调度器的巨大潜力和希望, 在某些负载 (例如游戏) 下性能甚至可以超越 Linux 内核默认的 EEVDF 调度器. [Righi: Writing a scheduler for Linux in Rust that runs in user-space](https://arighi.blogspot.com/2024/02/writing-scheduler-for-linux-in-rust.html), 参见 LWN 报道 [Righi: Writing a scheduler for Linux in Rust that runs in user-space](https://lwn.net/Articles/962897), phoronix 的报道 [Rust-Written Linux Scheduler Showing Promising Results For Gaming Performance](https://www.phoronix.com/news/Rust-Linux-Scheduler-Experiment) 和 [Ubuntu Blog Talks Up Rust Schedulers, Potential For Micro-Kernel Design Future](https://www.phoronix.com/news/Ubuntu-Rust-Scheduler-Micro), 以及 Ubuntu blog [Crafting new Linux schedulers with sched-ext, Rust and Ubuntu](https://ubuntu.com//blog/crafting-new-linux-schedulers-with-sched-ext-rust-and-ubuntu). scx_rustland 调度器的瓶颈是内核和用户空间之间通信的开销. 为了解决这个问题, 同年 8 月份, Andrea Righi 在 eBPF 中完全实现了 scx_rustland, 讲新的调度器命名为 scx_bpfland. scx_bpfland 调度器采用与 scx_rustland 相同的逻辑, 但没有内核 / 用户空间的通信开销. Andrea 已经运行了一些基准测试, 新的 bpfland 代码显示出非常有希望的结果. PostgreSQL 快 30~39%, FFmpeg 快几个百分点, nginx 快 8% 左右, 等等. 参见 [phoronix, 2024/08/10, Reimplementing A Linux Rust Scheduler In eBPF Shows Very Promising Results](https://www.phoronix.com/news/Linux-Rust-Sched-To-eBPF) 以及作者博客 [blog, 2024/08/10, Reimplementing my Linux Rust Scheduler In eBPF](https://arighi.blogspot.com/2024/08/re-implementing-my-linux-rust-scheduler.html). -Changwoo Min 和 Igalia 在北美开源峰会上发表了关于为 Linux 游戏优化内核调度器的演讲, [Optimizing Scheduler for Linux Gaming - Changwoo Min, Igalia](https://ossna2024.sched.com/event/1aBOT/optimizing-scheduler-for-linux-gaming-changwoo-min-igalia?iframe=no&w=100%&sidebar=yes&bg=no), 提出延迟关键感知虚拟截止时间(LAVD) 调度器. 这个[使用 Rust 基于 sched_ext 编写](https://crates.io/crates/scx_lavd/versions)的基于 EDF 的调度器已经显示出可喜的结果. 在 Igalia 在基于 Linux 6.9-rc1的内核上进行的测试中, LAVD调度器在平均FPS和1%的低帧速率下都显示出与EEVDF更好或相似的性能. 参见 phoronix 报道 [Rust-Written LAVD Kernel Scheduler Shows Promising Results For Linux Gaming](https://www.phoronix.com/news/LAVD-Scheduler-Linux-Gaming). +Changwoo Min 和 Igalia 在北美开源峰会上发表了关于为 Linux 游戏优化内核调度器的演讲, [Optimizing Scheduler for Linux Gaming - Changwoo Min, Igalia](https://ossna2024.sched.com/event/1aBOT/optimizing-scheduler-for-linux-gaming-changwoo-min-igalia?iframe=no&w=100%&sidebar=yes&bg=no), 提出延迟关键感知虚拟截止时间 (LAVD) 调度器. 这个[使用 Rust 基于 sched_ext 编写](https://crates.io/crates/scx_lavd/versions) 的基于 EDF 的调度器已经显示出可喜的结果. 在 Igalia 在基于 Linux 6.9-rc1 的内核上进行的测试中, LAVD 调度器在平均 FPS 和 1% 的低帧速率下都显示出与 EEVDF 更好或相似的性能. 参见 phoronix 报道 [Rust-Written LAVD Kernel Scheduler Shows Promising Results For Linux Gaming](https://www.phoronix.com/news/LAVD-Scheduler-Linux-Gaming). 随后作者发布了 sched_ext 的 v6 版本 [Another push for sched_ext](https://lwn.net/Articles/972710), BPF 的工具集 `sched_ext/ravg[_impl].BPF.h` 和 `ravg.read.rs.h` 中的运行平均实现来跟踪负载度量. 以前, 用户空间部分迭代所有任务来计算负载度量并做出 LB 决策. 现在, 高级 LB 决策是通过简单地读取每个域的负载平均值来做出的, 而 Picking 迁移目标任务只访问推送域中固定数量的最近活动任务的负载度量. 这大大减少了 CPU 开销, 并使 rust 的可扩展性大大提高. LSFMMBPF 2024 上对 sched_ext 进行了讨论 [LWN, 2024/05/23, LSFMMBPF-2024, What's scheduled for sched_ext](https://lwn.net/Articles/974387). -[OPPO-内核工匠, 内核调度客制化利器: SCHED_EXT](https://blog.csdn.net/feelabclihu/article/details/139364772), [公众号发文](https://mp.weixin.qq.com/s/89PuLJDE4aE1c3cWG6ZL8g). +[OPPO - 内核工匠, 内核调度客制化利器: SCHED_EXT](https://blog.csdn.net/feelabclihu/article/details/139364772), [公众号发文](https://mp.weixin.qq.com/s/89PuLJDE4aE1c3cWG6ZL8g). -尽管其他内核开发人员也提出了一些反对意见, 但是 Linus Torvalds 作为 Linux 内核的终身 "BDFL"(仁慈的独裁者), 认为 sched_ext V6 的代码已经准备好了, 在 Linux 内核主线更能体现其价值, 不应该拖延 sched_ext 的合入. 因此 Linus Torvalds 在邮件列表 [Re: [PATCHSET v6] sched: Implement BPF extensible scheduler class](https://lore.kernel.org/lkml/CAHk-=wg8APE61e5Ddq5mwH55Eh0ZLDV4Tr+c6_gFS7g2AxnuHQ@mail.gmail.com) 宣布他打算合并 Linux 6.11 的 sched_ext 补丁. 参见 phoronix 报道 [phoronix, 2024/06/11, Linus Torvalds Throws Down The Hammer: Extensible Scheduler "sched_ext" In Linux 6.11](https://www.phoronix.com/news/Linux-6.11-Extensible-Scheduler) 和 LWN 报道 [LWN, 2024/06/11, Extensible scheduler class to be merged for 6.11](https://lwn.net/Articles/978007) 以及 [Linus 强势拍板合入: BPF 赋能调度器终成正果](https://mp.weixin.qq.com/s/dWPWuDtxQBM9Z_GXwKe0kQ). +尽管其他内核开发人员也提出了一些反对意见, 但是 Linus Torvalds 作为 Linux 内核的终身 "BDFL"(仁慈的独裁者), 认为 sched_ext V6 的代码已经准备好了, 在 Linux 内核主线更能体现其价值, 不应该拖延 sched_ext 的合入. 因此 Linus Torvalds 在邮件列表 [Re: [PATCHSET v6] sched: Implement BPF extensible scheduler class](https://lore.kernel.org/lkml/CAHk-=wg8APE61e5Ddq5mwH55Eh0ZLDV4Tr+c6_gFS7g2AxnuHQ@mail.gmail.com) 宣布他打算合并 Linux 6.11 的 sched_ext 补丁. 参见 phoronix 报道 [phoronix, 2024/06/11, Linus Torvalds Throws Down The Hammer: Extensible Scheduler"sched_ext"In Linux 6.11](https://www.phoronix.com/news/Linux-6.11-Extensible-Scheduler) 和 LWN 报道 [LWN, 2024/06/11, Extensible scheduler class to be merged for 6.11](https://lwn.net/Articles/978007) 以及 [Linus 强势拍板合入: BPF 赋能调度器终成正果](https://mp.weixin.qq.com/s/dWPWuDtxQBM9Z_GXwKe0kQ). 按照要求, 早在 2024/07/15, Linux 6.11 合并窗口一打开, Tejun Heo 就提交了 sched_ext 的 Pull Request [sched_ext: Initial pull request for v6.11](https://lore.kernel.org/lkml/ZpWjbCQPtuUcvo8r@slm.duckdns.org/). sched_ext 已经演变成近 14k 行新代码, 包括测试和相关基础设施. 但是 Reviewer 指出不少代码需要改进, Qais Yousef 更是提出了一些担忧, 因此因为种种技术问题, 最终 6.11-rc1 发布的时候, sched_ext 并没有被合并. 参见 [phoronix, 2024/07/28, Linus Torvalds Doesn't Merge sched_ext For The Linux 6.11 Merge Window](https://www.phoronix.com/news/Linux-6.11-No-sched_ext). -虽然 v6.11 没有合入 sched_ext, 但是社区关于 sched_ext 的讨论却持续高涨, 邮件列表中一直在讨论如何解决已有的问题, 以便 sched_ext 在即将到来的内核周期中进行合并. 由此产生的工作包括 Peter Zijlstra 的新内核补丁系列, 以更好地为sched_ext做准备. 参见 [phoronix, 2024/08/14, New Linux Kernel Patches Better Prepare For sched_ext](https://www.phoronix.com/news/Linux-sched_ext-Prep) 以及 [phoronix, 2024/08/18, It's Looking Like sched_ext Will Try Again To Land For Linux 6.12](https://www.phoronix.com/news/sched_ext-Ahead-Of-Linux-6.12). +虽然 v6.11 没有合入 sched_ext, 但是社区关于 sched_ext 的讨论却持续高涨, 邮件列表中一直在讨论如何解决已有的问题, 以便 sched_ext 在即将到来的内核周期中进行合并. 由此产生的工作包括 Peter Zijlstra 的新内核补丁系列, 以更好地为 sched_ext 做准备. 参见 [phoronix, 2024/08/14, New Linux Kernel Patches Better Prepare For sched_ext](https://www.phoronix.com/news/Linux-sched_ext-Prep) 以及 [phoronix, 2024/08/18, It's Looking Like sched_ext Will Try Again To Land For Linux 6.12](https://www.phoronix.com/news/sched_ext-Ahead-Of-Linux-6.12). 越来越多的发行版主动将 sched_ext 合入自己的版本中, [phoronix, 2024/10/03, Fedora's Kernel Build Now Enabling Sched_Ext Support](https://www.phoronix.com/news/Fedora-Enables-Sched_Ext). -最终 sched_ext 于 v6.12 合入主线, 参见 [Merge tag 'sched_ext-for-6.12' of git://git.kernel.org/pub/scm/linux/kernel/git/tj/sched_ext](https://git.kernel.org/pub/scm/linux/kernel/git/torvalds/linux.git/commit/?id=88264981f2082248e892a706b2c5004650faac54). 参见 [phoronix, 2024/09/21, Sched_ext Merged For Linux 6.12 - Scheduling Policies As BPF Programs](https://www.phoronix.com/news/Linux-6.12-Lands-sched-ext) 和 [phoronix, 2024/09/21, Oracle's UEK-Next Moves To Linux 6.10, Patches In sched_ext](https://www.phoronix.com/news/Oracle-UEK-Next-Linux-6.10) +最终 sched_ext 于 v6.12 合入主线, 参见 [Merge tag'sched_ext-for-6.12'of git://git.kernel.org/pub/scm/linux/kernel/git/tj/sched_ext](https://git.kernel.org/pub/scm/linux/kernel/git/torvalds/linux.git/commit/?id=88264981f2082248e892a706b2c5004650faac54). 参见 [phoronix, 2024/09/21, Sched_ext Merged For Linux 6.12 - Scheduling Policies As BPF Programs](https://www.phoronix.com/news/Linux-6.12-Lands-sched-ext) 和 [phoronix, 2024/09/21, Oracle's UEK-Next Moves To Linux 6.10, Patches In sched_ext](https://www.phoronix.com/news/Oracle-UEK-Next-Linux-6.10) 在 LPC 2024, 不断增长和活跃的 sched_ext 社区举行了第一次分会 [Sched-Ext: The BPF extensible scheduler class MC](https://lpc.events/event/18/sessions/192/#20240918); sched_ext 在 Scheduler 中掀起了新的创新设计. 参见 [LWN, 20240926, Sched_ext at LPC 2024](https://lwn.net/Articles/991205). Sched_ext 消除了调度程序开发领域的许多进入壁垒, 这将使越来越多的开发人员尝试自己的想法, 并在社区贡献他们感兴趣的发展方向. 一个新的社区正在迅速形成, 它似乎很可能会想出一些新颖的(有时是疯狂的)CPU 调度方法. 这将是未来几年值得关注的有趣领域. -2025 年伊始, NVIDIA 工程师 Andrea Righi 在比利时布鲁塞尔举行的 FOSDEM 上围绕 sched_ext 及其打开的大门进行了两场演讲. Righi 的其中一场演讲是关于 sched_ext 在 Linux 游戏中的使用. 特别是,sched_ext 的性能优势可以在游戏时提高性能. 参见 [FOSDEM, 2025/02/01, Level up your linux gaming: how sched_ext can save your fps](https://fosdem.org/2025/schedule/event/fosdem-2025-4618-level-up-your-linux-gaming-how-schedext-can-save-your-fps). 另外一场演讲是 [Linux 内核调度程序的 Rust 化(在用户空间中), FOSDEM, 2025/02/02, Rust-ifying the Linux kernel scheduler (in user space)](https://fosdem.org/2025/schedule/event/fosdem-2025-4620-rust-ifying-the-linux-kernel-scheduler-in-user-space-). 主要是关于使用 Rust 编程语言通过 scx_rustland 开发 eBPF sched_ext程序的. Righi 在那里指出, Rust 本身并不能使调度变得快速, 而且 scx_rustland 通常不是一个更好的调度器, 但 Rust 中的调度器可以实现更快的实验和更轻松的开发, 以及更好地与其他用户空间组件集成. 随后 phoronix 对此演讲进行了报道 [phoronix, 2025/02/05, NVIDIA Engineer Talks Up sched_ext Linux Scheduler Possibilities At FOSDEM](https://www.phoronix.com/news/NVIDIA-Talks-Up-Sched-Ext). +2025 年伊始, NVIDIA 工程师 Andrea Righi 在比利时布鲁塞尔举行的 FOSDEM 上围绕 sched_ext 及其打开的大门进行了两场演讲. Righi 的其中一场演讲是关于 sched_ext 在 Linux 游戏中的使用. 特别是,sched_ext 的性能优势可以在游戏时提高性能. 参见 [FOSDEM, 2025/02/01, Level up your linux gaming: how sched_ext can save your fps](https://fosdem.org/2025/schedule/event/fosdem-2025-4618-level-up-your-linux-gaming-how-schedext-can-save-your-fps). 另外一场演讲是 [Linux 内核调度程序的 Rust 化(在用户空间中), FOSDEM, 2025/02/02, Rust-ifying the Linux kernel scheduler (in user space)](https://fosdem.org/2025/schedule/event/fosdem-2025-4620-rust-ifying-the-linux-kernel-scheduler-in-user-space-). 主要是关于使用 Rust 编程语言通过 scx_rustland 开发 eBPF sched_ext 程序的. Righi 在那里指出, Rust 本身并不能使调度变得快速, 而且 scx_rustland 通常不是一个更好的调度器, 但 Rust 中的调度器可以实现更快的实验和更轻松的开发, 以及更好地与其他用户空间组件集成. 随后 phoronix 对此演讲进行了报道 [phoronix, 2025/02/05, NVIDIA Engineer Talks Up sched_ext Linux Scheduler Possibilities At FOSDEM](https://www.phoronix.com/news/NVIDIA-Talks-Up-Sched-Ext). @@ -7134,17 +7155,18 @@ LSFMMBPF 2024 上对 sched_ext 进行了讨论 [LWN, 2024/05/23, LSFMMBPF-2024, | 时间 | 作者 | 特性 | 描述 | 是否合入主线 | 链接 | |:----:|:----:|:---:|:----:|:---------:|:----:| | 2021/09/15 | Roman Gushchin | [Scheduler BPF](https://www.phoronix.com/scan.php?page=news_item&px=Linux-BPF-Scheduler) | NA | RFC ☐ | [PatchWork rfc,0/6](https://patchwork.kernel.org/project/netdevbpf/cover/20210916162451.709260-1-guro@fb.com)
*-*-*-*-*-*-*-*
[LPC 2021](https://linuxplumbersconf.org/event/11/contributions/954)
*-*-*-*-*-*-*-*
[LKML](https://lkml.org/lkml/2021/9/16/1049), [LWN](https://lwn.net/Articles/869433), [LWN](https://lwn.net/Articles/873244) | -| 2024/08/14 | Peter Zijlstra | [sched: Prepare for sched_ext](https://git.kernel.org/pub/scm/linux/kernel/git/torvalds/linux.git/log/?id=b2d70222dbf2a2ff7a972a685d249a5d75afa87f) | 为了适应 sched_ext 的需求, 这个补丁集进行了一些必要的重构
1. 重新排列了公平的 pick_task() 函数, 使它们的状态不变, 以便在选择 (和取消排队/出队) 延迟任务后可以轻松重新启动.2. 它需要在上下文切换时拥有下一个任务的最终回调, 以便判断切换是否会离开调度类 (sched_class). [sched: Use set_next_task(.first) where required](https://lore.kernel.org/lkml/20240813224015.614146342@infradead.org/)

3. 调整 put_prev_task() 的位置: 将 (最终)put_prev_task() 推到 pick_task() 之后. 这样在最终的回调中可以确保拥有下一个任务. [sched: Rework pick_next_task()](https://lore.kernel.org/lkml/20240813224016.051225657@infradead.org). 参见 [phoronix, 2024/08/14, New Linux Kernel Patches Better Prepare For sched_ext](https://www.phoronix.com/news/Linux-sched_ext-Prep) | v1 ☐☑✓ v6.12-rc1 | [LORE v1,0/9](https://lore.kernel.org/all/20240813222548.049744955@infradead.org) | +| 2024/08/14 | Peter Zijlstra | [sched: Prepare for sched_ext](https://git.kernel.org/pub/scm/linux/kernel/git/torvalds/linux.git/log/?id=b2d70222dbf2a2ff7a972a685d249a5d75afa87f) | 为了适应 sched_ext 的需求, 这个补丁集进行了一些必要的重构
1. 重新排列了公平的 pick_task() 函数, 使它们的状态不变, 以便在选择 (和取消排队 / 出队) 延迟任务后可以轻松重新启动.2. 它需要在上下文切换时拥有下一个任务的最终回调, 以便判断切换是否会离开调度类 (sched_class). [sched: Use set_next_task(.first) where required](https://lore.kernel.org/lkml/20240813224015.614146342@infradead.org/)

3. 调整 put_prev_task() 的位置: 将 (最终)put_prev_task() 推到 pick_task() 之后. 这样在最终的回调中可以确保拥有下一个任务. [sched: Rework pick_next_task()](https://lore.kernel.org/lkml/20240813224016.051225657@infradead.org). 参见 [phoronix, 2024/08/14, New Linux Kernel Patches Better Prepare For sched_ext](https://www.phoronix.com/news/Linux-sched_ext-Prep) | v1 ☐☑✓ v6.12-rc1 | [LORE v1,0/9](https://lore.kernel.org/all/20240813222548.049744955@infradead.org) | | 2022/11/29 | Tejun Heo | [sched: Implement BPF extensible scheduler class](https://git.kernel.org/pub/scm/linux/kernel/git/torvalds/linux.git/log/?id=513ed0c7ccc103c2ff668154854ec410729a3170) | 随后 FaceBook 进一步扩展, 引入 sched_ext 模块, 使用 eBPF 对调度器进行可编程重构. [Experimental Patches Allow eBPF To Extend The Linux Kernel's Scheduler](https://www.phoronix.com/news/RFC-eBPF-Linux-Scheduler), [The BPF extensible scheduler class](https://lwn.net/Articles/916291), [The extensible scheduler class](https://lwn.net/Articles/922405/), [Patches Updated For Hooking eBPF Programs Into The Linux Kernel Scheduler](https://www.phoronix.com/news/Linux-Scheduler-eBPF-v2-sched). 以及 [Extensible scheduler class rejected](https://lwn.net/Articles/939332) | v1 ☐☑✓ v6.12-rc1 | [LORE](https://lore.kernel.org/all/20221130082313.3241517-1-tj@kernel.org)
*-*-*-*-*-*-*-*
[LORE v2,00/30](https://lore.kernel.org/lkml/20230128001639.3510083-1-tj@kernel.org)
*-*-*-*-*-*-*-*
[2023/11/11, LORE v5](https://lore.kernel.org/all/20231111024835.2164816-1-tj@kernel.org)
*-*-*-*-*-*-*-*
[2024/05/11, LORE v6,00/39](https://lore.kernel.org/all/20240501151312.635565-1-tj@kernel.org)
*-*-*-*-*-*-*-*
[2024/06/18, LORE v7,00/30](https://lore.kernel.org/all/20240618212056.2833381-1-tj@kernel.org) | -| 2024/07/08 | Hongyan Xia | [sched/ext: Add BPF function to fetch rq](https://lore.kernel.org/all/7359b5cd17d56837bc15f4883b21837163c51d37.1720441953.git.hongyan.xia2@arm.com) | rq 包含许多有用的字段, 可用于执行自定义调度程序. 例如, 可以使用各种时钟信号(如 clock_task 和 clock_pelt)来跟踪负载. 它还包含其他 sched_classes 中的统计信息, 这些信息对于在 ext 中驱动调度决策非常有用. | v1 ☐☑✓ | [LORE](https://lore.kernel.org/all/7359b5cd17d56837bc15f4883b21837163c51d37.1720441953.git.hongyan.xia2@arm.com) | +| 2024/07/08 | Hongyan Xia | [sched/ext: Add BPF function to fetch rq](https://lore.kernel.org/all/7359b5cd17d56837bc15f4883b21837163c51d37.1720441953.git.hongyan.xia2@arm.com) | rq 包含许多有用的字段, 可用于执行自定义调度程序. 例如, 可以使用各种时钟信号 (如 clock_task 和 clock_pelt) 来跟踪负载. 它还包含其他 sched_classes 中的统计信息, 这些信息对于在 ext 中驱动调度决策非常有用. | v1 ☐☑✓ | [LORE](https://lore.kernel.org/all/7359b5cd17d56837bc15f4883b21837163c51d37.1720441953.git.hongyan.xia2@arm.com) | | 2024/06/18 | Tejun Heo | [sched_ext: Integrate with schedutil](https://lore.kernel.org/all/20240619031250.2936087-1-tj@kernel.org) | sched_ext 目前没有与 schedutil 集成. 当 schedutil 作为调频 GOVERNOR 时, 频率不受控制. 本补丁集将 sched_ext 与 schedutil 集成, 以便 BPF 调度程序 调度器时可以控制 CPU 频率. 实现 sugov_get_util() 更新, 以添加 BPF 调度器提供的利用率. | v1 ☐☑✓ | [LORE](https://lore.kernel.org/all/20240619031250.2936087-1-tj@kernel.org) | | 2024/07/10 | K Prateek Nayak | [sched/core: Fixes and enhancements around spurious need_resched() and idle load balancing](https://lore.kernel.org/all/20240710090210.41856-1-kprateek.nayak@amd.com) | TODO | v1 ☐☑✓ | [LORE v1,0/3](https://lore.kernel.org/all/20240710090210.41856-1-kprateek.nayak@amd.com) | | 2024/07/19 | Carlos Bilbao | [docs: scheduler: Start documenting the EEVDF scheduler](https://lore.kernel.org/all/20240720002207.444286-1-carlos.bilbao.osdev@gmail.com) | Carlos Bilbao 在更新 CFS(Completely Fair Scheduler) 文档的过程中意识到, 目前还没有指向 EEVDF 文档的资料, 因此他开始了这项工作. | v3 ☐☑✓ | [LORE v3,0/1](https://lore.kernel.org/all/20240720002207.444286-1-carlos.bilbao.osdev@gmail.com) | | 2024/08/26 | Tejun Heo | [sched_ext: Add cgroup support](https://git.kernel.org/pub/scm/linux/kernel/git/torvalds/linux.git/log/?id=a4103eacc2ab408bb65e9902f0857b219fb489de) | TODO | v2 ☐☑✓ v6.12-rc1 | [2024/08/08, LORE v1, 0/7](https://lore.kernel.org/all/20240808002550.731248-1-tj@kernel.org)
*-*-*-*-*-*-*-*
[2024/08/26, LORE v2, 0/5](https://lore.kernel.org/all/20240826225822.791578-1-tj@kernel.org) | -| 2024/09/03 | Tejun Heo | [sched_ext: Apply pick_next_task() updates and remove switch_class()](https://lore.kernel.org/all/20240904080326.1132275-1-tj@kernel.org) | 这个补丁系列针对 Linux 内核调度器(scheduler)的扩展(sched_ext)进行了更新, 以适应内核主分支中对 pick_next_task() 函数的更新, 并移除了 switch_class() 函数. 以下是补丁系列的主要工作内容:
1. 更新 pick_next_task(): 补丁系列替换了 pick_next_task_scx() 函数, 引入了新的 pick_task_scx() 函数. 新函数不需要当前任务已经被排入队列, 并且能够不依赖于当前任务的状态来确定是选择当前任务还是本地直接队列(DSQ)顶部的任务. 统一常规和核心调度器的任务选择路径: 通过这次更新, 常规和基于核心的调度器的任务选择路径被统一, 简化了代码结构.
2. 移除 switch_class(): 在更新后, sched_class->switch_class() 不再被使用, 并从代码中移除. 这意味着调度器扩展不再需要这个接口.
3. 对 BPF 调度器的影响: 这次更改对基于 BPF(Berkeley Packet Filter)的调度器造成了两个微妙的 API 变化, 但这些变化是期望的, 并且现有的所有调度器都应该能够适应这些变化. | v1 ☐☑✓ | [LORE](https://lore.kernel.org/all/20240904080326.1132275-1-tj@kernel.org) | -| 2025/04/05 | Andrea Righi | [sched_ext: Enhance built-in idle selection with allowed CPUs](https://lore.kernel.org/all/20250405134041.13778-1-arighi@nvidia.com) | 许多 scx 调度程序实现了自己的硬性或软性亲和性规则, 以支持拓扑特性, 例如异构架构(例如 big.LITTLE、P 核/E 核), 或者根据特定属性对任务进行分类(例如,仅在 CPU 的子集上运行某些任务). 目前, 尚无机制能够将内置的空闲 CPU 选择策略应用于任意的 CPU 子集. 因此, 调度器通常会实现自己的空闲 CPU 选择策略, 这些策略通常彼此相似, 从而导致了大量的代码重复. 为解决此问题, 扩展内置的空闲 CPU 选择策略, 引入 allowed CPUs 概念.
基于这一概念, BPF 调度器可以将内置的空闲 CPU 选择策略应用于允许的 CPU 子集, 从而在使用内置策略的拓扑优化的同时实现自己的硬/软亲和性规则, 避免了不同调度器之间的代码重复.
为实现此功能, 引入一个新的辅助 kfunc 函数 scx_bpf_select_cpu_and(), 该函数接受一个允许的 CPU 集合的 cpumask: `s32 scx_bpf_select_cpu_and(struct task_struct *p, s32 prev_cpu, u64 wake_flags, const struct cpumask *cpus_allowed, u64 flags);`
在使用 virtme-ng 模拟的 4 插槽/每个插槽 4 核的系统上, 运行经过修改的 scx_bpfland 版本, 该版本使用新的辅助函数 scx_bpf_select_cpu_and() 并将允许域设置为 0xff00 时的负载分布情况, 通过 scx_bpf_select_cpu_dfl() 函数, 任务将在所有可用的 CPU 上均匀分布. | v7 ☐☑✓ | [LORE](https://lore.kernel.org/all/20250405134041.13778-1-arighi@nvidia.com) | -| 2025/05/21 | Andrea Righi | [sched_ext: Unify idle CPU selection kfuncs](https://lore.kernel.org/all/20250521073548.140307-1-arighi@nvidia.com) | 邮件提出了一项针对 Linux 调度器扩展( sched_ext) 的补丁, 旨在统一空闲 CPU 选择的内核函数. Andrea Righi 将 `scx_bpf_select_cpu_dfl()` 和 `scx_bpf_select_cpu_and() ` 合并, 使其可在相同上下文中调用, 并更新了相关的 kselftest 测试用例以反映这一变更. 补丁修改了 6 个文件, 新增 234 行代码, 删除 190 行, 移除了旧的测试文件并新增了新的测试实现. 该改进有助于简化调度器扩展中的 CPU 选择逻辑并提升一致性. | v1 ☐☑✓ | [LORE](https://lore.kernel.org/all/20250521073548.140307-1-arighi@nvidia.com) | -| 2025/06/23 | Henry Huang | [include SCX_OPS_TRACK_MIGRATION](https://lore.kernel.org/all/20250623043220.63793-1-henry.hj@antgroup.com) | 新增 `SCX_OPS_TRACK_MIGRATION` 标志以支持跟踪任务迁移. 当前通过 fentry 在 `enqueue_task_scx` 和 `dequeue_task_scx` 中实现任务迁移跟踪存在限制, 如无法修改 `p-> scx.` 缺少编译优化支持、开销较高等问题. 新标志启用后, 无论任务是否正在迁移, 均会调用 runnable/quiescent 回调. v2 版本根据 `task_on_rq_migrating( p) ` 判断是否设置 `DEQUEUE_MIGRATING` 和 `ENQUEUE_MIGRATING` 标志. | v2 ☐☑✓ | [LORE](https://lore.kernel.org/all/20250623043220.63793-1-henry.hj@antgroup.com) | +| 2024/09/03 | Tejun Heo | [sched_ext: Apply pick_next_task() updates and remove switch_class()](https://lore.kernel.org/all/20240904080326.1132275-1-tj@kernel.org) | 这个补丁系列针对 Linux 内核调度器 (scheduler) 的扩展 (sched_ext) 进行了更新, 以适应内核主分支中对 pick_next_task() 函数的更新, 并移除了 switch_class() 函数. 以下是补丁系列的主要工作内容:
1. 更新 pick_next_task(): 补丁系列替换了 pick_next_task_scx() 函数, 引入了新的 pick_task_scx() 函数. 新函数不需要当前任务已经被排入队列, 并且能够不依赖于当前任务的状态来确定是选择当前任务还是本地直接队列 (DSQ) 顶部的任务. 统一常规和核心调度器的任务选择路径: 通过这次更新, 常规和基于核心的调度器的任务选择路径被统一, 简化了代码结构.
2. 移除 switch_class(): 在更新后, sched_class->switch_class() 不再被使用, 并从代码中移除. 这意味着调度器扩展不再需要这个接口.
3. 对 BPF 调度器的影响: 这次更改对基于 BPF(Berkeley Packet Filter)的调度器造成了两个微妙的 API 变化, 但这些变化是期望的, 并且现有的所有调度器都应该能够适应这些变化. | v1 ☐☑✓ | [LORE](https://lore.kernel.org/all/20240904080326.1132275-1-tj@kernel.org) | +| 2025/04/05 | Andrea Righi | [sched_ext: Enhance built-in idle selection with allowed CPUs](https://lore.kernel.org/all/20250405134041.13778-1-arighi@nvidia.com) | 许多 scx 调度程序实现了自己的硬性或软性亲和性规则, 以支持拓扑特性, 例如异构架构(例如 big.LITTLE、P 核 / E 核), 或者根据特定属性对任务进行分类(例如,仅在 CPU 的子集上运行某些任务). 目前, 尚无机制能够将内置的空闲 CPU 选择策略应用于任意的 CPU 子集. 因此, 调度器通常会实现自己的空闲 CPU 选择策略, 这些策略通常彼此相似, 从而导致了大量的代码重复. 为解决此问题, 扩展内置的空闲 CPU 选择策略, 引入 allowed CPUs 概念.
基于这一概念, BPF 调度器可以将内置的空闲 CPU 选择策略应用于允许的 CPU 子集, 从而在使用内置策略的拓扑优化的同时实现自己的硬 / 软亲和性规则, 避免了不同调度器之间的代码重复.
为实现此功能, 引入一个新的辅助 kfunc 函数 scx_bpf_select_cpu_and(), 该函数接受一个允许的 CPU 集合的 cpumask: `s32 scx_bpf_select_cpu_and(struct task_struct *p, s32 prev_cpu, u64 wake_flags, const struct cpumask *cpus_allowed, u64 flags);`
在使用 virtme-ng 模拟的 4 插槽 / 每个插槽 4 核的系统上, 运行经过修改的 scx_bpfland 版本, 该版本使用新的辅助函数 scx_bpf_select_cpu_and() 并将允许域设置为 0xff00 时的负载分布情况, 通过 scx_bpf_select_cpu_dfl() 函数, 任务将在所有可用的 CPU 上均匀分布. | v7 ☐☑✓ | [LORE](https://lore.kernel.org/all/20250405134041.13778-1-arighi@nvidia.com) | +| 2025/05/21 | Andrea Righi | [sched_ext: Unify idle CPU selection kfuncs](https://git.kernel.org/pub/scm/linux/kernel/git/torvalds/linux.git/log/?id=36adf6fe6cbe59a22f64c004b201685cb6f38c42) | 邮件提出了一项针对 Linux 调度器扩展(sched_ext) 的补丁, 旨在统一空闲 CPU 选择的内核函数. Andrea Righi 将 `scx_bpf_select_cpu_dfl()` 和 `scx_bpf_select_cpu_and() ` 合并, 使其可在相同上下文中调用, 并更新了相关的 kselftest 测试用例以反映这一变更. 补丁修改了 6 个文件, 新增 234 行代码, 删除 190 行, 移除了旧的测试文件并新增了新的测试实现. 该改进有助于简化调度器扩展中的 CPU 选择逻辑并提升一致性. | v1 ☐☑✓ v6.16-rc1 | [LORE](https://lore.kernel.org/all/20250521073548.140307-1-arighi@nvidia.com) | +| 2025/06/23 | Henry Huang | [include SCX_OPS_TRACK_MIGRATION](https://lore.kernel.org/all/20250623043220.63793-1-henry.hj@antgroup.com) | 新增 `SCX_OPS_TRACK_MIGRATION` 标志以支持跟踪任务迁移. 当前通过 fentry 在 `enqueue_task_scx` 和 `dequeue_task_scx` 中实现任务迁移跟踪存在限制, 如无法修改 `p-> scx.` 缺少编译优化支持、开销较高等问题. 新标志启用后, 无论任务是否正在迁移, 均会调用 runnable/quiescent 回调. v2 版本根据 `task_on_rq_migrating(p) ` 判断是否设置 `DEQUEUE_MIGRATING` 和 `ENQUEUE_MIGRATING` 标志. | v2 ☐☑✓ | [LORE](https://lore.kernel.org/all/20250623043220.63793-1-henry.hj@antgroup.com) | +| 2025/06/30 | Marcos Garcia | [sched/ext: Implement cgroup idle state notification](https://lore.kernel.org/all/20250630184709.3831581-1-magazo2005@gmail.com) | 实现 cgroup 空闲状态通知机制. 该补丁新增 `scx_group_set_idle() ` 函数, 通过 RCU 机制安全调用 BPF 调度器的 `cgroup_set_idle` 回调函数, 通知任务组(cgroup) 进入空闲或活动状态. 这使调度器能够优化资源分配、实现节能策略并改善负载均衡决策. 该功能为可选机制, 不依赖此通知的调度器可不实现相关回调. | v2 ☐☑✓ | [LORE](https://lore.kernel.org/all/20250630184709.3831581-1-magazo2005@gmail.com) | ##### 11.2.2.1.2 WAKE/LLC/NUMA 感知与支持 @@ -7153,8 +7175,8 @@ LSFMMBPF 2024 上对 sched_ext 进行了讨论 [LWN, 2024/05/23, LSFMMBPF-2024, | 时间 | 作者 | 特性 | 描述 | 是否合入主线 | 链接 | |:----:|:----:|:---:|:----:|:---------:|:----:| | 2024/10/18 | Andrea Righi | [sched_ext: improve WAKE_SYNC behavior for default idle CPU selection](https://git.kernel.org/pub/scm/linux/kernel/git/torvalds/linux.git/commit/?id=21b8964826c4da3cc8ed89308f8838cfd221429f) | 这个补丁的主要目的是改进 sched_ext 模块在处理 WAKE_SYNC 唤醒行为时的默认空闲 CPU 选择逻辑. 在 sched_ext 模块的默认空闲 CPU 选择逻辑中, 当处理 WF_SYNC 唤醒时, 通常会尝试将任务迁移到唤醒者所在的 CPU. 这是因为唤醒者通常会在唤醒任务后释放 CPU. 然而,有时保留任务在其原来的 CPU 上可能更有利, 尤其是在唤醒者所在的 CPU 与其原 CPU 之间有缓存亲缘关系的情况下. | v1 ☐☑✓ v6.13-rc1 | [2024/10/18, LORE](https://lore.kernel.org/all/20241018094033.160188-1-andrea.righi@linux.dev)
*-*-*-*-*-*-*-*
[2024/10/18, LORE v2](https://lore.kernel.org/all/20241018180951.599625-1-andrea.righi@linux.dev) | -| 2024/10/23 | Andrea Righi | [sched_ext: Introduce LLC awareness to the default idle selection policy](https://git.kernel.org/pub/scm/linux/kernel/git/torvalds/linux.git/log/?id=dfa4ed29b18c5f26cd311b0da7f049dbb2a2b33b) | 主要目的是为 sched_ext 调度扩展模块中的默认空闲 CPU 选择策略引入 LLC(Last Level Cache) 意识. 这使得使用内置策略的调度器在具有多个 LLC 的系统中(如 NUMA 系统或基于芯片的架构)做出更明智的空闲 CPU 选择决策, 使得任务能够更好地保持在相同的 LLC 域内, 有效改善缓存局部性, 从而提高性能. LLC 意识目前仅应用于那些可以在系统中所有 CPU 上运行的任务. 如果任务的亲和性 (affinity) 被用户空间修改, 那么用户空间需要负责选择合适的优化调度域. 通过这些改动, sched_ext 调度器在处理多 LLC 系统时, 能够更有效地管理缓存资源, 进而提高整体的系统性能. 参见 phoronix 报道 [phoronix, 2024/10/28, Sched_ext Scheduler Idle Selection Being Extended For LLC & NUMA Awareness](https://www.phoronix.com/news/sched_ext-NUMA-Awareness) 和 [phoronix, 2024/11/22, Sched_Ext Changes Merged For Linux 6.13 With LLC & NUMA Awareness](https://www.phoronix.com/news/Linux-6.13-Sched_Ext). | v3 ☐☑✓ v6.13-rc1 | [LORE](https://lore.kernel.org/all/20241022234718.63258-1-arighi@nvidia.com) | -| 2024/10/27 | Andrea Righi | [sched_ext: Introduce NUMA awareness to the default idle selection policy](https://git.kernel.org/pub/scm/linux/kernel/git/torvalds/linux.git/commit/?id=860a45219bce09d9ebac883cfcf9b5b0b8a8a999) | 为 sched_ext 模块引入了 NUMA 意识, 使其在选择空闲 CPU 时优先考虑同一 NUMA 节点内的 CPU. 类似于之前对 LLC(Last Level Cache)意识的支持. 其目的是在选择空闲 CPU 时优先考虑同一 NUMA 节点内的 CPU, 以优化性能和减少跨节点的通信延迟. 扩展内置的空闲 CPU 选择策略, 使其也优先考虑同一 NUMA 节点内的 CPU, 始终优先考虑来自完全空闲的 SMT 内核的 CPU. 如果可能,请选择相同的 CPU, 选择同一 LLC 域内的 CPU, 选择同一 NUMA 节点中的 CPU. 目前的逻辑仅试图让任务在同一 NUMA 节点内运行. 如果节点内的所有 CPU 都忙m 则随机选择下一个 NUMA 节点. 未来可以考虑改进 NUMA 节点的选择逻辑, 以考虑从当前 CPU 到目标 NUMA 节点的距离. 参见 phoronix 报道 [phoronix, 2024/10/28, Sched_ext Scheduler Idle Selection Being Extended For LLC & NUMA Awareness](https://www.phoronix.com/news/sched_ext-NUMA-Awareness) 和 [phoronix, 2024/11/22, Sched_Ext Changes Merged For Linux 6.13 With LLC & NUMA Awareness](https://www.phoronix.com/news/Linux-6.13-Sched_Ext).. | v3 ☐☑✓ v6.13-rc1 | [2024/10/27, LORE v4](https://lore.kernel.org/all/20241027174953.49655-1-arighi@nvidia.com)
*-*-*-*-*-*-*-*
[2024/10/25, LORE v5](https://lore.kernel.org/all/20241029101618.318812-1-arighi@nvidia.com) | +| 2024/10/23 | Andrea Righi | [sched_ext: Introduce LLC awareness to the default idle selection policy](https://git.kernel.org/pub/scm/linux/kernel/git/torvalds/linux.git/log/?id=dfa4ed29b18c5f26cd311b0da7f049dbb2a2b33b) | 主要目的是为 sched_ext 调度扩展模块中的默认空闲 CPU 选择策略引入 LLC(Last Level Cache) 意识. 这使得使用内置策略的调度器在具有多个 LLC 的系统中 (如 NUMA 系统或基于芯片的架构) 做出更明智的空闲 CPU 选择决策, 使得任务能够更好地保持在相同的 LLC 域内, 有效改善缓存局部性, 从而提高性能. LLC 意识目前仅应用于那些可以在系统中所有 CPU 上运行的任务. 如果任务的亲和性 (affinity) 被用户空间修改, 那么用户空间需要负责选择合适的优化调度域. 通过这些改动, sched_ext 调度器在处理多 LLC 系统时, 能够更有效地管理缓存资源, 进而提高整体的系统性能. 参见 phoronix 报道 [phoronix, 2024/10/28, Sched_ext Scheduler Idle Selection Being Extended For LLC & NUMA Awareness](https://www.phoronix.com/news/sched_ext-NUMA-Awareness) 和 [phoronix, 2024/11/22, Sched_Ext Changes Merged For Linux 6.13 With LLC & NUMA Awareness](https://www.phoronix.com/news/Linux-6.13-Sched_Ext). | v3 ☐☑✓ v6.13-rc1 | [LORE](https://lore.kernel.org/all/20241022234718.63258-1-arighi@nvidia.com) | +| 2024/10/27 | Andrea Righi | [sched_ext: Introduce NUMA awareness to the default idle selection policy](https://git.kernel.org/pub/scm/linux/kernel/git/torvalds/linux.git/commit/?id=860a45219bce09d9ebac883cfcf9b5b0b8a8a999) | 为 sched_ext 模块引入了 NUMA 意识, 使其在选择空闲 CPU 时优先考虑同一 NUMA 节点内的 CPU. 类似于之前对 LLC(Last Level Cache)意识的支持. 其目的是在选择空闲 CPU 时优先考虑同一 NUMA 节点内的 CPU, 以优化性能和减少跨节点的通信延迟. 扩展内置的空闲 CPU 选择策略, 使其也优先考虑同一 NUMA 节点内的 CPU, 始终优先考虑来自完全空闲的 SMT 内核的 CPU. 如果可能,请选择相同的 CPU, 选择同一 LLC 域内的 CPU, 选择同一 NUMA 节点中的 CPU. 目前的逻辑仅试图让任务在同一 NUMA 节点内运行. 如果节点内的所有 CPU 都忙 m 则随机选择下一个 NUMA 节点. 未来可以考虑改进 NUMA 节点的选择逻辑, 以考虑从当前 CPU 到目标 NUMA 节点的距离. 参见 phoronix 报道 [phoronix, 2024/10/28, Sched_ext Scheduler Idle Selection Being Extended For LLC & NUMA Awareness](https://www.phoronix.com/news/sched_ext-NUMA-Awareness) 和 [phoronix, 2024/11/22, Sched_Ext Changes Merged For Linux 6.13 With LLC & NUMA Awareness](https://www.phoronix.com/news/Linux-6.13-Sched_Ext).. | v3 ☐☑✓ v6.13-rc1 | [2024/10/27, LORE v4](https://lore.kernel.org/all/20241027174953.49655-1-arighi@nvidia.com)
*-*-*-*-*-*-*-*
[2024/10/25, LORE v5](https://lore.kernel.org/all/20241029101618.318812-1-arighi@nvidia.com) | | 2024/11/08 | Andrea Righi | [sched_ext: Do not enable LLC/NUMA optimizations when domains overlap](https://git.kernel.org/pub/scm/linux/kernel/git/torvalds/linux.git/log/?id=f6ce6b949304bc7a54dbfea98402080c42bbc9a4) | 该补丁的主要目的是在 LLC(Last Level Cache)和 NUMA 域完全重叠时, 避免启用冗余的优化, 以提高调度器扩展策略的效率. 当 LLC 和 NUMA 域完全重叠时, 同时启用这两个域的优化是多余的, 因为这会导致两次在相同的域内搜索空闲 CPU. 此外, 如果所有在线 CPU 都在一个单一的 LLC 域内, 那么 LLC 优化也是不必要的. 因此, 此补丁通过检测重叠的域, 并仅在必要时启用拓扑优化来解决这个问题. | v3 ☐☑✓ v6.13-rc1 | [LORE](https://lore.kernel.org/all/20241108000136.184909-1-arighi@nvidia.com) | | 2025/02/26 | Andrea Righi | [selftests/sched_ext: Add NUMA-aware scheduler test](https://lore.kernel.org/all/20250226065057.151976-1-arighi@nvidia.com) | TODO | v1 ☐☑✓ | [LORE](https://lore.kernel.org/all/20250226065057.151976-1-arighi@nvidia.com) | @@ -7164,14 +7186,14 @@ LSFMMBPF 2024 上对 sched_ext 进行了讨论 [LWN, 2024/05/23, LSFMMBPF-2024, | 时间 | 作者 | 特性 | 描述 | 是否合入主线 | 链接 | |:----:|:----:|:---:|:----:|:---------:|:----:| -| 2024/11/26 | Andrea Righi | [sched_ext: split global idle cpumask into per-NUMA cpumasks](https://lore.kernel.org/all/20241126101259.52077-1-arighi@nvidia.com) | 这组补丁的主要目的是将全局的空闲 CPU 掩码(idle cpumask)拆分为每个 NUMA 节点的空闲 CPU 掩码, 以提高在大型 NUMA 系统上的可扩展性和性能.
1. 引入新的节点掩码遍历宏 `for_each_node_mask_from` 和 `for_each_node_state_from`, 以便更方便地遍历特定节点状态的节点.
2. 将全局的空闲 CPU 掩码拆分为每个 NUMA 节点的空闲 CPU 掩码, 以提高在大型 NUMA 系统上的可扩展性和性能.
通过这些改动, 系统在处理大量任务和高竞争情况下的性能和稳定性得到了显著提升, 特别是对于 NUMA 系统, 减少了跨节点的缓存行访问, 提高了系统的整体效率. | v1 ☐☑✓ | [LORE](https://lore.kernel.org/all/20241126101259.52077-1-arighi@nvidia.com) | +| 2024/11/26 | Andrea Righi | [sched_ext: split global idle cpumask into per-NUMA cpumasks](https://lore.kernel.org/all/20241126101259.52077-1-arighi@nvidia.com) | 这组补丁的主要目的是将全局的空闲 CPU 掩码 (idle cpumask) 拆分为每个 NUMA 节点的空闲 CPU 掩码, 以提高在大型 NUMA 系统上的可扩展性和性能.
1. 引入新的节点掩码遍历宏 `for_each_node_mask_from` 和 `for_each_node_state_from`, 以便更方便地遍历特定节点状态的节点.
2. 将全局的空闲 CPU 掩码拆分为每个 NUMA 节点的空闲 CPU 掩码, 以提高在大型 NUMA 系统上的可扩展性和性能.
通过这些改动, 系统在处理大量任务和高竞争情况下的性能和稳定性得到了显著提升, 特别是对于 NUMA 系统, 减少了跨节点的缓存行访问, 提高了系统的整体效率. | v1 ☐☑✓ | [LORE](https://lore.kernel.org/all/20241126101259.52077-1-arighi@nvidia.com) | | 2024/07/09 | Tejun Heo | [sched_ext: Implement DSQ iterator](https://lore.kernel.org/all/20240709004041.1111039-1-tj@kernel.org) | 目的是为调度器扩展 (sched_ext) 实现 DSQ(Distribution Skilled Queue) 迭代器. DSQs 在消费路径中是不透明的, eBPF 调度器没有办法知道哪些任务正在被考虑以及哪个任务被选中. 这个补丁集合添加了 BPF DSQ 迭代器,以便 BPF 调度器在使用 DSQs. | v5 ☐☑✓ | [LORE v5](https://lore.kernel.org/all/20240709004041.1111039-1-tj@kernel.org) | | 2024/07/10 | Tejun Heo | [sched_ext: Allow SCX_DSQ_LOCAL_ON for direct dispatches](https://lore.kernel.org/all/20240711011434.1421572-1-tj@kernel.org) | 主要目的是改进调度器扩展 (sched_ext) 以允许在直接调度时使用 SCX_DSQ_LOCAL_ON. 在 ops.dispatch()中, 可以使用 SCX_DSQ_LOCAL_ON 将任务调度到任何 CPU 的本地 DSQ(分布技能队列). 但在 ops.select_cpu() 和 ops.enqueue() 中的直接调度不允许这样做. 这是因为将任务调度到远程 CPU 的本地 DSQ 需要同时锁定任务的当前 rq 和新 rq, 而这种双重锁定不能直接从 ops.enqueue()完成. 这个 API 的缺失迫使调度器使用不直接或非最优的工作方式, 例如在这些情况下跳过直接调度. | v2 ☐☑✓ | [LORE](https://lore.kernel.org/all/20240709212137.1199269-1-tj@kernel.org)
*-*-*-*-*-*-*-*
[LORE](https://lore.kernel.org/all/20240711011434.1421572-1-tj@kernel.org) | | 2024/08/30 | Tejun Heo | [sched_ext: Implement `scx_bpf_dispatch[_vtime]_from_dsq()`](https://lore.kernel.org/all/20240830110415.116090-1-tj@kernel.org) | 这个补丁集通过增加 `scx_bpf_dispatch[_vtime]_from_dsq()` 函数, 提升了 Linux 内核调度器在处理延迟队列 (Delayed Scheduling Queues, DSQ) 时的灵活性. 这项改动使得开发者能够在更广泛的上下文中灵活地控制任务的调度, 特别是在不持有 rq 锁的情况下. 这对于需要高度定制化调度策略的场景特别有用, 例如在使用 BPF 程序进行复杂调度逻辑的实现时, 允许将任务从一个队列移动到另一个队列以优化资源使用或响应特定的系统状态变化. 背景: 在当前的内核调度器中, 一旦一个任务被放入 DSQ(延迟调度队列), 可以对该任务执行的操作是有限的. 内置的本地和全局 DSQ 中的任务会被自动执行, 除了从队列中移除之外, 唯一能对用户 DSQ 中的任务进行的操作就是通过 scx_bpf_consume() 将第一个任务移到调度的本地 DSQ 中. 这种操作的局限性有时会造成不便, 并且已经收到了多个功能请求来改善这一情况. 这个补丁集实现了一个新的函数 `scx_bpf_dispatch[_vtime]_from_dsq()`, 可以在 DSQ 迭代期间调用, 并且可以将任务移动到任何 DSQ 中, 包括本地 DSQ、全局 DSQ 和用户 DSQ. 这个函数可以在 ops.dispatch() 以及其他不持有 rq 锁的 BPF 上下文中调用, 包括 BPF 定时器和系统调用 (SYSCALL) 程序. 主要功能点:
1. 增加调度灵活性: 新函数 `scx_bpf_dispatch[_vtime]_from_dsq()` 允许在 DSQ 迭代过程中将任务从一个 DSQ 移动到另一个 DSQ, 提供了更多的灵活性.
2. 适用范围广泛: 可以在多种 BPF 上下文中调用, 包括 BPF 定时器和系统调用程序, 增强了调度策略的可编程性和适应性.
3. 不持有 rq 锁: 这些函数可以在不持有 rq 锁的情况下调用, 这意味着它们可以在更广泛的上下文中使用, 提高了调度的灵活性. | v1 ☐☑✓ | [LORE](https://lore.kernel.org/all/20240830110415.116090-1-tj@kernel.org) | -| 2024/09/24 | Tejun Heo | [sched_ext: Split %SCX_DSQ_GLOBAL per-node](https://git.kernel.org/pub/scm/linux/kernel/git/torvalds/linux.git/log/?id=6f34d8d382d64e7d8e77f5a9ddfd06f4c04937b0) | 这组补丁的主要目的是解决在 BPF 调度器的绕过模式 (bypass mode) 中出现的活锁(livelock)问题. 具体来说, 它将全局调度队列(DSQ)按 NUMA 节点拆分, 以减少跨节点的缓存行访问和调度, 从而提高系统的稳定性和性能. | v1 ☐☑✓ v6.13-rc1 | [LORE](https://lore.kernel.org/all/20240925000622.1972325-1-tj@kernel.org) | +| 2024/09/24 | Tejun Heo | [sched_ext: Split %SCX_DSQ_GLOBAL per-node](https://git.kernel.org/pub/scm/linux/kernel/git/torvalds/linux.git/log/?id=6f34d8d382d64e7d8e77f5a9ddfd06f4c04937b0) | 这组补丁的主要目的是解决在 BPF 调度器的绕过模式 (bypass mode) 中出现的活锁 (livelock) 问题. 具体来说, 它将全局调度队列 (DSQ) 按 NUMA 节点拆分, 以减少跨节点的缓存行访问和调度, 从而提高系统的稳定性和性能. | v1 ☐☑✓ v6.13-rc1 | [LORE](https://lore.kernel.org/all/20240925000622.1972325-1-tj@kernel.org) | | 2024/11/05 | Tejun Heo | [sched_ext: Avoid live-locking bypass mode switching](https://git.kernel.org/pub/scm/linux/kernel/git/torvalds/linux.git/log/?id=efe231d9debf6db812bebb262407c95b21cdb8a2) | TODO | v1 ☐☑✓ v6.13-rc1 | [LORE v1,0/2](https://lore.kernel.org/all/ZyqSm4B4NuzuHEbp@slm.duckdns.org) | -| 2025/06/04 | Andrea Righi | [sched_ext: Improve code modularization](https://lore.kernel.org/all/20250604143547.708202-1-arighi@nvidia.com) |旨在改进 Linux 调度器扩展(sched_ext) 的代码模块化. 尽管当前调度器代码将多个调度类集中在一个 `.c` 文件中, 补丁系列尝试通过将内部函数标记为 `static`、在头文件中声明共享符号等方式, 使代码结构更清晰、更易维护.
补丁内容包括: 移除 `scx_bpf_cpu_node() ` 中不必要的 `#ifdef`、将 `ext_idle. c` 中的本地函数设为 `static`、将 `scx_rq_bypassing( ) ` 设为内联函数、以及使 `scx_locked_rq( ) ` 可共享.
该系列是代码清理的第一步, 后续仍有改进空间, 但当前改动较小以减少对开发流程的影响. 目标是为 sched_ext 提供更良好的代码结构和可维护性. | v1 ☐☑✓ | [2025/06/04, LORE v1, 0/4](https://lore.kernel.org/all/20250604143547.708202-1-arighi@nvidia.com) | -| 2025/06/10 | liuwenfang | [sched_ext: introduce cpu tick](https://lore.kernel.org/all/2d771c1f293845e09edf73f5db5b2837@honor.com) | 邮件提出了一项针对 Linux 调度器扩展(sched_ext) 的补丁, 新增 `cpu_tick` 回调机制. 其核心目的是在 CPU 非空闲时, 定期通知 BPF 调度器检查本地调度队列(dsq) 中是否存在长时间可运行的 scx 任务, 以便采取策略(如迁移任务) 提升调度性能. 当前场景下, 若某个 CPU 正运行 RT 任务, scx任务可能被饿死 100ms, 引入 `cpu_tick` 可帮助调度器更及时响应并优化调度决策. 补丁在 `ext. c` 中增加了 15 行代码, 定义并实现了 `cpu_tick` 操作.| v1 ☐☑✓ | [LORE](https://lore.kernel.org/all/2d771c1f293845e09edf73f5db5b2837@honor.com) | +| 2025/06/04 | Andrea Righi | [sched_ext: Improve code modularization](https://lore.kernel.org/all/20250604143547.708202-1-arighi@nvidia.com) | 旨在改进 Linux 调度器扩展(sched_ext) 的代码模块化. 尽管当前调度器代码将多个调度类集中在一个 `.c` 文件中, 补丁系列尝试通过将内部函数标记为 `static`、在头文件中声明共享符号等方式, 使代码结构更清晰、更易维护.
补丁内容包括: 移除 `scx_bpf_cpu_node() ` 中不必要的 `#ifdef`、将 `ext_idle. c` 中的本地函数设为 `static`、将 `scx_rq_bypassing() ` 设为内联函数、以及使 `scx_locked_rq() ` 可共享.
该系列是代码清理的第一步, 后续仍有改进空间, 但当前改动较小以减少对开发流程的影响. 目标是为 sched_ext 提供更良好的代码结构和可维护性. | v1 ☐☑✓ | [2025/06/04, LORE v1, 0/4](https://lore.kernel.org/all/20250604143547.708202-1-arighi@nvidia.com) | +| 2025/06/10 | liuwenfang | [sched_ext: introduce cpu tick](https://lore.kernel.org/all/2d771c1f293845e09edf73f5db5b2837@honor.com) | 邮件提出了一项针对 Linux 调度器扩展(sched_ext) 的补丁, 新增 `cpu_tick` 回调机制. 其核心目的是在 CPU 非空闲时, 定期通知 BPF 调度器检查本地调度队列(dsq) 中是否存在长时间可运行的 scx 任务, 以便采取策略(如迁移任务) 提升调度性能. 当前场景下, 若某个 CPU 正运行 RT 任务, scx 任务可能被饿死 100ms, 引入 `cpu_tick` 可帮助调度器更及时响应并优化调度决策. 补丁在 `ext. c` 中增加了 15 行代码, 定义并实现了 `cpu_tick` 操作.| v1 ☐☑✓ | [LORE](https://lore.kernel.org/all/2d771c1f293845e09edf73f5db5b2837@honor.com) | ##### 11.2.2.1.4 scx_sched @@ -7179,7 +7201,7 @@ LSFMMBPF 2024 上对 sched_ext 进行了讨论 [LWN, 2024/05/23, LSFMMBPF-2024, | 时间 | 作者 | 特性 | 描述 | 是否合入主线 | 链接 | |:---:|:----:|:---:|:----:|:---------:|:----:| -| 2025/04/23 | Tejun Heo | [sched_ext: Introduce scx_sched](https://lore.kernel.org/all/20250423234542.1890867-1-tj@kernel.org) | 为支持多个分层调度器做准备. 该补丁集将原本全局的调度状态封装进新的结构体 `scx_sched`, 以支持未来多调度器实例的管理. 目前仅支持系统范围的根调度器( `scx_root`), 后续补丁将逐步引入多调度器支持, 并逐一更新相关代码.
补丁内容主要包括: 将全局变量移入 `scx_sched` 结构、优化内存分配、内联函数重构、事件统计结构迁移等. 尽管代码变动较大, 但均为内部结构调整, 预期不会带来用户可见的变化.
补丁集可通过指定 Git 分支获取, 共修改 2 个文件, 新增 491 行, 删除 398 行. | v1 ☐☑✓ | [2025/04/23, LORE v1, 00/12](https://lore.kernel.org/all/20250423234542.1890867-1-tj@kernel.org)
*-*-*-*-*-*-*-*
[2025/04/25, LORE v2, 00/12](https://lore.kernel.org/all/20250425215840.2334972-1-tj@kernel.org/) | +| 2025/04/23 | Tejun Heo | [sched_ext: Introduce scx_sched](https://lore.kernel.org/all/20250423234542.1890867-1-tj@kernel.org) | 为支持多个分层调度器做准备. 该补丁集将原本全局的调度状态封装进新的结构体 `scx_sched`, 以支持未来多调度器实例的管理. 目前仅支持系统范围的根调度器(`scx_root`), 后续补丁将逐步引入多调度器支持, 并逐一更新相关代码.
补丁内容主要包括: 将全局变量移入 `scx_sched` 结构、优化内存分配、内联函数重构、事件统计结构迁移等. 尽管代码变动较大, 但均为内部结构调整, 预期不会带来用户可见的变化. 参见 [phoronix, 2025/06/04, Sched_Ext Boasts CPU Selection Improvements In Linux 6.16](https://www.phoronix.com/news/Linux-6.16-Sched-Ext) | v1 ☐☑✓ | [2025/04/23, LORE v1, 00/12](https://lore.kernel.org/all/20250423234542.1890867-1-tj@kernel.org)
*-*-*-*-*-*-*-*
[2025/04/25, LORE v2, 00/12](https://lore.kernel.org/all/20250425215840.2334972-1-tj@kernel.org/) | @@ -7193,6 +7215,21 @@ LSFMMBPF 2024 上对 sched_ext 进行了讨论 [LWN, 2024/05/23, LSFMMBPF-2024, | 2025/04/19 | Andrea Righi | [sched_ext: Introduce rq lock tracking](https://lore.kernel.org/all/20250419123536.154469-1-arighi@nvidia.com) | TODO | v1 ☐☑✓ | [2025/04/19, LORE v1, 0/2](https://lore.kernel.org/all/20250419123536.154469-1-arighi@nvidia.com)
*-*-*-*-*-*-*-*
[2025/04/20, LORE v2, 0/2](https://lore.kernel.org/lkml/20250420193106.42533-1-arighi@nvidia.com)
*-*-*-*-*-*-*-*
[2025/04/22, LORE v3,0/2](https://lore.kernel.org/all/20250422082907.110167-1-arighi@nvidia.com/) | +##### 11.2.2.1.X sched_ext 调度器汇总 +------- + + +[Pluggable CPU schedulers](https://en.opensuse.org/Pluggable_CPU_schedulers) + + +| 编号 | 调度器 | 语言 | 用途 | +|:---:|:-----:|:----:|:---:| +| 1 | scx_lavd | NA | 程序专注于交互性, 具体来说, 就是始终如一地从游戏中获得更高的帧速率. | +| 2 | scx_rustland | RUST | 将调度事件转发到用户空间, 在那里做出决策. 还包含 scx_rusty 用于复杂 CPU 拓扑上的负载平衡, 以及, 一个 scx_layered 分区计划程序. | +| 3 | NA | +| 4 | [scx_packet](https://free5gc.org/blog/20250509/20250509) | RUST | [Free5GC](https://free5gc.org/) 项目试验的 scx_packet 调度程序. 它使用了一种相对简单的算法: 系统中的一半 CPU 保留给延迟敏感的网络处理任务, 而另一半则交给 CPU 绑定的一般处理. 但这个调度程序对所有网络流量一视同仁——语音通话、网页浏览和流媒体都流向同一个 CPU. 这可能会导致语音数据被阻止在下载流量之后, 并且紧急呼叫与社交媒体活动具有相同的优先级. 随着工作负载的转移, 这种方法还导致一些 CPU 过载, 而另一些 CPU 则处于空闲状态. 最后, 某些数据包需要比其他数据包更多的处理; 应单独安排对 CPU 密集型数据包的处理. | +| 5 | [scx_rusty](https://github.com/vax-r/scx/tree/scx_rusty_MLLB) | RUST | Ching-Chun("Jim") Huang 展示了其将 (本地) 机器学习应用于在复杂系统上调度器负载均衡的工作成果, [Improve Load Balancing with Machine Learning Techniques based on sched_ext Framework](https://static.sched.com/hosted_files/ossna2025/d2/Improve-Load-Balancing-With-Machine-Learning-Techniques-based-on-sched_ext.pdf). Free5GC 开发人员研究通过机器学习来改进调度器的负载均衡. 在此类系统上进行调度需要考虑许多输入维度; 此外, 调度程序还必须考虑每个任务的优先级、其 CPU 要求、到目前为止的虚拟运行时间以及最近的 CPU 使用模式. 必须考虑每个 CPU 上的负载, 以及 NUMA 距离、缓存共享和工作频率. 当然, 还有特定于工作负载的因素. 基于 scx_rusty 来尝试考虑所有这些参数并决定何时应该将任务从一个 CPU 移动到另一个 CPU. 它最初以数据收集模式运行, 查看迁移决策及其结果; 然后, 这些决策用于训练模型(在用户空间中), 该模型随后存储在 BPF 映射中. 然后, 调度程序可以在内核内使用此模型来做出负载平衡决策. 这些决策的结果会不断被测量并报告回用户空间, 从而随着时间的推移更新模型. 在使用最重要的内核编译基准测试的测试中, 该调度器的编译时间比 EEVDF 调度器缩短了 10%, 任务迁移的数量减少了 77%. Huang 总结了机器学习在这种情况下起作用的原因: 在这种复杂的环境中进行调度是一个模式识别问题, 而神经网络擅长这项任务. 调度程序能够平衡相互竞争的目标, 并自动针对新的架构和工作负载进行自我重新训练. 调度程序能够为每个迁移决策考虑 15 个单独的参数, 并根据结果调整其模型. [2025 Open Source Summit North America](https://events.linuxfoundation.org/open-source-summit-north-america), 参见 LWN 报道 [LWN 2025/07/01, Improved load balancing with machine learning](https://lwn.net/Articles/1027096). | + #### 11.2.2.2 Google 的 ghOSt ------- @@ -7212,7 +7249,7 @@ LSFMMBPF 2024 上对 sched_ext 进行了讨论 [LWN, 2024/05/23, LSFMMBPF-2024, | 时间 | 作者 | 特性 | 描述 | 是否合入主线 | 链接 | |:----:|:----:|:---:|:----:|:---------:|:----:| -| 2024/04/03 | Vineeth Pillai (Google) | [Paravirt Scheduling (Dynamic vcpu priority management)](https://lore.kernel.org/all/20240403140116.3002809-1-vineeth@bitbyteword.org) | 双重调度是虚拟化主机的一个问题, 在这种情况下, 主机调度 VCPU 时不知道 VCPU 运行的是什么, 而客户机调度任务时不知道 VCPU 实际运行在哪里. 任务却不知道 VCPU 实际运行在哪里. 这会导致延迟、功耗、资源利用率等相关问题. 理想的解决方案是建立一个合作调度框架, 让客户机和主机共享调度相关信息, 并做出明智的调度决策, 以最佳方式处理工作负载. 作为第一步, 我们正在努力减少延迟 的延迟. 这一系列补丁旨在实施一个框架, 根据在 VCPU 上运行的工作负载的需求, 动态管理 VCPU 线程的优先级. 对延迟敏感的工作负载(nmi、irq、softirq、critical section、RT 任务等)将从主机获得提升, 以尽量减少延迟. 当主机掌握有关 VCPU 上将要运行的内容的足够信息时, 它可以主动提升 VCPU 线程, 例如: 注入中断. 在其他情况下, 如果 VCPU 尚未提升, 客户机可以请求提升. 在对延迟敏感的工作负载完成后, 客户机可随后请求取消提升. 如果需要, 客户机也可以请求提升. 共享内存区域用于交流调度信息, 客户机共享其对优先级提升的需求, 主机共享 VCPU 的提升状态. 客户机在需要提升时设置一个标志, 然后继续运行. 主机在下一次 VMEXIT 时读取该标志, 并提升 VCPU 线程. 取消提升是同步进行的, 这样当客户机不运行任何对延迟敏感的工作负载时, 主机工作负载就能与客户机公平竞争. [v1 RFC](https://lore.kernel.org/all/20231214024727.3503870-1-vineeth@bitbyteword.org) 于 2023 年 12 月发布. 主要分歧在于实施过程中, 补丁会在 kvm 和 kvm 中做出调度策略决定. 而 kvm 并不适合这样做. 建议将调度策略决策移出 kvm, 让 kvm 只处理调度策略决策所需的通知. 政策决策所需的通知. 本补丁系列是实现分层设计功能的迭代步骤 设计的迭代步骤, 在这种设计中, 策略可以作为内核内置程序、内核模块或 bpf 程序在 kvm 之外实现. 参见 LWN 报道 [LWN, 2024/05/22, LSFMMBPF-2024, Virtual machine scheduling with BPF](https://lwn.net/Articles/974363). | v2 ☐☑✓ | [2023/12/13, LORE v1,0/8](https://lore.kernel.org/all/20231214024727.3503870-1-vineeth@bitbyteword.org)
*-*-*-*-*-*-*-*
[2024/04/03, LORE v2,0/5](https://lore.kernel.org/all/20240403140116.3002809-1-vineeth@bitbyteword.org) | +| 2024/04/03 | Vineeth Pillai (Google) | [Paravirt Scheduling (Dynamic vcpu priority management)](https://lore.kernel.org/all/20240403140116.3002809-1-vineeth@bitbyteword.org) | 双重调度是虚拟化主机的一个问题, 在这种情况下, 主机调度 VCPU 时不知道 VCPU 运行的是什么, 而客户机调度任务时不知道 VCPU 实际运行在哪里. 任务却不知道 VCPU 实际运行在哪里. 这会导致延迟、功耗、资源利用率等相关问题. 理想的解决方案是建立一个合作调度框架, 让客户机和主机共享调度相关信息, 并做出明智的调度决策, 以最佳方式处理工作负载. 作为第一步, 我们正在努力减少延迟 的延迟. 这一系列补丁旨在实施一个框架, 根据在 VCPU 上运行的工作负载的需求, 动态管理 VCPU 线程的优先级. 对延迟敏感的工作负载 (nmi、irq、softirq、critical section、RT 任务等) 将从主机获得提升, 以尽量减少延迟. 当主机掌握有关 VCPU 上将要运行的内容的足够信息时, 它可以主动提升 VCPU 线程, 例如: 注入中断. 在其他情况下, 如果 VCPU 尚未提升, 客户机可以请求提升. 在对延迟敏感的工作负载完成后, 客户机可随后请求取消提升. 如果需要, 客户机也可以请求提升. 共享内存区域用于交流调度信息, 客户机共享其对优先级提升的需求, 主机共享 VCPU 的提升状态. 客户机在需要提升时设置一个标志, 然后继续运行. 主机在下一次 VMEXIT 时读取该标志, 并提升 VCPU 线程. 取消提升是同步进行的, 这样当客户机不运行任何对延迟敏感的工作负载时, 主机工作负载就能与客户机公平竞争. [v1 RFC](https://lore.kernel.org/all/20231214024727.3503870-1-vineeth@bitbyteword.org) 于 2023 年 12 月发布. 主要分歧在于实施过程中, 补丁会在 kvm 和 kvm 中做出调度策略决定. 而 kvm 并不适合这样做. 建议将调度策略决策移出 kvm, 让 kvm 只处理调度策略决策所需的通知. 政策决策所需的通知. 本补丁系列是实现分层设计功能的迭代步骤 设计的迭代步骤, 在这种设计中, 策略可以作为内核内置程序、内核模块或 bpf 程序在 kvm 之外实现. 参见 LWN 报道 [LWN, 2024/05/22, LSFMMBPF-2024, Virtual machine scheduling with BPF](https://lwn.net/Articles/974363). | v2 ☐☑✓ | [2023/12/13, LORE v1,0/8](https://lore.kernel.org/all/20231214024727.3503870-1-vineeth@bitbyteword.org)
*-*-*-*-*-*-*-*
[2024/04/03, LORE v2,0/5](https://lore.kernel.org/all/20240403140116.3002809-1-vineeth@bitbyteword.org) | #### 11.2.2.4 openEuler 可编程调度(programmable base on bpf for scheduler) ------- @@ -7222,7 +7259,7 @@ openEuler 5.10 内核集成了基于 eBPF 的可编程调度的功能, [issue: i #### 11.2.2.5 OPPO 可编程内核技术 ------- -[OPPO在CLK大会上公布可编程内核技术,引领安卓流畅体验升级](https://blog.csdn.net/feelabclihu/article/details/134194329) +[OPPO 在 CLK 大会上公布可编程内核技术,引领安卓流畅体验升级](https://blog.csdn.net/feelabclihu/article/details/134194329) ### 11.2.3 Pluggable Scheduler Framework @@ -7271,7 +7308,7 @@ LPC-2016 的议题 [Patching of scheduler functions](http://blog.linuxplumbersco [Plugsched](https://gitee.com/anolis/plugsched) 是 OpenAnolos Linux 内核调度器子系统热升级的 SDK, 它可以实现在不重启系统、应用的情况下动态替换调度器子系统, 毫秒级 downtime. Plugsched 可以对生产环境中的内核调度特性动态地进行增、删、改, 以满足不同场景或应用的需求, 且支持回滚. -阿里云基础软件/达摩操作系统实验室的论文发表的该项技术的论文 [Efficient Scheduler Live Update for Linux Kernel with Modularization](https://dl.acm.org/doi/10.1145/3582016.3582054) 被系统领域著名会议 28th Conference on Architectural Support for Programming Languages and Operating Systems (ASPLOS'23) 录用为长论文 (Full Paper). +阿里云基础软件 / 达摩操作系统实验室的论文发表的该项技术的论文 [Efficient Scheduler Live Update for Linux Kernel with Modularization](https://dl.acm.org/doi/10.1145/3582016.3582054) 被系统领域著名会议 28th Conference on Architectural Support for Programming Languages and Operating Systems (ASPLOS'23) 录用为长论文 (Full Paper). [龙蜥开源 Plugsched: 首次实现 Linux kernel 调度器热升级 | 龙蜥技术](https://openanolis.cn/blog/detail/532955762604705772). @@ -7298,7 +7335,7 @@ YouTuBe 上 ASPLOS'23 关于 Plugsched 的介绍 [ASPLOS'23 - Session 7C - Effic | [CacULE CPU Scheduler](https://github.com/hamadmarri/cacule-cpu-scheduler) | 是基于交互性评分机制 (CacULE Interactivity Score) 的 CFS 补丁集. 交互性分数的灵感来自 FreeBSD 的 ULE 调度器, 可以增强系统响应能力 / 延迟. ARCHLINUX 的开发者 ptr1337, 同样移植了 [CacULE Scheduler](https://github.com/ptr1337/linux-cacule), [CachyOS/linux-cachyos](https://github.com/CachyOS/linux-cachyos). 使用 calc_interactivity(), calc_cache_score(), calc_starve_score() 分别计算任务的交互性评分 (Interactivity Score), 缓存亲和性评分 (Cache Score) 以及饥饿评分 (Starve Score), 然后将 CFS 的选取下一个任务机制 pick_next_task_fair 更改为 ULE 的评分机制, 以便选取要运行的下一个任务. | | [Baby-CPU-Scheduler](https://github.com/hamadmarri/Baby-CPU-Scheduler) | 一个非常基本, 轻量级但性能非常高的调度器 Basic Scheduler (BS). 可以将其用作 Linux 上的基本调度程序进行学习 | | [Task Type(TT) CPU Scheduler](https://github.com/hamadmarri/TT-CPU-Scheduler) | 根据任务的行为检测并识别任务类型, 并根据其类型控制调度. 基于任务类型的好处是允许调度程序进行更多控制, 并选择接下来在 CPU 中运行的最佳任务. 当前有 5 种类型: 实时 (REALTIME), 交互 (INTERACTIVE), 无类型 (NO_TYPE), 计算密集型 (CPU_BOUND), 批处理 (BATCH). 调度器通过 detect_type() 周期性地探测应用的 task_type. | -| [ECHO(Enhanced CPU Handling Orchestrator) CPU Scheduler](https://github.com/hamadmarri/ECHO-CPU-Scheduler) | 该策略是 SRTF(Shortest Remaining Task Next) 和 RR(Round Robin) 的混合.
1. 任务的 estimation 使用了 SRTF, 使用了滑动平均来计算虚拟运行时间, 其中虚拟运行时计算是从 CFS 移植的 (它计算基于任务优先级调整). PICK 时每次选择具有最小估计虚拟运行时的下一个任务
2. CPU 上的所有任务都有一个共享配额(默认 35us), 每个任务在每个周期都将获得 `shared_quota/nr_tasks` 的时间片. 一个正在运行的任务的最小切片是 7us, 除非唤醒的任务必须在当前任务之前运行, 然后它会抢占它.
3. 负载均衡器与 TT 调度器一样, 有微小的变化. CPU0 负责在其他 CPU 之间移动任务, 此外, 默认情况下会启用候选平衡器. 几个调度器的性能对比参见 [hamadmarri/benchmarks](https://github.com/hamadmarri/benchmarks). | +| [ECHO(Enhanced CPU Handling Orchestrator) CPU Scheduler](https://github.com/hamadmarri/ECHO-CPU-Scheduler) | 该策略是 SRTF(Shortest Remaining Task Next) 和 RR(Round Robin) 的混合.
1. 任务的 estimation 使用了 SRTF, 使用了滑动平均来计算虚拟运行时间, 其中虚拟运行时计算是从 CFS 移植的 (它计算基于任务优先级调整). PICK 时每次选择具有最小估计虚拟运行时的下一个任务
2. CPU 上的所有任务都有一个共享配额(默认 35us), 每个任务在每个周期都将获得 `shared_quota/nr_tasks` 的时间片. 一个正在运行的任务的最小切片是 7us, 除非唤醒的任务必须在当前任务之前运行, 然后它会抢占它.
3. 负载均衡器与 TT 调度器一样, 有微小的变化. CPU0 负责在其他 CPU 之间移动任务, 此外, 默认情况下会启用候选平衡器. 几个调度器的性能对比参见 [hamadmarri/benchmarks](https://github.com/hamadmarri/benchmarks). | | [BORE/Burst-Oriented Response Enhancer (BORE) CPU Scheduler](https://github.com/firelzrd/bore-scheduler) | BORE(面向突发的响应增强器) 是 CFS(完全公平调度程序) 的增强版本, CFS 是 Linux 中默认的 CPU 调度程序, 旨在保持 CFS 的高吞吐量性能, 同时在尽可能宽的负载情况下提供对用户输入的更高响应能力. 为了实现这一目标, BORE 为每个单独的任务引入了一个称为 "突发性" 的灵活性维度, 部分偏离了 CFS 固有的 "完全公平" 原则. 延迟是指任务在显式放弃后通过进入睡眠、IO 等待或屈服而消耗的累积 CPU 时间得出的分数. 该分数代表了广泛的时间特征, 从纳秒到数百秒不等, 在不同的任务中有所不同. 参见 [foxhoundsk 的博客](https://hackmd.io/@foxhoundsk/bore-sched) | | [MuQss/Multiple run-queues for BFS](https://lore.kernel.org/all/1355591803.23863.3.camel@findus-T530) | [两个非常有意思的适合桌面使用的 Linux task 调度器: BFS 和 MuqSS](https://blog.csdn.net/juS3Ve/article/details/102380529)
[操作系统调度算法 5——MuQss, 多队列跳表调度器](https://zhuanlan.zhihu.com/p/373693657), [ckolivas/linux](https://github.com/ckolivas/linux), [CK 的博客](http://ck-hack.blogspot.com). [细说 CFS 与 MuQSS 以及 load-balance](https://blog.csdn.net/qq_23662505/article/details/120220689), [MuQSS_调度器 - The_MuQSS_CPU_scheduler](https://github.com/jiebaomaster/linux-kernel-doc-translate/blob/master/lwn/MuQSS_调度器 - The_MuQSS_CPU_scheduler.md) | @@ -7364,7 +7401,7 @@ YouTuBe 上 ASPLOS'23 关于 Plugsched 的介绍 [ASPLOS'23 - Session 7C - Effic |:----:|:----:|:---:|:----:|:---------:|:----:| | 2021/08/03 | Peter Oskolkov | [thread_info: use helpers to snapshot thread flags](https://lwn.net/Articles/722293) | 引入 read_ti_thread_flags() 规范对 thread_info 中 flag 的访问. 其中默认使用了 READ_ONCE. 防止开发者忘记了这样做. | v4 ☐ | [PatchWork v4,00/10](https://lore.kernel.org/patchwork/cover/1471548) | | 2023/03/30 | Mathieu Desnoyers | [sched: Introduce per-mm/cpu concurrency id state](https://lore.kernel.org/all/20230330230911.228720-1-mathieu.desnoyers@efficios.com) | 跟踪每个 mm/cpu 当前分配的 mm_cid, 而不是立即释放它们. 这消除了在多线程场景 (多个进程, 每个进程有多个线程) 中, 在属于不同内存空间的线程之间来回切换上下文时的大多数原子操作. | v1 ☐☑✓ | [LORE](https://lore.kernel.org/all/20230330230911.228720-1-mathieu.desnoyers@efficios.com) | -| 2024/10/09 | Mathieu Desnoyers | [sched: Improve cache locality of RSEQ concurrency IDs for intermittent workloads](https://git.kernel.org/pub/scm/linux/kernel/git/torvalds/linux.git/log/?id=7e019dcc470f27066c98697e43d930df8d54bd9c) | 参见 phoronix 报道 [phoronix, 2024/10/10, Restartable Sequences "RSEQ" Seeing Up To 16.7x Speedup With Newest Linux Patch](https://www.phoronix.com/news/RSEQ-Cache-Local-Speedup) | v2 ☐☑✓ v6.13-rc1 | [LORE v2,0/1](https://lore.kernel.org/all/20241009135007.2084357-1-mathieu.desnoyers@efficios.com) | +| 2024/10/09 | Mathieu Desnoyers | [sched: Improve cache locality of RSEQ concurrency IDs for intermittent workloads](https://git.kernel.org/pub/scm/linux/kernel/git/torvalds/linux.git/log/?id=7e019dcc470f27066c98697e43d930df8d54bd9c) | 参见 phoronix 报道 [phoronix, 2024/10/10, Restartable Sequences"RSEQ"Seeing Up To 16.7x Speedup With Newest Linux Patch](https://www.phoronix.com/news/RSEQ-Cache-Local-Speedup) | v2 ☐☑✓ v6.13-rc1 | [LORE v2,0/1](https://lore.kernel.org/all/20241009135007.2084357-1-mathieu.desnoyers@efficios.com) | @@ -7382,7 +7419,7 @@ YouTuBe 上 ASPLOS'23 关于 Plugsched 的介绍 [ASPLOS'23 - Session 7C - Effic |:----:|:----:|:---:|:----:|:---------:|:----:| | 2020/02/07 | 王贇 | [sched/numa: introduce numa locality](https://lore.kernel.org/patchwork/cover/1190383) | per-cgroup 的 NUMASTAT 功能 | [PatchWork v8](https://lore.kernel.org/patchwork/cover/1190383) | | 2021/09/05 | Yafang Shao | [sched: support schedstats for RT sched class](https://lore.kernel.org/patchwork/cover/1403138) | 我们希望使用 schedstats 工具测量生产环境中 RT 任务的延迟, 但目前只支持公平调度类的 schedstats. 将 sched_statistics 修改为独立于 task_struct 或 task_group 的调度统计数据, 从而完成了 RT 的 schedstats 支持 | v6 ☑ 5.16-rc1 | [PatchWork v2](https://lore.kernel.org/patchwork/cover/1403138)
*-*-*-*-*-*-*-*
[PatchWork v3](http://patches.linaro.org/cover/502064)
*-*-*-*-*-*-*-*
[LORE v4,0/8](https://lore.kernel.org/all/20210905143547.4668-1-laoar.shao@gmail.com) | -| 2024/05/08 | Ravi Bangoria | [perf sched: Introduce schedstat tool](https://lore.kernel.org/all/20240508060427.417-1-ravi.bangoria@amd.com) | 现有的 "perf-shed" 非常详尽, 并提供了对调度程序行为的许多见解, 但它很快就无法用于长时间运行或调度程序密集型工作负载. 例如, "perf-shed record" 在 hackbeek 上有约 7.77% 的开销(25 个组, 每个组在 2 个套接字的 128 核 256 线程的第三代 EPYC 服务器上运行 700K 循环), [它生成了巨大的 56G 性能数据, 性能准备和写入磁盘需要约 137 分钟](https://youtu.be/lg-9aG2ajA0?t=283). 与 "perf sched record" 不同的是, "perf sched schedstat record" 挂接到一组调度程序跟踪点并在跟踪点命中时生成样本, 它在工作负载前后拍摄 / proc/schedstat 文件的快照, 即对工作负载运行没有干扰. 此外, 解析 / proc/schedstat、将其转换为 perf 示例和将这些示例保存到 perf.data 文件中. 结果 perf.data 文件要小得多. 因此, 总体而言, 与 "perf sched record" 相比, "perf sched schedstat record" 要轻得多. 我们在 AMD 内部一直在使用它的一种变体, 称为 [调度记分板 Scheduler Scoreboard](https://github.com/AMDESE/sched-scoreboard), 并发现它对分析任何调度程序代码更改的影响非常有用 [Re: [PATCH] sched/fair: no sync wakeup from interrupt context](https://lore.kernel.org/lkml/c50bdbfe-02ce-c1bc-c761-c95f8e216ca0@amd.com), [Re: [PATCH v3 6/7] sched: Implement shared runqueue in CFS]. 参见 phoronix 报道 [AMD Linux Engineers Introduce New "schedstat" Tool](https://www.phoronix.com/news/AMD-Linux-perf-schedstat-Tool). | v1 ☐☑✓ | [2024/05/08, LORE v1,0/4](https://lore.kernel.org/all/20240508060427.417-1-ravi.bangoria@amd.com)
*-*-*-*-*-*-*-*
[2024/09/16, LORE 0/5](https://lore.kernel.org/all/20240916164722.1838-1-ravi.bangoria@amd.com)
*-*-*-*-*-*-*-*
[2024/11/22, LORE v2,0/6](https://lore.kernel.org/all/20241122084452.1064968-1-swapnil.sapkal@amd.com) | +| 2024/05/08 | Ravi Bangoria | [perf sched: Introduce schedstat tool](https://lore.kernel.org/all/20240508060427.417-1-ravi.bangoria@amd.com) | 现有的 "perf-shed" 非常详尽, 并提供了对调度程序行为的许多见解, 但它很快就无法用于长时间运行或调度程序密集型工作负载. 例如, "perf-shed record" 在 hackbeek 上有约 7.77% 的开销(25 个组, 每个组在 2 个套接字的 128 核 256 线程的第三代 EPYC 服务器上运行 700K 循环), [它生成了巨大的 56G 性能数据, 性能准备和写入磁盘需要约 137 分钟](https://youtu.be/lg-9aG2ajA0?t=283). 与 "perf sched record" 不同的是, "perf sched schedstat record" 挂接到一组调度程序跟踪点并在跟踪点命中时生成样本, 它在工作负载前后拍摄 / proc/schedstat 文件的快照, 即对工作负载运行没有干扰. 此外, 解析 / proc/schedstat、将其转换为 perf 示例和将这些示例保存到 perf.data 文件中. 结果 perf.data 文件要小得多. 因此, 总体而言, 与 "perf sched record" 相比, "perf sched schedstat record" 要轻得多. 我们在 AMD 内部一直在使用它的一种变体, 称为 [调度记分板 Scheduler Scoreboard](https://github.com/AMDESE/sched-scoreboard), 并发现它对分析任何调度程序代码更改的影响非常有用 [Re: [PATCH] sched/fair: no sync wakeup from interrupt context](https://lore.kernel.org/lkml/c50bdbfe-02ce-c1bc-c761-c95f8e216ca0@amd.com), [Re: [PATCH v3 6/7] sched: Implement shared runqueue in CFS]. 参见 phoronix 报道 [AMD Linux Engineers Introduce New"schedstat"Tool](https://www.phoronix.com/news/AMD-Linux-perf-schedstat-Tool). | v1 ☐☑✓ | [2024/05/08, LORE v1,0/4](https://lore.kernel.org/all/20240508060427.417-1-ravi.bangoria@amd.com)
*-*-*-*-*-*-*-*
[2024/09/16, LORE 0/5](https://lore.kernel.org/all/20240916164722.1838-1-ravi.bangoria@amd.com)
*-*-*-*-*-*-*-*
[2024/11/22, LORE v2,0/6](https://lore.kernel.org/all/20241122084452.1064968-1-swapnil.sapkal@amd.com) | | 2024/12/20 | Swapnil Sapkal | [Fixes and improvements in /proc/schedstat](https://lore.kernel.org/all/20241220063224.17767-1-swapnil.sapkal@amd.com) | TODO | v2 ☐☑✓ | [LORE v2,0/6](https://lore.kernel.org/all/20241220063224.17767-1-swapnil.sapkal@amd.com) | @@ -7418,8 +7455,8 @@ ARM & Linaro 的内核团队针对 Android/linux 等做了大量的调度的优 | 2023/10/09 | Jinyu Tang | [Ftrace: make sched_wakeup can focus on the target process](https://lore.kernel.org/all/20231009153714.10743-1-tangjinyu@tinylab.org) | 此 Patch 只能让我们跟踪目标进程 sched-wakeup 时间, 其他进程 sched-wakeup 将被丢弃, 不会更改 tracing_max_latency. 补丁的评论区各路大神给出了已有可行的解决办法. 包括使用 [synthetic_events](https://lore.kernel.org/all/20231009122500.69854f94@gandalf.local.home) 以及 [rtla](https://bristot.me/linux-scheduling-latency-debug-and-analysis). | v1 ☐☑✓ | [LORE](https://lore.kernel.org/all/20231009153714.10743-1-tangjinyu@tinylab.org) | | 2024/04/08 | Marco Elver | [tracing: Add new_exec tracepoint](https://lore.kernel.org/all/20240408090205.3714934-1-elver@google.com) | 添加 "new_exec" 跟踪点, 该跟踪点在不返回点之后但在当前任务采用其新的 exec 标识之前运行. 与跟踪点 "sched_process_exec" 不同, "new_exec" 跟踪点在刷新旧的 exec 之前运行, 即当任务仍处于原始状态 (如原始 MM) 时, 但当新的 exec 成功或崩溃时(但永远不会返回到原始 exec). 能够跟踪此事件在许多用例中都会有所帮助:
1. 在当前 MM 被替换之前, 允许跟踪 eBPF 程序访问 exec 上的原始 MM;
2. 计算原始任务中的 exec(通过 perf 事件);
3. 分析刷新时间("new_exec" 到 "sched_process_exec").
4. 跟踪输出示例("new_exec" 和 "sched_process_exec"). | v1 ☐☑✓ | [LORE](https://lore.kernel.org/all/20240408090205.3714934-1-elver@google.com) | | 2024/02/22 | John Stultz | [sched: Add trace_sched_waking() tracepoint to sched_ttwu_pending()](https://lore.kernel.org/all/20240222204917.1719153-1-jstultz@google.com) | TODO | v1 ☐☑✓ | [LORE](https://lore.kernel.org/all/20240222204917.1719153-1-jstultz@google.com) | -| 2025/04/09 | Luis Machado | [sched/events: Improving scheduler debugging/testing tracing interfaces](https://lore.kernel.org/all/20250409151338.1046335-1-luis.machado@arm.com) | 提出了一项改进调度器调试/测试追踪接口的补丁提案, 旨在提升调度器(尤其是能效调度)可观测性, 同时避免引入长期维护的用户空间 ABI. 当前依赖已有 tracepoint 存在局限, 如无法访问内部结构体字段、需手动复制结构定义、无法自动处理内核逻辑( 如 util_est 的位掩码处理) 等.
核心是为调度器 tracepoint 新增一个类型为 `struct sched_tp_callbacks` 的参数, 用于提供内核内部数据访问的 "getter()" 回调函数. 这些函数封装内核逻辑, 允许模块安全获取数据, 减少结构复制和维护成本. 补丁中提供了几个示例回调, 如获取 `cfs_rq` 或 `sched_entity` 的 util_est、获取 CPU 当前容量等.

作者请求社区反馈此方案是否可行, 以及如何改进其可维护性和扩展性. 目前已被 LISA 模块验证可行, 有助于提升自动化测试与性能分析效率. | v2 ☐☑✓ | [LORE](https://lore.kernel.org/all/20250409151338.1046335-1-luis.machado@arm.com) | -| 2025/06/03 | Lukasz Luba | [sched/tp: Add new tracepoint for tracking uclamp set from user-space](https://lore.kernel.org/all/20250603120755.1028396-1-lukasz.luba@arm.com) | 新增一个 tracepoint 用于追踪用户空间设置任务uclamp 值的变化. uclamp(Utilization Clamping) 机制允许用户空间动态调整任务的 CPU 利用率上下限, 从而影响调度器的任务分配决策. 新增的 tracepoint `uclamp_update_task` 可在任务 uclamp 值被修改时触发, 便于开发者分析系统行为, 优化内核与中间件的协同性能. | v1 ☐☑✓ | [LORE](https://lore.kernel.org/all/20250603120755.1028396-1-lukasz.luba@arm.com) | +| 2025/04/09 | Luis Machado | [sched/events: Improving scheduler debugging/testing tracing interfaces](https://lore.kernel.org/all/20250409151338.1046335-1-luis.machado@arm.com) | 提出了一项改进调度器调试 / 测试追踪接口的补丁提案, 旨在提升调度器 (尤其是能效调度) 可观测性, 同时避免引入长期维护的用户空间 ABI. 当前依赖已有 tracepoint 存在局限, 如无法访问内部结构体字段、需手动复制结构定义、无法自动处理内核逻辑(如 util_est 的位掩码处理) 等.
核心是为调度器 tracepoint 新增一个类型为 `struct sched_tp_callbacks` 的参数, 用于提供内核内部数据访问的 "getter()" 回调函数. 这些函数封装内核逻辑, 允许模块安全获取数据, 减少结构复制和维护成本. 补丁中提供了几个示例回调, 如获取 `cfs_rq` 或 `sched_entity` 的 util_est、获取 CPU 当前容量等.

作者请求社区反馈此方案是否可行, 以及如何改进其可维护性和扩展性. 目前已被 LISA 模块验证可行, 有助于提升自动化测试与性能分析效率. | v2 ☐☑✓ | [LORE](https://lore.kernel.org/all/20250409151338.1046335-1-luis.machado@arm.com) | +| 2025/06/03 | Lukasz Luba | [sched/tp: Add new tracepoint for tracking uclamp set from user-space](https://lore.kernel.org/all/20250603120755.1028396-1-lukasz.luba@arm.com) | 新增一个 tracepoint 用于追踪用户空间设置任务 uclamp 值的变化. uclamp(Utilization Clamping) 机制允许用户空间动态调整任务的 CPU 利用率上下限, 从而影响调度器的任务分配决策. 新增的 tracepoint `uclamp_update_task` 可在任务 uclamp 值被修改时触发, 便于开发者分析系统行为, 优化内核与中间件的协同性能. | v1 ☐☑✓ | [LORE](https://lore.kernel.org/all/20250603120755.1028396-1-lukasz.luba@arm.com) | ## 12.3 debug 接口 @@ -7440,7 +7477,7 @@ ARM & Linaro 的内核团队针对 Android/linux 等做了大量的调度的优 | 2017/09/29 | Peter Zijlstra | [sched: Rework task state printing](https://lore.kernel.org/patchwork/cover/834387) | 重构进程状态的打印方式 | v1 ☑ 4.14-rc3 |[PatchWork](https://lore.kernel.org/patchwork/cover/834387) | | 2021/01/06 | Vincent Guittot | [sched: Remove per rq load array](https://lore.kernel.org/patchwork/cover/1079333) | 自 LB_BIAS 被禁用之后, 调度器只使用 rq->cpu_load[0] 作为 cpu 负载值, 因此 cpu_load 这个数组的其他之其实没意义了, 直接去掉了. 注意这对 load_balance 的调优是有一定影响的, 之前 sched_domain 中可以通过 sysctl 接口修改比较负载使用的 index, 这些 index 对应的 cpu_load 数组的下标. 干掉了这个数组, 那么这些 sysctl 也就没必要了 | v2 ☑ 5.10-rc1 | [PatchWork](https://lore.kernel.org/patchwork/cover/1079333)| | 2021/04/12 | Peter Zijlstra | [sched: Clean up SCHED_DEBUG](https://lore.kernel.org/patchwork/cover/1402660) | 目前内核有 sysctl, procfs 和 debugfs SCHED_DEBUG 接口, 比较混乱.
1. 将 CONFIG_LATENCYTOP 以及 sched_schedstats 和 NUMA balance 的 sysctl 开关都不再依赖于 CONFIG_SCHED_DEBUG
2. 将 [所有接口信息都转移到 debugfs 中](https://git.kernel.org/pub/scm/linux/kernel/git/torvalds/linux.git/commit/?id=d27e9ae2f244805bbdc730d85fba28685d2471e5).
3. 添加 ALT_PERIOD 和 BASE_SLICE feature. 考虑 cgroup 的情况, 添加了 ALT_PERIOD 计算__sched_period 实际实际的 h_nr_running, 添加 BASE_SLICE, [保证进程的 sched_slice 要至少达到 `sysctl_sched_min_granularity`]https://git.kernel.org/pub/scm/linux/kernel/git/torvalds/linux.git/commit/?id=0c2de3f054a59f15e01804b75a04355c48de628c) | v2 ☑ 5.13-rc1 | [PatchWork](https://lore.kernel.org/patchwork/cover/1402660), [LKML](https://lkml.org/lkml/2021/3/26/395), [LORE](https://lore.kernel.org/all/20210412101421.609526370@infradead.org)| -| 2025/04/02 | Chen Yu | [sched/numa: Add statistics of numa balance task migration and swap](https://lore.kernel.org/all/20250402010611.3204674-1-yu.c.chen@intel.com) | 增加对 NUMA Balancing 任务迁移和交换的统计信息.
1. 问题: 在启用了 NUMA 平衡的系统中, 任务可能会因为 NUMA 平衡机制而迁移到其他 CPU 或与其他任务交换位置. 然而, 内核目前只提供了 NUMA 页面迁移的统计信息, 而没有提供任务迁移和交换的统计信息.
2. 目标: 通过增加任务迁移和交换的统计信息, 帮助系统管理员和开发者更好地理解和优化 NUMA 平衡机制.
3. 新增字段: numa_task_migrated: 记录任务迁移的次数, numa_task_swapped: 记录任务交换的次数. 这些统计信息将显示在 `/sys/fs/cgroup/{GROUP}/memory.stat` 和 `/proc/{PID}/sched` 中. | v1 ☐☑✓ | [LORE](https://lore.kernel.org/all/20250402010611.3204674-1-yu.c.chen@intel.com)
*-*-*-*-*-*-*-*
[2025/04/30, LORE v3](https://lore.kernel.org/all/20250430103623.3349842-1-yu.c.chen@intel.com)
*-*-*-*-*-*-*-*
[2025/05/07, LORE v4, 0/2](https://lore.kernel.org/all/cover.1746611892.git.yu.c.chen@intel.com)
*-*-*-*-*-*-*-*
[2025/05/29, LORE v6, 0/2](https://lore.kernel.org/all/cover.1748493462.git.yu.c.chen@intel.com) | +| 2025/04/02 | Chen Yu | [sched/numa: Add statistics of numa balance task migration and swap](https://lore.kernel.org/all/20250402010611.3204674-1-yu.c.chen@intel.com) | 增加对 NUMA Balancing 任务迁移和交换的统计信息.
1. 问题: 在启用了 NUMA 平衡的系统中, 任务可能会因为 NUMA 平衡机制而迁移到其他 CPU 或与其他任务交换位置. 然而, 内核目前只提供了 NUMA 页面迁移的统计信息, 而没有提供任务迁移和交换的统计信息.
2. 目标: 通过增加任务迁移和交换的统计信息, 帮助系统管理员和开发者更好地理解和优化 NUMA 平衡机制.
3. 新增字段: numa_task_migrated: 记录任务迁移的次数, numa_task_swapped: 记录任务交换的次数. 这些统计信息将显示在 `/sys/fs/cgroup/{GROUP}/memory.stat` 和 `/proc/{PID}/sched` 中. 参见 [phoronix, 2025/06/04, Linux 6.16 Exposes Statistics For NUMA Task Migration & Swapping](https://www.phoronix.com/news/Linux-6.16-NUMA-Task-Stats). | v1 ☐☑✓ | [LORE](https://lore.kernel.org/all/20250402010611.3204674-1-yu.c.chen@intel.com)
*-*-*-*-*-*-*-*
[2025/04/30, LORE v3](https://lore.kernel.org/all/20250430103623.3349842-1-yu.c.chen@intel.com)
*-*-*-*-*-*-*-*
[2025/05/07, LORE v4, 0/2](https://lore.kernel.org/all/cover.1746611892.git.yu.c.chen@intel.com)
*-*-*-*-*-*-*-*
[2025/05/29, LORE v6, 0/2](https://lore.kernel.org/all/cover.1748493462.git.yu.c.chen@intel.com) | ## 12.4 tools & benchmark @@ -7462,7 +7499,7 @@ ARM & Linaro 的内核团队针对 Android/linux 等做了大量的调度的优 | [os-scheduler-responsiveness-test](https://github.com/hamadmarri/os-scheduler-responsiveness-test) | os 调度程序响应能力测试. 这是一个 Python/Go 脚本, 用于测试操作系统调度程序的响应性或交互性. 交互式线程的睡眠时间多于运行时间 (即用户单击). 该脚本测量与 3 个不同任务的交互性 (对 10000 个数组进行排序, 读取文件并打印到控制台, 读取文件并将其写入另一个文件). 在每个过程中, 它休眠在 1s-3s 之间的随机时间. 同时, 你可以运行素数计算的 CPU 密集型程序, 这对于在繁重的任务运行期间测试交互性很有用. | | [jitterdebugger](https://github.com/igaw/jitterdebugger) | [foxhoundsk 的博客 jitterdebugger 介绍](https://hackmd.io/@foxhoundsk/jitterdebugger), 衡量调度器 [切换时延](https://source.android.com/docs/core/audio/latency/contrib?hl=en#schedLatency) 以及操作系统底噪抖动的工具. | | [michaeljclark/cpipe](https://github.com/michaeljclark/cpipe) | [user-space concurrent pipe buffer scheduler interactions](https://lore.kernel.org/all/969ccc0f-d909-4b45-908e-e98279777733@metaparadigm.com), 实现了一个并发管道缓冲区的 benchmark, 设计用于单生产者单使用者或多生产者多使用者模式, 支持并发预写、并发预读和零复制操作, 用于 IO 缓冲区范围内的数组计算. | -| [masoncl/rsched](https://github.com/masoncl/rsched) | +| [masoncl/rsched](https://github.com/masoncl/rsched) | Rust 编写的基于 eBPF 的调度延迟跟踪工具 | 具有极低延迟的调度延迟评测分析工具, [[ANNOUNCE] rsched -- process scheduler statistics](https://lore.kernel.org/all/37ed5ccf-7419-4311-ab53-b47fc93febae@meta.com), 参见 [phoronix, 2025/06/24, Former Btrfs Lead Developer Chris Mason Announces New "rsched" Tool](https://www.phoronix.com/news/rsched). | ### 12.4.2 调度器延迟分析 @@ -7549,7 +7586,7 @@ ECRTS 2020(32nd Euromicro Conference on Real-Time Systems) 上 Daniel 等人发 | 时间 | 作者 | 特性 | 描述 | 是否合入主线 | 链接 | |:----:|:----:|:---:|:---:|:----------:|:----:| -| 2024/12/07 | Zhang Rui | [tools/power turbostat: 2024.11.30](https://git.kernel.org/pub/scm/linux/kernel/git/torvalds/linux.git/log/?id=86d237734091201d2ab2c1d2e1063893621c770f)| 参见 phoronix 报道 [phoronix, 2024/12/01, Turbostat Utility Lands New Features With Linux 6.13](https://www.phoronix.com/news/Linux-6.13-Turbostat) | v1 ☐☑✓ v6.13-rc1 | [LORE](https://git.kernel.org/pub/scm/linux/kernel/git/torvalds/linux.git/commit/?id=03109e2f0d18dcb84218bd91c4fbf864193ca934)| +| 2024/12/07 | Zhang Rui | [tools/power turbostat: 2024.11.30](https://git.kernel.org/pub/scm/linux/kernel/git/torvalds/linux.git/log/?id=86d237734091201d2ab2c1d2e1063893621c770f)| 参见 phoronix 报道 [phoronix, 2024/12/01, Turbostat Utility Lands New Features With Linux 6.13](https://www.phoronix.com/news/Linux-6.13-Turbostat), [phoronix, 2025/06/09, Linux's Turbostat Updated For Intel Diamond Rapids & Bartlett Lake](https://www.phoronix.com/news/Linux-6.16-Turbostat) | v1 ☐☑✓ v6.13-rc1 | [LORE](https://git.kernel.org/pub/scm/linux/kernel/git/torvalds/linux.git/commit/?id=03109e2f0d18dcb84218bd91c4fbf864193ca934)| diff --git a/study/kernel/00-DESCRIPTION/TODO.md b/study/kernel/00-DESCRIPTION/TODO.md index 18a08b0..9ec2285 100644 --- a/study/kernel/00-DESCRIPTION/TODO.md +++ b/study/kernel/00-DESCRIPTION/TODO.md @@ -788,11 +788,7 @@ https://lore.kernel.org/all/20240830130309.2141697-1-vincent.guittot@linaro.org/ -| 编号 | 调度器 | 语言 | 用途 | -|:---:|:-----:|:----:|:---:| -| 1 | scx_lavd | NA | 程序专注于交互性, 具体来说, 就是始终如一地从游戏中获得更高的帧速率. | -| 2 | scx_rustland | RUST | 将调度事件转发到用户空间, 在那里做出决策. 还包含 scx_rusty 用于复杂 CPU 拓扑上的负载平衡, 以及, 一个 scx_layered 分区计划程序. | -| 3 | + | 2024/05/08 | Josh Don | [sched/fair: prevent unbounded task iteration in load balance](https://lore.kernel.org/all/20240508223456.4189689-1-joshdon@google.com) | TODO | v1 ☐☑✓ | [LORE](https://lore.kernel.org/all/20240508223456.4189689-1-joshdon@google.com) | @@ -817,7 +813,6 @@ https://lore.kernel.org/all/20240830130309.2141697-1-vincent.guittot@linaro.org/ | 2025/01/06 | wujing | [sched/fair: Correct CPU selection from isolated domain](https://lore.kernel.org/all/tencent_160A5B6C838FD9A915A67E67914350EB1806@qq.com) | TODO | v1 ☐☑✓ | [LORE](https://lore.kernel.org/all/tencent_160A5B6C838FD9A915A67E67914350EB1806@qq.com)| | 2025/01/04 | Andrea Righi | [sched_ext: idle: small CPU iteration refactoring](https://lore.kernel.org/all/20250104090009.331193-1-arighi@nvidia.com) | TODO | v1 ☐☑✓ | [LORE](https://lore.kernel.org/all/20250104090009.331193-1-arighi@nvidia.com) | | 2025/01/08 | Honglei Wang | [sched_ext: switch class when preempted by higher priority scheduler](https://lore.kernel.org/all/20250108023328.37675-1-jameshongleiwang@126.com) | TODO | v2 ☐☑✓ | [LORE](https://lore.kernel.org/all/20250108023328.37675-1-jameshongleiwang@126.com) | -| 2024/12/16 | Michal Koutný | [Add kernel cmdline option for rt_group_sched](https://lore.kernel.org/all/20241216201305.19761-1-mkoutny@suse.com) | TODO | v1 ☐☑✓ | [LORE v1,0/9](https://lore.kernel.org/all/20241216201305.19761-1-mkoutny@suse.com)
*-*-*-*-*-*-*-*
[LORE v1,0/9](https://lore.kernel.org/all/20250210151239.50055-1-mkoutny@suse.com)
*-*-*-*-*-*-*-*
[LORE v2,00/10](https://lore.kernel.org/all/20250310170442.504716-1-mkoutny@suse.com/) | | 2025/01/14 | Florian Schmaus | [sched: provide sched_set_batch()](https://lore.kernel.org/all/20250114130513.498482-3-flo@geekplace.eu) | TODO | v1 ☐☑✓ | [LORE v1,0/2](https://lore.kernel.org/all/20250114130513.498482-3-flo@geekplace.eu) | | 2024/12/04 | Tobias Huschle | [sched/fair: introduce new scheduler group type group_parked](https://lore.kernel.org/all/20241204112149.25872-1-huschle@linux.ibm.com) | TODO | v1 ☐☑✓ | [LORE v1,0/2](https://lore.kernel.org/all/20241204112149.25872-1-huschle@linux.ibm.com)
*-*-*-*-*-*-*-*
[LORE v2,0/3](https://lore.kernel.org/all/20250217113252.21796-1-huschle@linux.ibm.com)
*-*-*-*-*-*-*-*
[LORE v3,0/4](https://lore.kernel.org/all/20250512115325.30022-1-huschle@linux.ibm.com) | | 2025/01/13 | I Hsin Cheng | [sched/fair: Refactor can_migrate_task() to elimate looping](https://lore.kernel.org/all/20250113041249.6847-1-richard120310@gmail.com) | TODO | v2 ☐☑✓ | [LORE](https://lore.kernel.org/all/20250113041249.6847-1-richard120310@gmail.com) | @@ -886,15 +881,36 @@ https://www.aidenleong.com/lxr/linux-6.14.2/kernel/sched/idle.c https://ncnz67vv5cuy.feishu.cn/wiki/IN66w8dW8imkkUkKusMcy2jLnBb +[phoronix, 2025/05/28, Linux 6.16 Will Be Able To Exit User Mode Faster: 2~11% Improvement](https://www.phoronix.com/news/Linux-616-Faster-Exit-User-Mode) - -| 2025/05/28 | Ingo Molnar | [sched: Use the SMP scheduler on UP too](https://lore.kernel.org/all/20250528080924.2273858-1-mingo@kernel.org) | Ingo Molnar 提出一组共 43 个补丁, 旨在将 Linux 调度器统一为 SMP( 对称多处理) 版本, 从而大幅减少调度器中 `CONFIG_SMP` 相关的预处理条件编译代码. 当前 `kernel/sched/` 中有 175 处 `CONFIG_SMP` 判断, 导致代码维护困难、易出错, 并影响可读性和可审查性. 该补丁系列将这一数量减少至 28 处, 删除近 1000 行代码, 提升了代码整洁度.

此改动使 UP( 单处理器) 调度器也使用 SMP 实现, 虽引入少量冗余代码和性能开销( 如上下文切换时间增加约 5%、内核体积增长约 0. 3% 文本段), 但换来更简单的维护模型. 作者强调, 未来若需优化 UP 性能或体积, 应通过合理方式( 如 `IS_ENABLED( ) `) 进行, 而非回归大量 `#ifdef`. 补丁系列已初步测试验证在 UP 系统上可正常启动和运行, 目前存放于指定 Git 仓库中. | v1 ☐☑✓ | [2025/05/28, LORE v1, 0/43](https://lore.kernel.org/all/20250528080924.2273858-1-mingo@kernel.org) | -| 2025/06/11 | Cheng-Yang Chou | [sched_ext: Standardize preprocessor comment markers](https://lore.kernel.org/all/20250611135404.13851-1-yphbchou0911@gmail.com) | 旨在对 `sched/ext*. {c, h}` 文件中的 `#if/#else/#endif` 预处理注释标记进行标准化, 以提升代码一致性与可读性. 该工作遵循 Ingo Molnar 近期调度器清理工作的方向, 旨在减少 `CONFIG_SMP` 相关复杂性并删除冗余的 `#ifdef` 代码块. 此次修改不涉及任何功能变更. 补丁共修改 4 个文件, 删除 60 行、新增 3 行代码. | v1 ☐☑✓ | [2025/06/11, LORE v1, 0/4](https://lore.kernel.org/all/20250611135404.13851-1-yphbchou0911@gmail.com) | +| 2025/05/28 | Ingo Molnar | [sched: Use the SMP scheduler on UP too](https://lore.kernel.org/all/20250528080924.2273858-1-mingo@kernel.org) | Ingo Molnar 提出一组共 43 个补丁, 旨在将 Linux 调度器统一为 SMP( 对称多处理) 版本, 从而大幅减少调度器中 `CONFIG_SMP` 相关的预处理条件编译代码. 当前 `kernel/sched/` 中有 175 处 `CONFIG_SMP` 判断, 导致代码维护困难、易出错, 并影响可读性和可审查性. 该补丁系列将这一数量减少至 28 处, 删除近 1000 行代码, 提升了代码整洁度.

此改动使 UP( 单处理器) 调度器也使用 SMP 实现, 虽引入少量冗余代码和性能开销( 如上下文切换时间增加约 5%、内核体积增长约 0. 3% 文本段), 但换来更简单的维护模型. 作者强调, 未来若需优化 UP 性能或体积, 应通过合理方式( 如 `IS_ENABLED( ) `) 进行, 而非回归大量 `#ifdef`. 补丁系列已初步测试验证在 UP 系统上可正常启动和运行, 目前存放于指定 Git 仓库中. 参见 [phoronix, 2025/05/28, Big Linux Patch Series Shakes Up The Scheduler Code For Anyone With Only One CPU Core](https://www.phoronix.com/news/Linux-UP-SMP-Scheduler-2025) | v1 ☐☑✓ | [2025/05/28, LORE v1, 0/43](https://lore.kernel.org/all/20250528080924.2273858-1-mingo@kernel.org) | +| 2025/06/11 | Cheng-Yang Chou | [sched_ext: Standardize preprocessor comment markers](https://lore.kernel.org/all/20250611135404.13851-1-yphbchou0911@gmail.com) | 旨在对 `sched/ext*. {c, h}` 文件中的 `#if/#else/#endif` 预处理注释标记进行标准化, 以提升代码一致性与可读性. 该工作遵循 Ingo Molnar 近期调度器清理工作的方向, 旨在减少 `CONFIG_SMP` 相关复杂性并删除冗余的 `#ifdef` 代码块. 此次修改不涉及任何功能变更. 补丁^共修改 4 个文件, 删除 60 行、新增 3 行代码. | v1 ☐☑✓ | [2025/06/11, LORE v1, 0/4](https://lore.kernel.org/all/20250611135404.13851-1-yphbchou0911@gmail.com) | +| 2025/07/27 | Sasha Levin | [Add agent coding assistant configuration to Linux kernel](https://lore.kernel.org/all/20250727195802.2222764-1-sashal@kernel.org) | 邮件提出了一项为 Linux 内核引入" Agent 编码助手" 统一配置和文档规范的补丁集, 旨在规范 AI 编码工具在内核开发中的使用. 共包含四个补丁: 1) 为多个编码助手( 如 Claude、GitHub Copilot 等) 添加统一配置文件并实现一致性管理; 2) 引入核心开发参考文档, 引导助手遵循内核开发流程; 3) 明确编码风格规范, 如 80 字符行限制、无尾随空格等; 4) 制定法律要求与署名规范, 要求所有助手在提交中通过 Co-developed-by标识自身参与. 补丁从 RFC 版本起已转为 RST 格式, 拆分为多个文件, 并简化了说明. 此系列为内核引入 AI 辅助开发提供了制度化基础. | v1 ☐☑✓ | [2025/07/27, LORE v1, 0/4](https://lore.kernel.org/all/20250727195802.2222764-1-sashal@kernel.org) | +https://support.huaweicloud.com/bestpractice-ecs/zh-cn_topic_0141067581.html + +sudo docker run -it --name ubuntu22.04 ubuntu:22.04 bash +sudo docker ps -a +sudo docker start 665e1247f4c8 +sudo docker exec -it ubuntu22.04 bash +sudo docker cp /home/chengjian/Work/Package/Miniconda/py310 ubuntu22.04:/root/Model +sudo docker cp Qwen2.5-Coder-7B-Instruct-AWQ ubuntu22.04:/root/Model/QWEN/QWEN2.5 +sudo docker cp ubuntu22.04:/root/Model/QWEN/QWEN2.5/Qwen2.5-Coder-7B-Instruct-AWQ-PARAMS ./Qwen2.5-Coder-7B-Instruct-AWQ-PARAMS +sudo docker exec -it ubuntu22.04 bash +mkdir -p /root/Model/QWEN/QWEN2.5/Qwen2.5-Coder-7B-Instruct-AWQ-HEADER +python3 convert_awq.py /root/Model/QWEN/QWEN2.5/Qwen2.5-Coder-7B-Instruct-AWQ /root/Model/QWEN/QWEN2.5/Qwen2.5-Coder-7B-Instruct-AWQ-HEADER --group_size 128 --gen_model_header + +mkdir -p /root/Model/QWEN/QWEN2.5/Qwen2.5-Coder-7B-Instruct-AWQ-HEADER-VERSION + +sudo docker cp Qwen2.5-0.5B-Instruct ubuntu22.04:/root/Model/QWEN/QWEN2.5/0.5B/Qwen2.5-0.5B-Instruct + +python3 convert_llama.py ~/Model/QWEN/QWEN2.5/0.5B/Qwen2.5-0.5B-Instruct/Qwen2.5-0.5B-Instruct ~/Model/QWEN/QWEN2.5/0.5B/Qwen2.5-0.5B-Instruct/Qwen2.5-0.5B-Instruct-Q4N0-HEADER --qwen2 --gen_model_header --qtype Q4_0 +python3 convert_llama.py ~/Model/QWEN/QWEN2.5/0.5B/Qwen2.5-0.5B-Instruct/Qwen2.5-0.5B-Instruct ~/Model/QWEN/QWEN2.5/0.5B/Qwen2.5-0.5B-Instruct/Qwen2.5-0.5B-Instruct-Q40-HEADER-VERSION --qwen2 --qtype Q4_0 --gen_model_header --model_version "6.0.0.1" +sudo docker cp ubuntu22.04:/root/Model/QWEN/~/Model/QWEN/QWEN2.5/0.5B/Qwen2.5-0.5B-Instruct/Qwen2.5-0.5B-Instruct-Q40-HEADER-VERSION ./Qwen2.5-0.5B-Instruct-Q40-HEADER-VERSION diff --git a/study/kernel/00-DESCRIPTION/TOOLS.md b/study/kernel/00-DESCRIPTION/TOOLS.md index 5c3904a..fe647b1 100644 --- a/study/kernel/00-DESCRIPTION/TOOLS.md +++ b/study/kernel/00-DESCRIPTION/TOOLS.md @@ -111,11 +111,16 @@ Intel 发布的 ControlFlag 用机器学习来发现代码中的错误, 支持 C [phoronix, 2024/10/23, Gentoo Linux Touts DTrace 2.0 Support](https://www.phoronix.com/news/Gentoo-Linux-DTrace-2.0), [DTrace 2.0 for Gentoo](https://www.gentoo.org/news/2024/10/23/DTrace-for-Gentoo.html), [DTrace-WIKI](https://wiki.gentoo.org/wiki/DTrace) - * kLLDB [djolertrk/kLLDB](https://github.com/djolertrk/kLLDB) +* LTTng + +| 时间 | 作者 | 特性 | 描述 | 是否合入主线 | 链接 | +|:----:|:----:|:---:|:----:|:---------:|:----:| +| 2025/07/14 | Mathieu Desnoyers | [[RFC] LTTng upstreaming next steps](https://lore.kernel.org/lkml/b554bfa3-d710-4671-945b-5d6ec49e52cd@efficios.com) | phoronix 报道 [phoronix, 2025/07/14, New Effort To Upstream LTTng In The Linux Kernel Draws Criticism From Torvalds](https://www.phoronix.com/news/LTTng-Kernel-Modules-2025). | v7 ☐☑✓ | [2025/07/14, LORE RFC](https://lore.kernel.org/lkml/b554bfa3-d710-4671-945b-5d6ec49e52cd@efficios.com) | + ## 2.2 call kernel func from userspace -------