Preempt_RT实时性能测试方法论：Cyclictest、stress、iperf3综合测试指南

【免费下载链接】Preempt_RTLinux in itself is not real time capable. With the additional PREEMPT_RT patch it gains real-time capabilities. The key point of the PREEMPT_RT patch is to minimize the amount of kernel code that is non-preemptible, while also minimizing the amount of code that must be changed in order to provide this added preemptibility. In particular, critical sections, interrupt handlers, and interrupt-disable code sequences are normally preemptible. The PREEMPT_RT patch leverages the SMP capabilities of the Linux kernel to add this extra preemptibility without requiring a complete kernel rewrite.项目地址: https://gitcode.com/openeuler/Preempt_RT

前往项目官网免费下载：https://ar.openeuler.org/ar/

Linux内核本身并不具备实时能力，但通过添加PREEMPT_RT补丁，它获得了实时功能。Preempt_RT补丁的核心是最大限度地减少不可抢占的内核代码量，同时最大限度地减少为提供这种额外可抢占性而必须更改的代码量。本文将详细介绍如何使用Cyclictest、stress和iperf3等工具进行全面的实时性能测试，帮助您评估Preempt_RT补丁的实际效果。

为什么需要实时性能测试？🚀

实时系统的关键在于"及时性"——不仅计算结果要正确，还要在规定时间内完成。Preempt_RT补丁通过将Linux内核的最大线程切换延迟从无限制的毫秒数降低到数十微秒的有界值，显著提升了系统的实时性。但如何验证这种改进？这就是实时性能测试的重要性所在。

测试环境准备

硬件环境要求

进行Preempt_RT实时性能测试需要合适的硬件平台。根据openEuler项目官方测试数据，建议使用以下配置：

• CPU：多核处理器（至少4核）
• 内存：8GB以上
• 存储：SSD固态硬盘
• 网络：千兆以太网卡

软件环境配置

1. 操作系统：openEuler 22.03 LTS
2. 内核版本：
   • 标准内核：kernel-5.10.0-60.18.0.oe2203
   • 实时内核：kernel-rt-5.10.0-60.18.0.rt62.52.oe2203
3. 测试工具：
   • rt-test（cyclictest）v1.00
   • stress v1.0.4
   • iperf3 v3.6
   • memtester v4.5.1

核心测试工具详解

1. Cyclictest：延迟测量利器 ⏱️

Cyclictest是实时性能测试的核心工具，专门用于测量系统延迟。它通过创建高优先级实时线程并测量实际唤醒时间与预期唤醒时间之间的差异来评估系统实时性。

基本使用命令：

# 单线程测试 cyclictest -m -h 100 -q -i100 -t 1 -p 99 -n # 多线程测试 cyclictest -m -h 100 -q -i100 -t 4 -p 99 -n # 长时间测试（1000万次） cyclictest -m -h 100 -q -i100 -t 1 -p 99 -n --duration=3600

关键参数说明：

• -m：锁定内存，防止交换
• -h 100：直方图大小
• -q：安静模式
• -i100：间隔100微秒
• -t：线程数量
• -p 99：优先级99（最高实时优先级）

2. Stress：系统负载模拟器 💪

Stress工具用于模拟各种系统负载，测试在不同压力条件下Preempt_RT的性能表现。

负载类型配置：

# CPU负载（4个CPU worker） stress --cpu 4 --timeout 60 # 内存负载（分配1GB内存） stress --vm 1 --vm-bytes 1G --timeout 60 # IO负载（2个IO worker） stress --io 2 --timeout 60 # 混合负载 stress --cpu 4 --io 2 --vm 1 --vm-bytes 512M --timeout 60

3. iperf3：网络性能测试 📡

iperf3用于测试网络负载对实时性能的影响，模拟真实网络环境。

网络负载测试：

# 服务器端 iperf3 -s # 客户端（产生网络负载） iperf3 -c 服务器IP -t 60 -P 4

综合测试方法论

测试场景设计

为了全面评估Preempt_RT的性能，我们设计了五种测试场景：

1. 空负载测试：系统空闲状态下的基准性能
2. CPU负载测试：高CPU利用率下的实时性
3. 内存负载测试：内存压力下的性能表现
4. IO负载测试：磁盘IO密集操作的影响
5. 网卡负载测试：网络流量对实时性的影响

测试执行流程

步骤1：环境准备

# 安装测试工具 yum install rt-tests stress iperf3 memtester -y # 确认内核版本 uname -r # 应显示：5.10.0-60.18.0.rt62.52.oe2203.aarch64

步骤2：CPU隔离配置

# 隔离CPU核心（例如隔离CPU 1-3） echo 0 > /sys/devices/system/cpu/cpu1/online echo 0 > /sys/devices/system/cpu/cpu2/online echo 0 > /sys/devices/system/cpu/cpu3/online

步骤3：执行测试脚本

#!/bin/bash # 实时性能测试脚本示例 # 1. 空负载测试 echo "=== 空负载测试 ===" cyclictest -m -h 100 -q -i100 -t 1 -p 99 -n --duration=10 --quiet > idle_test.txt # 2. CPU负载测试 echo "=== CPU负载测试 ===" stress --cpu 4 --timeout 60 & cyclictest -m -h 100 -q -i100 -t 1 -p 99 -n --duration=10 --quiet > cpu_load_test.txt killall stress # 3. 内存负载测试 echo "=== 内存负载测试 ===" stress --vm 1 --vm-bytes 2G --timeout 60 & cyclictest -m -h 100 -q -i100 -t 1 -p 99 -n --duration=10 --quiet > mem_load_test.txt killall stress # 4. IO负载测试 echo "=== IO负载测试 ===" stress --io 2 --timeout 60 & cyclictest -m -h 100 -q -i100 -t 1 -p 99 -n --duration=10 --quiet > io_load_test.txt killall stress # 5. 网卡负载测试 echo "=== 网卡负载测试 ===" iperf3 -s & iperf3 -c localhost -t 60 -P 4 & cyclictest -m -h 100 -q -i100 -t 1 -p 99 -n --duration=10 --quiet > net_load_test.txt killall iperf3

测试结果分析

性能指标解读

根据openEuler官方测试数据，我们可以得出以下关键结论：

延迟对比分析：

• RT内核的峰值延迟普遍优于非RT内核
• 在飞腾D2000平台上，RT内核在IO负载下的性能提升最为显著
• 树莓派4B平台在各类负载下都表现出良好的实时性

稳定性评估：

• RT内核在负载情况下的实时性较为稳定
• CPU负载对实时性影响一般小于IO和内存负载
• 网卡负载对实时性的影响最小

实际测试数据参考

根据官方测试结果，不同平台的表现差异明显：

飞腾D2000平台：

• 空负载：RT内核延迟降低22.7倍
• CPU负载：RT内核延迟降低117.1倍
• IO负载：RT内核延迟降低184.6倍

树莓派4B平台：

• 各项负载下RT内核都有稳定提升
• 实时性表现均衡，适合嵌入式应用

高级测试技巧

1. 长时间稳定性测试

对于工业控制等关键应用，需要进行长时间的稳定性测试：

# 72小时连续测试 cyclictest -m -h 1000 -q -i100 -t 1 -p 99 -n --duration=259200 --latency=1000000

2. 多维度性能监控

结合系统监控工具，全面了解系统状态：

# 实时监控系统状态 while true; do echo "=== $(date) ===" top -bn1 | head -20 vmstat 1 5 sleep 10 done

3. 自定义测试场景

根据实际应用需求，设计特定的测试场景：

# 模拟工业控制场景 # 周期性任务 + 紧急中断 stress --cpu 2 --hdd 1 --timeout 300 & cyclictest -m -h 100 -q -i1000 -t 2 -p 99 -n --duration=300

常见问题与解决方案

问题1：测试结果波动大

解决方案：

• 确保测试环境干净，关闭不必要的服务
• 使用CPU隔离技术
• 增加测试次数取平均值

问题2：无法达到预期延迟

解决方案：

• 检查BIOS设置，禁用CPU节能功能
• 调整内核参数（如/proc/sys/kernel/sched_rt_runtime_us）
• 使用taskset绑定进程到特定CPU

问题3：测试工具安装失败

解决方案：

# 从源码编译安装 git clone https://git.kernel.org/pub/scm/utils/rt-tests/rt-tests.git cd rt-tests make && make install

最佳实践建议

1. 测试环境标准化

• 使用相同的硬件配置
• 统一软件版本
• 记录完整的测试环境信息

2. 数据记录与分析

• 保存原始测试数据
• 使用脚本自动化数据分析
• 生成可视化报告

3. 持续集成测试

• 将性能测试集成到CI/CD流程
• 设置性能基准线
• 监控性能回归

项目资源与工具

官方文档

项目提供了详细的部署和测试指南，包含在README.md文件中。该文档涵盖了从二进制部署到源码编译的完整流程，以及详细的性能测试方法和结果分析。

探针工具

项目中包含基于eBPF+BCC开发的中断关闭状态监测探针工具，位于probe_tools/目录：

• probe.py：主要探针程序
• probe_example.txt：使用示例

这个工具可以帮助开发者深入了解Preempt_RT内核在实际运行中的行为，特别适合调试和性能分析。

总结与展望

Preempt_RT补丁显著提升了Linux系统的实时性能，通过本文介绍的Cyclictest、stress和iperf3综合测试方法，您可以全面评估系统的实时性能表现。测试结果显示，RT内核在各种负载场景下都能提供更稳定、更低的延迟，特别适合工业控制、自动驾驶、金融交易等对实时性要求高的应用场景。

未来，Preempt_RT项目将继续：

1. 跟随内核主线发布和维护补丁
2. 研发更先进的实时性能分析工具
3. 进一步提升实时性和吞吐率
4. 引入RTLA、RTSL等新机制
5. 总结和推广实时性最佳实践

通过科学的测试方法和持续的性能优化，Preempt_RT将继续推动Linux在实时计算领域的发展，为更多关键应用提供可靠的技术基础。

【免费下载链接】Preempt_RTLinux in itself is not real time capable. With the additional PREEMPT_RT patch it gains real-time capabilities. The key point of the PREEMPT_RT patch is to minimize the amount of kernel code that is non-preemptible, while also minimizing the amount of code that must be changed in order to provide this added preemptibility. In particular, critical sections, interrupt handlers, and interrupt-disable code sequences are normally preemptible. The PREEMPT_RT patch leverages the SMP capabilities of the Linux kernel to add this extra preemptibility without requiring a complete kernel rewrite.项目地址: https://gitcode.com/openeuler/Preempt_RT