WayCa鲲鹏基础IO性能调优：SAS存储系统的最佳实践

WayCa鲲鹏基础IO性能调优：SAS存储系统的最佳实践

【免费下载链接】WayCaWayca repo display kunpeng featuer and establish ecology communication项目地址: https://gitcode.com/openeuler/WayCa

前往项目官网免费下载：https://ar.openeuler.org/ar/

openEuler / WayCa项目的鲲鹏基础IO模块为企业级存储提供了强大的SAS（Serial Attached SCSI）驱动支持。本文将详细介绍如何通过优化配置和最佳实践，充分发挥鲲鹏920系列处理器SAS控制器的性能潜力，打造高效稳定的存储系统。

一、SAS驱动核心特性解析

1.1 协议支持与性能基础

鲲鹏920系列SAS模块兼容SAS3.0协议，并向下兼容SAS2.0和SAS1.0，支持SSP/SMP/STP三种协议类型。其核心性能指标包括：

• 支持最多1024个设备连接
• 支持4096个并发IO处理
• 自动协商链路速率（最高12Gbit/s）
• 支持SATA盘直连（非AHCI模式）及NCQ功能

这些基础特性为存储系统性能优化提供了硬件级支持，相关技术细节可参考Wayca-Kunpeng-基础IO-SAS模块特性介绍.md。

1.2 关键性能优化功能

驱动内置多项性能增强技术，其中对存储性能影响最显著的包括：

• 中断聚合：减少频繁IO导致的中断风暴
• DIF/DIX数据保护：端到端数据完整性校验
• runtime PM：智能功耗管理与性能平衡
• debug调测：实时性能监控与问题诊断

二、中断聚合配置：消除性能瓶颈

2.1 中断聚合工作原理

当系统处理大量小IO时，传统中断模式会导致控制器频繁触发中断，造成CPU资源浪费。鲲鹏SAS驱动提供两种中断聚合策略：

• 类型1：所有CQ队列中断集中到CQ0处理
• 类型2：按时间或数量阈值聚合中断请求

2.2 实战配置步骤

# 加载驱动时启用中断聚合类型1 insmod hisi_sas_v3_hw.ko intr_conv=1 # 配置中断聚合类型2（以host0为例） echo 8 > /sys/devices/pci0000:74/0000:74:02.0/host0/scsi_host/host0/intr_coal_count echo 1000 > /sys/devices/pci0000:74/0000:74:02.0/host0/scsi_host/host0/intr_coal_ticks

2.3 配置建议

• 高IOPS场景（如数据库）：建议设置聚合次数8-16，时间1-2ms
• 大文件传输场景：建议降低聚合频率或禁用聚合
• 可通过cat /proc/interrupts监控中断变化，验证优化效果

三、DIF/DIX数据保护与性能平衡

3.1 数据完整性与性能的平衡

DIF（Data Integrity Field）和DIX（Data Integrity Extension）技术通过在IO数据中附加校验信息，确保端到端数据完整性。在启用该功能时需注意：

3.2 配置示例

# 加载驱动时配置DIF/DIX支持模式 insmod hisi_sas_v3_hw.ko prot_mask=0x77 # 支持DIF1/2/3和DIX0/1/2/3 # 验证磁盘DIF支持情况 sg_vpd --page=ei --long /dev/sdx | grep SPT # 格式化DIF盘（以DIF3为例） sg_format --format --fmtpinfo=3 --pfu=1 /dev/sdx

⚠️ 注意：EXT2文件系统由于并发IO特性，不支持DIF功能，建议使用EXT4或XFS文件系统。

四、runtime PM：智能功耗与性能管理

4.1 多级电源管理策略

SAS驱动支持设备级和控制器级的runtime PM：

• 设备级PM：单个SCSI设备空闲超时后自动休眠
• 控制器级PM：所有连接设备休眠后控制器进入低功耗状态

4.2 配置示例

# 配置SCSI设备自动休眠（5秒空闲） echo auto > /sys/devices/pci0000:b4/0000:b4:02.0/host6/port-6:0/end_device-6:0/target6:0:0/6:0:0:0/power/control echo 5000 > /sys/devices/pci0000:b4/0000:b4:02.0/host6/port-6:0/end_device-6:0/target6:0:0/6:0:0:0/power/autosuspend_delay_ms # 配置控制器自动休眠（2秒空闲） echo auto > /sys/devices/pci0000:b4/0000:b4:02.0/power/control echo 2000 > /sys/devices/pci0000:b4/0000:b4:02.0/power/autosuspend_delay_ms

4.3 适用场景

• 非关键业务存储：建议启用PM功能降低功耗
• 高性能要求场景：建议设置autosuspend_delay_ms=-1禁用自动休眠

五、性能调优最佳实践

5.1 硬件配置建议

• 链路配置：优先使用12Gbit/s速率，避免混合同速率设备
• 磁盘布局：将高性能磁盘连接到独立PHY，避免带宽竞争
• 散热管理：确保控制器工作温度低于85℃，高温会导致降速

5.2 常见问题诊断

当遇到性能异常时，可通过debugfs工具进行诊断：

# 手动触发debug信息dump echo 1 > /sys/kernel/debug/hisi_sas/0000:30:04.0/trigger_dump # 查看dump信息 cat /sys/kernel/debug/hisi_sas/0000:30:04.0/dump/*

以下是典型的错误日志示例，显示了配置不当时的设备初始化失败情况：

5.3 性能测试与验证

建议使用fio工具进行基准测试：

fio --name=randwrite --rw=randwrite --bs=4k --size=10G --iodepth=32 --runtime=60 --time_based --direct=1 --filename=/dev/sdx

六、总结与参考资料

通过合理配置中断聚合、DIF/DIX和runtime PM等特性，可显著提升WayCa鲲鹏基础IO SAS存储系统的性能和可靠性。关键优化点包括：

• 根据业务类型调整中断聚合参数
• 按需启用DIF/DIX数据保护
• 平衡功耗与性能的PM配置
• 定期通过debugfs进行性能监控

完整技术文档可参考：

• Wayca-Kunpeng-基础IO-SAS模块特性介绍.md
• 源码路径：driver/scsi/hisi_sas

如需获取最新代码，可通过以下命令克隆仓库：

git clone https://gitcode.com/openeuler/WayCa

通过本文介绍的最佳实践，您可以充分发挥鲲鹏平台的存储性能潜力，为企业级应用构建高效、可靠的存储基础设施。

【免费下载链接】WayCaWayca repo display kunpeng featuer and establish ecology communication项目地址: https://gitcode.com/openeuler/WayCa