whisper-large-v3 在昇腾 NPU 上的部署
1. 简介
- 模型来源: openai/whisper-large-v3
- 参数量: 1,543,490,560
- 适配状态: 成功
- 适配时间: 2026-05-14 21:38:06
2. 验证环境
| 组件 | 版本 |
|---|
| torch | 2.9.0 |
| torch-npu | 2.9.0.post1 |
| transformers | 4.57.6 |
| CANN | 8.5.1 |
| NPU | Ascend 910B4 |
| 操作系统 | Ubuntu 22.04.5 LTS (aarch64) |
| Python | 3.11.14 |
3. 精度评测
✅ NPU 与 CPU 精度对比
| 指标 | 数值 |
|---|
| 余弦相似度 | 0.999745 |
| 精度误差 | 0.0255% |
| 是否满足要求 | 是（< 1%）✅ |
4. 性能
| 指标 | 数值 |
|---|
| 平均延迟 | 187.61 毫秒 |
| 峰值显存 | 3.15 GB |
| 测试轮数 | 10 |
5. 复现步骤
# 环境检查
python3 env_check.py
# 精度验证
python3 evaluate.py --model-id openai/whisper-large-v3 --device npu:0 --output report.json
# 推理
python3 inference.py --model-id openai/whisper-large-v3 --device npu:0
6. 评测材料
| 材料 | 文件 |
|---|
| 推理脚本 | inference.py |
| 精度评测 | evaluate.py |
| 环境检查 | env_check.py |
| 运行日志 | logs/run.log |
| 截图 | screenshots/ |
| 报告 | report.json |
| 部署文档 | DEPLOY.md |
| 依赖 | requirements.txt |
贡献者: xujiashuai | 赛道: 模型适配赛道 | 时间: 2026-05-15 01:43:16
