本仓库是对 timm 框架中 sequencer2d_s.in1k 模型在昇腾 NPU 上的适配版本。
图像分类(Image Classification)
PyTorch + timm
[batch_size, 3, 224, 224][batch_size, num_classes],其中 num_classes = 1000(ImageNet)torch>=1.8.0
torch-npu
timm>=0.9.0
Pillow
numpy
modelscope
safetensors本模型通过 ModelScope 下载预训练权重,使用 PyTorch + timm 加载,通过 model.to('npu') 将模型迁移至昇腾 NPU 进行推理。无需修改模型结构。
pip install torch torch-npu timm Pillow numpy modelscope safetensors -i https://mirrors.aliyun.com/pypi/simple/python3 inference.py --device cpupython3 inference.py --device npu| 排名 | 类别 | 概率 |
|---|---|---|
| 1 | 21 | 0.156280 |
| 2 | 23 | 0.077612 |
| 3 | 22 | 0.063037 |
| 4 | 127 | 0.043485 |
| 5 | 701 | 0.028608 |
| 排名 | 类别 | 概率 |
|---|---|---|
| 1 | 21 | 0.163393 |
| 2 | 23 | 0.081121 |
| 3 | 22 | 0.070178 |
| 4 | 127 | 0.043319 |
| 5 | 128 | 0.027194 |
使用相同的测试图像分别在 CPU 和 NPU 上进行推理,对比输出 logits 的各项指标。
| 指标 | 值 |
|---|---|
| 参数量 | 27.65M |
| Logits MAE | 1.13664151e-01 |
| Logits Cosine Similarity | 0.98481001 |
| Probability MAE | 1.01071463e-04 |
| Top-1 Agreement | 100.00% |
| CPU 推理耗时 | 1.0731s |
| NPU 推理耗时 | 0.0453s |
| 加速比 | 23.68x |
NPU 与 CPU 推理结果误差 < 1%,精度满足要求。
#+NPU #+CV #+图像分类 #+timm #+昇腾
本仓库仅进行模型适配和推理验证,模型权重归原作者所有。