xujiashuai/nlp_corom_sentence-embedding_chinese-tiny-medical
模型介绍文件和版本Pull Requests讨论分析
下载使用量0

nlp_corom_sentence-embedding_chinese-tiny-medical on Ascend NPU

1. 简介

  • 模型来源: iic/nlp_corom_sentence-embedding_chinese-tiny-medical
  • 参数量: 8,765,696
  • 适配状态: SUCCESS
  • 精度: float16

2. 验证环境

组件版本
torch2.9.0
torch-npu2.9.0.post1
CANN8.5.1
NPUAscend 910B4

3. 推理输出证据

输出形状: [1, 128, 256]
是否有 NaN: False

4. CPU vs NPU 精度对比

指标数值
Cosine Similarity1.0
Max Abs Error0.005984
是否满足要求✅ 是

5. 性能

指标数值
平均延迟3.36 ms
峰值显存0.02 GB

6. 复现步骤

python3 inference.py

贡献者: xujiashuai | 赛道: 模型适配赛道