StructBERT 中文事实核查模型,3 类分类(事实一致、事实冲突、不确定)。
| 指标 | 值 |
|---|---|
| 余弦相似度 | 0.999999 |
| 平均延迟 | 6.96 ms |
| 推理精度 | float32 |
| 设备 | 昇腾 910B4 |
export ASCEND_HOME_PATH=/usr/local/Ascend/cann
export LD_LIBRARY_PATH=/usr/local/Ascend/cann/lib64:$LD_LIBRARY_PATH
python inference.py --device npu:0 --dtype float32模型: iic/nlp_structbert_fact-checking_chinese-base
设备: npu:0
精度: float32
------------------------------------------------------------
input_ids: shape=torch.Size([1, 8])
logits: shape=torch.Size([1, 3])
CPU pred: 2, NPU pred: 2
Cosine Similarity (logits): 0.999999
✓ 推理完成
平均延迟: 6.96 ms| 指标 | CPU (float32) | NPU (float32) | 误差 |
|---|---|---|---|
| 余弦相似度 | 基准 | 0.999999 | 0.0001% |
| 输出维度 | [1,3] | [1,3] | 一致 |
| 预测类别 | 2 | 2 | 一致 |
本适配由 batch-adapter 自动完成。