美格智能 MeiG

qwen2.5-3B

大语言模型QNN

qwen2.5-3B — 美格最新实测数据。

BEST · SRM975
36.8tok/s
QNN/HTP · w4a16
任务类型
大语言模型
芯片平台
7 个

跨平台性能对比

按实测指标排序,深色条为该模型最佳平台。

tok/sSRM975 · QNN/HTP36.8SNM980 · QNN/HTP34.467SNM982 · QNN/HTP30.434SNM970 · QNN/HTP26SRM965 · QNN/HTP25.57SNM983 · QNN/HTP25.039SNM980 · QNN/GPU20SRM6690 · QNN/HTP8.298

芯片兼容矩阵

模型 × 芯片平台 × 精度 × 推理后端 组合的实测性能。

芯片平台精度推理后端性能(不含前后处理)报告
SRM975
QCM8838
w4a16QNN/HTP36.8 tok/s★查看 →
SNM980
SM8750P (Snapdragon 8 Elite)
w4a16QNN/HTP34.467 tok/s查看 →
SNM982
QCS8625
w4a16QNN/HTP30.434 tok/s查看 →
SNM970
QCS8550 / QCM8550 (Snapdragon 8 Gen 2)
w4a16QNN/HTP26 tok/s查看 →
SRM965
QCM8538
w4a16QNN/HTP25.57 tok/s查看 →
SNM983
QCS9075 / QCS9100 (SA8775P)
w4a16QNN/HTP25.039 tok/s查看 →
SNM980
SM8750P (Snapdragon 8 Elite)
—QNN/GPU20 tok/s查看 →
SRM6690
QCM6690 (Snapdragon 6690)
w4a16QNN/HTP8.298 tok/s查看 →

下载资源

SNM970
模型库/大语言模型/高通/Mobile/8550/qwen2.5-3b_8550_android.zip
下载
SNM970
模型库/大语言模型/高通/Mobile/8550/qwen2.5-3b_8550_linux.zip
下载
SNM980
模型库/大语言模型/高通/Mobile/8750/qwen2.5-3b_8750_android.zip
下载
SNM980
模型库/大语言模型/高通/Mobile/8750/qwen2.5-3b_8750_linux.zip
下载
SNM982
模型库/大语言模型/高通/Mobile/8625/qwen2.5-3b_8625_linux.zip
下载
SNM983
模型库/大语言模型/高通/Automotive/9075A/qwen2.5-3b_9075_linux.zip
下载
SNM983
模型库/大语言模型/高通/Mobile/9075/qwen2.5-3b_9075_android.zip
下载
SRM6690
模型库/大语言模型/高通/Mobile/6690/qwen2.5-3b_6690_android.zip
下载
SRM6690
模型库/大语言模型/高通/Mobile/6690/qwen2.5-3b_6690_linux.zip
下载
SRM965
模型库/大语言模型/高通/Automotive/8538/qwen2.5-3b_8538_android.zip
下载
SRM965
模型库/大语言模型/高通/Automotive/8538/qwen2.5-3b_8538_linux.zip
下载
SRM975
模型库/大语言模型/高通/Automotive/8838/qwen2.5-3b_8838_android.zip
下载
instruct · Q4_0
模型库/llamacppgguf/qwen/qwen2.5/qwen2.5-3b/qwen2.5-3b-instruct-q4_0.gguf
下载

相关示例应用

暂无关联示例。