MiniCPM 端侧客户端已正式发布。
- 全面支持 Intel Core Ultra 系列处理器本地部署,低延迟、高效率、隐私更安全。
- 基于 OpenVINO 推理框架深度优化,推理速度至高可达每秒 80 tokens!
- 专为开发者、研究人员与 AI 爱好者打造的本地大模型新体验。
主要功能:
- 支持 与模型进行文本&图片对话
- 支持 调用Intel集成显卡加速
支持模型:- MiniCPM 4.0 8B & 0.5B
- MiniCPM 3.0 4B
- MiniCPM-V 2.6 8B(多模态)
- MiniCPM-V 2.0 2.8B(多模态)
- MiniCPM-2B-128K
- MiniCPM-1B-SFT-BF16
配置要求:
- 建议使用英特尔酷睿 ultra7 及以上移动端处理器
- 建议运行内存 32GB 及以上
下载地址:https://github.com/OpenBMB/MiniCPM/releases/tag/2.4.2