Gitee 推荐 | 中文小型预训练模型 MiniRBT

方案，并且在多个典型客户场景里成功落地，服务于智能推荐等应用场景。 RoadMap 基于 EasyNLP 的中文 CLUE/FewCLUE 等的 Benchmark 知识预训练技术: 发布一系列知识预训练模型，致力于提升预训练模型的常识性和知识性 中文预

Meta 今天发布了 Llama 3.2 系列开源模型，其中包括小型和中型视觉 LLMs（11B 和 90B），以及适合边缘和移动设备的小型纯文本模型（1B 和 3B），包括预训练和指令调整版本。 LLaMA 3.2 支持同时处理文本、图像和视频，能够理解并生

聚焦于金融和商业垂直领域的大模型。模型的训练数据以中文数据为主，并且包含大量的金融数据，以提升模型在商业和金融领域的问题处理能力。此外，训练数据中还融合了部分英文与代码数据，以适应模型的通用能力。在训

练，完成其业务场景工人安装是否合格的智能审核。 某推荐用户使用自监督训练组件，使用其大量的无标注广告图片，训练图像表征模型，进而把图像特征接入推荐模型，结合推荐模型优化，ctr提升10+%。 某面板研发厂商基

AMD 宣布推出 AMD-135M —— Llama 家族的第一个小型语言模型。该模型具有推测解码功能，其训练代码、数据集和权重都是开源的，以便开发人员可以重现该模型并帮助训练其他 SLM 和 LLM。 “大语言模型通常使用自回归方法进行

e和chat对齐模型Baichuan-13B-Chat，同时支持商用。 目前为止中文社区已经陆续发布了大量的开源模型，主要集中在6B-13B之间。 那么百川开源的这个模型相对于其他国内外有代表性的模型表现怎么样，比如与ChatGPT3.5有多大差距；与

势，“书生·万卷”将为学术界及产业界提供更符合主流中文价值对齐的高质量大模型多模态预训练语料。 “书生·万卷”链接：https://opendatalab.org.cn/WanJuan1.0 今年7月6日，上海AI实验室正式发布全新升级的“书生通用大模型体

智源·悟道大模型的研发，目前已发布产品包括世界首个中文及跨语言反向词典WantWords、名句语义检索系统WantQuotes、智能写作工具深言达意等。 根据介绍，LingoWhale-8B模型是拥有约80亿参数的中英双语大语言模型，在C-Eval、MMLU、

huan-7B/summary 据介绍，baichuan-7B 在 C-Eval、AGIEval 和 Gaokao 中文权威评测榜单上，超过了 ChatGLM-6B 等其他大模型，并且在 MMLU 英文权威评测榜单上，领先 LLaMA-7B。

： 将aby3代码从PrimiHub迁移到单独的库 修复PSI结果集中文显示问题 kkrt16 PSI支持MACOS 修复神经网络使用GPU设备训练和预测报错的问题 项目地址 GitHub：https://github.com/primihub/primihub Gitee：https://gitee.com/primihub/primihub

。 多语言支持：该模型支持超过8种语言和方言，例如中文、英语、粤语、法语、意大利语、西班牙语、德语和日语。 Qwen2-Audio的模型结构包含一个Qwen大语言模型和一个音频编码器。在预训练阶段，依次进行ASR、AAC等多任

，使用了同样的过滤方法 Qwen2-Math还计划推出支持英文和中文的双语模型，并开发多语言模型，这一举措将进一步扩大Qwen2-Math的应用范围。

inkSoul.AI 是一家 AI 初创公司，曾推出过首个开源 Llama 2 的中文语言大模型；零一万物则是李开复旗下的大模型公司。 “多模态大型语言模型近来备受关注。不过，大多数研究都集中在视觉-语言多模态模型上，这些模型在遵循

大学和中国科学技术大学宣布共同推出 PonderV2 通用 3D 预训练方法与模型。 Ponder系列在通用3D方面实现三个“首次”：首次同时支持室内外使用场景；首次同时支持点云、体素和多视角图像输入；首次在不同语义层级的下游任务