智谱开源清影模型 CogVideoX


7 月 26 日,智谱发布 AI 生视频「清影」并上线智谱清言APP,30秒将任意文图生成视频。现在,智谱宣布正式开源清影模型 CogVideoX。

CogVideoX开源模型包含多个不同尺寸大小的模型,此次开源的是 CogVideoX-2B,它在FP-16精度下的推理仅需18GB显存,微调则只需要40GB显存,这意味着单张4090显卡即可进行推理,而单张A6000显卡即可完成微调。

CogVideoX-2B的提示词上限为226个token,视频长度为6秒,帧率为8帧/秒,视频分辨率为720*480。“我们为视频质量的提升预留了广阔的空间,期待开发者们在提示词优化、视频长度、帧率、分辨率、场景微调以及围绕视频的各类功能开发上贡献开源力量。”

模型下载:https://huggingface.co/THUDM/CogVideoX-2b

性能

为了评估文本到视频生成的质量,智谱方面使用了VBench中的多个指标,如人类动作、场景、动态程度等。还使用了两个额外的视频评估工具:Devil 中的 Dynamic Quality 和 Chrono-Magic 中的 GPT4o-MT Score,这些工具专注于视频的动态特性。如下表所示:


相關推薦

2024-08-15

Xinference 0.14.1 🎉 Xinference 0.14.1 发布,全新的文生视频 CogVideoX 支持登场!本周爆火的文生图模型 FLUX.1 系列,支持中文提示词的快手生图,还有 SenseVoice 语音识别,都在本版本得到支持。 图一、图二:由FLUX.1-dev生成 - 新增

2023-10-21

前两天),相约开源PHP办公室,我们一起聊 AI!>>> 北京智谱华章科技有限公司(简称“智谱AI”)宣布,今年已累计获得超 25 亿人民币融资。 参与方主要包括社保基金中关村自主创新基金(君联资本为基金管理人)、美团、

2023-07-22

天眼查 App 显示,智谱 AI 关联公司北京智谱华章科技有限公司近日发生工商变更,注册资本由约 1480.69 万人民币增至约 1652.86 万人民币。股东新增美团旗下天津三快科技有限公司,持股 10.42%。 北京智谱华章科技有限公司于 2019

2024-10-16

智谱宣布开源文生图模型 CogView3 及 CogView3-Plus-3B。CogView3 以及 CogView3-Plus 模型均使用 Apache 2.0 协议,目前该系列模型的能力已上线「智谱清言」(chatglm.cn)。 CogView3-Plus-3B 的效果: CogView3 是一个基于级联扩散的 text2img 模型

2023-07-16

中英双语大模型 ChatGLM2-6B 开发团队——智谱AI&清华KEG昨晚宣布,即日起 ChatGLM-6B 和 ChatGLM2-6B 权重对学术研究完全开放,并且在完成企业登记获得授权后,允许免费商业使用。 ChatGLM2-6B 是开源中英双语对话模型 ChatGLM-6B 的

2023-09-22

要被干掉? 36氪从多名独立信源处获悉,大模型公司“智谱AI”于近日完成 B-4 轮融资。其中,腾讯战投、阿里巴巴战投等多家机构参与投资。该轮融资完成后,智谱AI的估值达到约10亿美金。 对此,智谱 AI 方不予置评,腾讯

2023-09-08

,百度、字节、商汤、中科院旗下紫东太初、百川智能、智谱华章等 8 家企业 / 机构的大模型产品已经首批通过《生成式人工智能服务管理暂行办法》备案,可正式上线面向公众提供服务。 具体包括: 五家北京企业机构:

2024-09-26

解并充分利用其优势。” (开源PHPCTO刘冬)   在智谱AI算法工程师张昱轩主题分享环节,他对智谱的开源生态进行了全面的介绍。 今年以来,智谱已陆续发布了多个开源模型和数据集,例如文本模型 GLM-4-9B 以及基于其训

2024-08-22

;并且市场格局也主要还是由早期投入者如百度、商汤、智谱、百川等公司构成。 进入2024年,头部互联网公司加大对大模型的投入且发起价格战,为早期的大模型初创企业带来一定的竞争压力。预计未来 2-3 年,市场格局将发

2024-10-01

大模型价格战再起波澜。智谱AI宣布开启最大力度活动,最低 1 折调用开放平台bigmodel.cn所有模型,期间每位用户还将获赠 1 亿tokens 额度。 “国庆月,我们为 bigmodel.cn 新老用户准备了「百万用户每人赠送1亿token」+「1-5折API调

2024-07-05

详细介绍: 1. UOS AI如何接入在线模型(例如月之暗面和智谱) 2. UOS AI如何接入本地模型(例如使用Ollama运行本地模型)   UOS AI 如何接入在线模型 目前,UOS AI 1.3.0版已在deepin V23 RC2应用商店发布,新版支持用户添加自定

2023-09-01

告】eBPF 到底是可观测领域的神器 or 鸡肋? 8 月 31 日,智谱 AI 宣布在各大应用商店正式上线首款生成式 AI 助手 ——「智谱清言」。用户可通过苹果商店 App Store、安卓主流商店(包括华为、OPPO、vivo 及小米等)进行下载,或

2024-07-27

型创业公司在以约200亿元的估值水平进行新一轮融资,即智谱AI与月之暗面。此外,新晋大模型公司阶跃星辰也跻身AI独角兽序列。今年6月,该公司被传正在进行一轮估值约20亿美元的新融资,阿里在投资者之列。 相关数据显示

2024-07-09

据智谱清言官方消息,旗下代码生成大模型 CodeGeeX正式发布CodeGeeX4系列模型的开源版本:CodeGeeX4-ALL-9B。 CodeGeeX4-ALL-9B作为最新一代CodeGeeX4系列模型的开源版本,在GLM-4强大语言能力的基础上继续迭代,大幅增强代码生成能力。