智谱开源清影模型 CogVideoX


7 月 26 日,智谱发布 AI 生视频「清影」并上线智谱清言APP,30秒将任意文图生成视频。现在,智谱宣布正式开源清影模型 CogVideoX。

CogVideoX开源模型包含多个不同尺寸大小的模型,此次开源的是 CogVideoX-2B,它在FP-16精度下的推理仅需18GB显存,微调则只需要40GB显存,这意味着单张4090显卡即可进行推理,而单张A6000显卡即可完成微调。

CogVideoX-2B的提示词上限为226个token,视频长度为6秒,帧率为8帧/秒,视频分辨率为720*480。“我们为视频质量的提升预留了广阔的空间,期待开发者们在提示词优化、视频长度、帧率、分辨率、场景微调以及围绕视频的各类功能开发上贡献开源力量。”

模型下载:https://huggingface.co/THUDM/CogVideoX-2b

性能

为了评估文本到视频生成的质量,智谱方面使用了VBench中的多个指标,如人类动作、场景、动态程度等。还使用了两个额外的视频评估工具:Devil 中的 Dynamic Quality 和 Chrono-Magic 中的 GPT4o-MT Score,这些工具专注于视频的动态特性。如下表所示:


相關推薦

2024-08-15

Xinference 0.14.1 🎉 Xinference 0.14.1 发布,全新的文生视频 CogVideoX 支持登场!本周爆火的文生图模型 FLUX.1 系列,支持中文提示词的快手生图,还有 SenseVoice 语音识别,都在本版本得到支持。 图一、图二:由FLUX.1-dev生成 - 新增

2023-07-22

天眼查 App 显示,智谱 AI 关联公司北京智谱华章科技有限公司近日发生工商变更,注册资本由约 1480.69 万人民币增至约 1652.86 万人民币。股东新增美团旗下天津三快科技有限公司,持股 10.42%。 北京智谱华章科技有限公司于 2019

2023-10-21

前两天),相约开源PHP办公室,我们一起聊 AI!>>> 北京智谱华章科技有限公司(简称“智谱AI”)宣布,今年已累计获得超 25 亿人民币融资。 参与方主要包括社保基金中关村自主创新基金(君联资本为基金管理人)、美团、

2023-09-22

要被干掉? 36氪从多名独立信源处获悉,大模型公司“智谱AI”于近日完成 B-4 轮融资。其中,腾讯战投、阿里巴巴战投等多家机构参与投资。该轮融资完成后,智谱AI的估值达到约10亿美金。 对此,智谱 AI 方不予置评,腾讯

2023-07-16

中英双语大模型 ChatGLM2-6B 开发团队——智谱AI&清华KEG昨晚宣布,即日起 ChatGLM-6B 和 ChatGLM2-6B 权重对学术研究完全开放,并且在完成企业登记获得授权后,允许免费商业使用。 ChatGLM2-6B 是开源中英双语对话模型 ChatGLM-6B 的

2023-09-08

,百度、字节、商汤、中科院旗下紫东太初、百川智能、智谱华章等 8 家企业 / 机构的大模型产品已经首批通过《生成式人工智能服务管理暂行办法》备案,可正式上线面向公众提供服务。 具体包括: 五家北京企业机构:

2024-08-22

;并且市场格局也主要还是由早期投入者如百度、商汤、智谱、百川等公司构成。 进入2024年,头部互联网公司加大对大模型的投入且发起价格战,为早期的大模型初创企业带来一定的竞争压力。预计未来 2-3 年,市场格局将发

2024-07-05

详细介绍: 1. UOS AI如何接入在线模型(例如月之暗面和智谱) 2. UOS AI如何接入本地模型(例如使用Ollama运行本地模型)   UOS AI 如何接入在线模型 目前,UOS AI 1.3.0版已在deepin V23 RC2应用商店发布,新版支持用户添加自定

2023-09-01

告】eBPF 到底是可观测领域的神器 or 鸡肋? 8 月 31 日,智谱 AI 宣布在各大应用商店正式上线首款生成式 AI 助手 ——「智谱清言」。用户可通过苹果商店 App Store、安卓主流商店(包括华为、OPPO、vivo 及小米等)进行下载,或

2024-07-27

型创业公司在以约200亿元的估值水平进行新一轮融资,即智谱AI与月之暗面。此外,新晋大模型公司阶跃星辰也跻身AI独角兽序列。今年6月,该公司被传正在进行一轮估值约20亿美元的新融资,阿里在投资者之列。 相关数据显示

2024-07-09

据智谱清言官方消息,旗下代码生成大模型 CodeGeeX正式发布CodeGeeX4系列模型的开源版本:CodeGeeX4-ALL-9B。 CodeGeeX4-ALL-9B作为最新一代CodeGeeX4系列模型的开源版本,在GLM-4强大语言能力的基础上继续迭代,大幅增强代码生成能力。

2023-07-05

用”一体化,为国家科技创新和技术发展作出更大贡献。智谱华章公司首席执行官张鹏表示,清华大学在人工智能基础模型研究领域取得的原始创新性成果令人瞩目,智谱愿与清华大学共同打造有影响力的基础性、源头性的新高

2023-11-07

、百川智能、商汤商量 SenseChat、抖音(云雀大模型)、智谱 AI(GLM 大模型)、中科院(紫东太初大模型)、上海 MiniMax(ABAB 大模型)、上海人工智能实验室(书生通用大模型)、“360 智脑”等等。 挑战 ChatGPT,国产有这 8

2024-07-05

使+轮融资。本轮融资由某知名产业方领投,跟投方包括智谱AI、360和水木清华校友基金等知名企业及机构,老股东耀途资本继续超额跟进,华兴资本担任独家财务顾问。 对本轮融资,创始人兼CEO袁进辉表示: “非常感谢各