大眼夹打工轨道人航空先生IT之家创空间huggingface 3 月 22 日消息,近日,阿里达摩院已在 AI 模型社区“魔搭”ModelScope 上线了“文本生成视频大模型”。
根据官方介绍,目前文本生成视频大模型,由文本特征提取、文本特征到视频隐空间扩散模型、视频隐空间到视频视觉空间这 3 个子网络组成,整体模型参数约 17 亿,目前仅支持英文输入。扩散模型采用 Unet3D 结构,通过从纯高斯噪声视频中,迭代去噪的过程,实现视频生成的功能。

官方介绍称,本模型适用范围较广,能基于任意英文文本描述进行推理,生成视频。一些文本生成视频示例如下:


据IT之家了解,模型已经在大眼夹打工轨道人航空先生IT之家创空间huggingface和 大眼夹打工轨道人航空先生IT之家创空间huggingface 上线,可以直接体验,也可以参考该页面自行搭建。模型需要硬件配置大约是 16GB 内存和 16GB GPU 显存。在 ModelScope 框架下,通过调用简单的 Pipeline 即可使用当前模型,其中,输入需为字典格式,合法键值为 'text',内容为一小段文本。该模型暂仅支持在 GPU 上进行推理。
从试玩的结果来看,目前能生成的视频长度多在 2-4 秒,生成等候时间从 20 多秒到 1 分多钟不等。
这是一场异常艰巨的战“疫”。 近三年来,我国有效处置100多起聚集性疫情,在病毒最凶猛的阶段,有效保护14亿多人民的生命安全和身体健康,新冠发病、重症和死亡比例均处于全球最低水平。 近三年...
以科技赋能乡村产业链、供应链发展,仍任重道远。 文|《中国企业家》记者 刘炜祺 编辑|米娜 12月10日~11日,由《中国企业家》杂志社主办的“第二十届中国企业领袖年会暨第二十二届中国...
炒股就看金麒麟分析师研报,权威,专业,及时,全面,助您挖掘潜力主题机会! 【方证视点】经济压力较大 反转势在必行——1212 来源:伟哥论市 核心观点 经济的下行压力及通缩风险的...
对于经济重启的预期从11月就开始强化,随后的疫情防控“新十条”措施落地,A股、港股、人民币此前持续反弹,不过近几日开始陷入震荡格局。 摩根士丹利中国首席经济学家邢自强近日对第一财经表示,中国“...
炒股就看金麒麟分析师研报,权威,专业,及时,全面,助您挖掘潜力主题机会! 12月15日消息,三大指数早间走势分化,沪指维持低位震荡,创业板指探底回升翻红。板块方面,半导体芯片股持续强势,ch...
来源:小福通 今天,看到网上一个恒大员工的离职信,很受触动。这封信里列举了一些数字,比如恒大向9省区75个县捐款179.9亿,派出2856个员工组成的专职扶贫团队,跋山涉水200多万公里,走村...