什么是 Sora 能否简单介绍一下?(so什么意思英语)

Sora 是 OpenAI 发布的一个文本到视频的生成模型,可以根据描述性的文本提示生成高质量的视频内容。从核心本质上看,Sora 是一个具有灵活采样维度的扩散变压器,有三个部分:时空压缩器、ViT 和类似 CLIP 的条件机制。Sora 将视觉数据转换成补丁,通过一个专门的网络来降低视觉数据的维度,提取一系列的时空补丁,作为变换器模型的输入令牌,然后通过预测输入噪声补丁的原始“干净”版本进行训练,结合了变换器架构,从而生成新的视频内容。

0
分享到:
没有账号? 忘记密码?