股票配资首选平台 ,中金:从OpenAI Sora看视频生成模型技术进展
2024-08-06 【 字体:大 中 小 】
股票配资首选平台 ,中金:从OpenAI Sora看视频生成模型技术进展
中金公司研报指出,2月15日,OpenAI发布最新视频生成模型Sora,能够生成长达一分钟的分辨率为1920*1080的高质量视频,在生成时长和生成质量上较其他现有模型和产品实现了明显突破。
中金认为,Sora实现了AI+视频场景的效果突破,通过借助Transformer架构展现了优异的可拓展性(Scalable)。展望未来,我们判断基于Transformer架构的大模型有望在更多模态领域实现复刻,看好多模态领域技术进展。
以下为其核心观点:
延续DiTs架构,Sora实现高质量长视频生成。根据技术报告,Sora延续DiTs架构,随训练计算量提升而展现出显著的生成能力提升(Scalable)。相较先前模型,我们认为其最为突出的创新之处在于:1)LDM自编码器实现时间维度压缩,使得长视频生成成为可能;2)直接对LDM中潜视频进行图块化处理并直接使用Transformer建模,解除输入格式限制的同时,能够创新性地实现任何像素和长宽比视频的生成;3)我们判断其训练数据集中可能包含带有物理信息的合成数据,从而使模型展现出对物理信息的初步理解能力;4)复用DALL·E 3的重标注技术,对视频数据生成高质量文字标注,借助GPT对提示词进行扩展,提升生成效果。
技术基础一:扩散模型是当前图片/视频生成的主要技术路线。扩散模型(Diffusion model)通过神经网络(主要是U-Net)从纯噪声图像中学习去噪过程,从而通过给定噪声来完成图像生成任务。潜在扩散模型(Latent diffusion model)通过降维进一步提升了训练效率并降低训练成本,成为图片生成的主要技术路线。在预训练的图片生成模型基础上,学界提出生成关键帧并在时序上实现对齐即可将图片生成模型转化为视频生成模型,但这类模型存在生成时长短、稳定性差等劣势。
技术基础二:Transformer架构的引入使扩散模型能够实现规模效应。DiTs(Diffusion transformer)将先前扩散模型的骨干U-Net卷积网络替换为可伸缩性更强的Transformer,从而能够实现更强的可拓展性,即能够通过增加参数规模和训练数据量来快速提升模型的性能表现,模型在图片生成任务上表现优异。W.A.L.T.首次将Transformer架构引入视频生成模型,使用窗口注意力降低了对算力的需求,并展现了良好的视频生成能力。
我们认为Sora实现了AI+视频场景的效果突破,通过借助Transformer架构展现了优异的可拓展性(Scalable)。展望未来,我们判断基于Transformer架构的大模型有望在更多模态领域实现复刻,看好多模态领域技术进展。
风险
技术进展不及预期;应用落地不及预期;行业竞争加剧。
股票配资怎么操作郴州股票配资网上炒股配资平台猜你喜欢
股票配资怎么做 ,通达信涨停板天数主图指标公式(附源码破译、测评和源码)
,违法违规行为零容忍!深交所“三管齐下”持续强化上市公司监管
黄金期货配资软件 ,1月份中国电商物流指数公布,总业务量指数创下近两年内新高
期货配资比例 ,沈哈邕筑年货礼盒丰富多样
配资股是 ,利好频频助推深V反弹 多头集结夺回2900点
股票配资实盘 ,巴菲特遗嘱,突然公布
银川股票配资 ,图书市集遍地开花,没逛书节的五一长假是不完整的
,【早知道】监管部门禁止机构通过股指期货做空A股?证监会回应
股票配资炒股 ,吉林省招商引资座谈会在京召开 精确集团与临江市签署战略合作协议
配资专业在线炒股配资 ,沪指八连阳收报300488点 AI应用端全天强势
,美国债市惊现暴动:美联储的政策错误即将到来!?
配资股是 ,利好频频助推深V反弹 多头集结夺回2900点
股票配资怎么做的 ,英伟达Q4营收预估增长237%,分析师:受益于AI繁荣利润和营收将大幅增长
黄金期货配资软件 ,1月份中国电商物流指数公布,总业务量指数创下近两年内新高
,中国银行上海市分行与上海对外经贸大学举行“复兴壹号”智慧党建平台启动仪式
配资专业在线炒股配资 ,沪指八连阳收报300488点 AI应用端全天强势
确保您的炒股安全:了解股票配资的安全策略
股票配资公司收费 ,【西街观察】如何看待2275万亿元新增贷款
股票配资分仓系统 ,百丽时尚递交招股书:七年数字化转型成效显著 净利润同比增长927%
股票配资炒股 ,吉林省招商引资座谈会在京召开 精确集团与临江市签署战略合作协议
确保您的炒股安全:了解股票配资的安全策略
股票配资分仓系统 ,百丽时尚递交招股书:七年数字化转型成效显著 净利润同比增长927%
配资股是 ,利好频频助推深V反弹 多头集结夺回2900点
期货配资比例 ,沈哈邕筑年货礼盒丰富多样
选择正规股票配资平台的重要性
股票配资炒股 ,吉林省招商引资座谈会在京召开 精确集团与临江市签署战略合作协议
银川股票配资 ,图书市集遍地开花,没逛书节的五一长假是不完整的
股票配资如何选择配资平台 ,坚持系统观念深入推进协同发展
,【早知道】监管部门禁止机构通过股指期货做空A股?证监会回应
,深证成指涨幅扩大至2%