2月16日凌晨,OpenAI再次扔出一枚深水炸弹,发布了首个文生视频模型Sora。据介绍,Sora可以直接输出长达60秒的视频,并且包含高度细致的背景、复杂的多角度镜头,以及富有情感的多个角色。
目前官网上已经更新了48个视频demo,在这些demo中,Sora不仅能准确呈现细节,还能理解物体在物理世界中的存在,并生成具有丰富情感的角色。该模型还可以根据提示、静止图像甚至填补现有视频中的缺失帧来生成视频。
例如一个Prompt(大语言模型中的提示词)的描述是:在东京街头,一位时髦的女士穿梭在充满温暖霓虹灯光和动感城市标志的街道上。
在Sora生成的视频里,女士身着黑色皮衣、红色裙子在霓虹街头行走,不仅主体连贯稳定,还有多镜头,包括从大街景慢慢切入到对女士的脸部表情的特写,以及潮湿的街道地面反射霓虹灯的光影效果。
另一个Prompt则是,一只猫试图叫醒熟睡的主人,要求吃早餐,主人试图忽略这只猫,但猫尝试了新招,最终主人从枕头下拿出藏起来的零食,让猫自己再多待一会儿。在这个AI生成视频里,猫甚至都学会了踩奶,对主人鼻头的触碰甚至都是轻轻的,接近物理世界里猫的真实反应。
OpenAI表示,他们正在教AI理解和模拟运动中的物理世界,目标是训练模型来帮助人们解决需要现实世界交互的问题。
随后OpenAI解释了Sora的工作原理,Sora是一个扩散模型,它从类似于静态噪声的视频开始,通过多个步骤逐渐去除噪声,视频也从最初的随机像素转化为清晰的图像场景。Sora使用了Transformer架构,有极强的扩展性。
近日,OpenAI公司遭遇了内部管理层的重大变动,引发了业界广泛关注。原CEO萨姆·阿尔特曼被解除职务,而曾任Twitch高管的Emmett Shear接任为临时CEO。
2023-11-21 10:05:00OpenAI动荡“始作俑者”发声美东时间11月6日,OpenAI的开发者大会上,一系列新的宣布让整个科技界为之震撼。
2023-11-08 10:05:18OpenAI对创业公司有何影响原标题:15年来最高级别预警!停运、封路、景区关闭……11省份启动应急响应!冻雨还要持续多久?专家解读据央视新闻,2月1日10时,中央气象台发布首个冰冻橙色预警
2024-02-02 09:06:41中央气象台发布冰冻暴雪双预警10月下旬以来,我国大部地区气温异常偏高,华北、黄淮、江淮等地888个气象观测站最高气温突破当地历史同旬极值。
2023-11-04 08:21:27今年下半年首个寒潮预警发布原标题:AI生成的《西游记》短片震惊网友Sora到底懂不懂物理世界?一年前,AI模型ChatGPT的问世引发了社会各界广泛讨论,如今AI技术已经带来翻天覆地的变化。
2024-02-20 09:48:16Sora到底懂不懂物理世界?中国天气网讯中央气象台12月14日10时发布最高等级的寒潮橙色预警:受强寒潮影响,预计,12月14日14时至12月17日08时,我国大部地区将自西向东、自北向南先后降温8~12℃
2023-12-14 14:15:35寒潮橙警!部分地区降温超20℃