中华网 china.com

新闻

图森未来正式发布图生视频大模型“Ruyi” 推动创作新变革

关键词:
2024-12-17 11:28:49  搜狐网

图森未来正式发布图生视频大模型Ruyi。12月17日,图森未来发布了其图像生成大模型“Ruyi”,引起业界广泛关注。该模型专为消费级显卡优化,用户可以通过huggingface平台下载开源版本Ruyi-Mini-7B。这一发布标志着图像生成技术的重大进步,为AI创作者提供了便捷和高质量的工具,推动了智能设备领域的创新发展。

Ruyi支持从384x384到1024x1024的分辨率,用户可根据需要调整视频长宽比,最长可生成120帧/5秒的视频。此外,Ruyi允许用户设置最多5个起始帧和5个结束帧,通过循环叠加实现无限长度的视频生成。模型还提供四档运动幅度控制,用户能精确把控画面变化程度。在镜头控制方面,Ruyi能满足多种需求,包括上、下、左、右及静止的镜头角度,极大丰富了创作空间。

该技术基于DiT架构,包含CasualVAE模块和DiffusionTransformer模块。CasualVAE模块负责视频数据的高效压缩与解压缩,而DiffusionTransformer则在压缩后生成高质量视频。Ruyi模型总参数量达7.1亿,使用了约200M视频片段进行训练,显示出其在视频生成领域的强大能力和潜力。这项技术将使影视制作人、内容创作者和设计师享受到更高效便捷的体验。

在实际应用中,Ruyi为游戏、视频制作、日常社交平台等领域提供了新的可能性。通过灵活的参数设置和高效的处理能力,创作者可以快速生成内容,提升生产效率,甚至实现高质量的实时渲染。这对需要大量视频素材的行业尤其有吸引力。在竞争激烈的智能设备市场上,Ruyi的发布吸引了众多创作者的关注,成为AI图像生成领域的重要选择。

尽管功能强大,Ruyi目前仍存在一些不足之处,如手部畸形、多人物时面部细节崩坏及不可控的转场效果等。这表明未来还需进一步改进模型,增强其实用性和兼容性。随着不断更新和完善,Ruyi将越来越符合市场需求,并提升用户体验。

Ruyi的推出使其在视频生成技术的竞争中占得先机,与Adobe、NVIDIA等行业巨头形成有效竞争。技术的开源模式让更多的开发者和爱好者参与迭代,推动AI创作的普及。越来越多的创作者开始利用这一先进技术进行个性化创作,对内容生产的形态产生深远影响。

图森未来的Ruyi大模型为视频内容创作开启了新的大门,其技术进步和市场反响显著。未来,行业将更加关注这类技术的发展及其应用,特别是在创作效率和质量上,Ruyi有潜力引领行业变革。对于有意尝试这一创新工具的创作者来说,Ruyi的开源特性为他们提供了一个良好的起点,鼓励更多创意思维的诞生。

(责任编辑:卢其龙 CN070)
关闭

下载公开信息卖给境外也属间谍行为 国安破获多起主动投靠境外间谍组织案

下载公开信息卖给境外也属间谍行为2024-12-17 11:28:20

马龙赛后朝球童勾勾手送签名球衣 暖心互动传递乒乓精神

马龙赛后朝球童勾勾手送签名球衣2024-12-17 11:27:14

王楚钦连续51周霸榜世排第一 国乒男单强势占据前列

王楚钦连续51周霸榜世排第一2024-12-17 11:26:41

马龙赛后朝球童勾勾手送签名球衣 暖心互动传递乒乓精神

马龙赛后朝球童勾勾手送签名球衣2024-12-17 11:27:14

郑州上街区发生高坠事故,造成1人死亡

郑州上街区发生高坠事故2024-12-17 11:20:24

学校辟谣设学霸就餐区区别对待学生 已整改取消

学校辟谣设学霸就餐区区别对待学生2024-12-17 11:18:20

北约立场松动:西方劝乌克兰以“领土换和平”

北约国家劝乌“领土换和平”2024-12-17 10:15:13

特朗普团队评论俄乌圣诞节停火提议 支持和平第一步

特朗普团队评论俄乌圣诞节停火提议2024-12-17 10:31:54

法国新总理曾因一记耳光声名大噪 意外之举赢得广泛支持

法国新总理曾因一记耳光声名大噪2024-12-17 11:19:50

时代姐妹花还原倒红酒名场面 青春回忆再燃

时代姐妹花还原倒红酒名场面2024-12-17 11:25:46

下载公开信息卖给境外也属间谍行为 国安破获多起主动投靠境外间谍组织案

下载公开信息卖给境外也属间谍行为2024-12-17 11:28:20

黑底白字招牌装了拆瞎折腾的钱谁出 城市规划需尊重商户

黑底白字招牌装了拆瞎折腾的钱谁出2024-12-17 10:19:32

加拿大副总理兼财长宣布辞职 与总理意见不合

加拿大副总理兼财长宣布辞职2024-12-17 10:31:30

尹锡悦惊天阴谋曝光:刺杀政界领袖嫁祸朝鲜,总统成韩朝野的公敌

尹锡悦戒严令背后惊天阴谋曝光2024-12-17 11:24:38

德国总理朔尔茨输掉信任投票 接下来会发生什么?

法德总理相继输掉信任投票意味着啥2024-12-17 11:26:21

倪萍正面回应质疑:“造谣”,称自己太瘦了想胖一点

倪萍称太瘦了想胖一点2024-12-17 11:25:30

多个平台回应评论区哭穷机票降价 用户尝试反向驯化算法

多个平台回应评论区哭穷机票降价2024-12-17 10:22:08

美媒:美国还没准备好迎接女总统 性别偏见仍是障碍

美媒,美国还没准备好迎接女总统2024-12-17 10:51:14

王楚钦喊话请期待我的满血归来 调整身心再出发

王楚钦喊话请期待我的满血归来2024-12-17 11:18:44

陈梦王曼昱女双第一 国乒荣耀再添辉煌

陈梦王曼昱女双第一2024-12-17 11:23:57

胖东来多个自营产品线上上新即售罄 备货不足引发热议

胖东来多个自营产品线上上新即售罄2024-12-17 11:16:41

韩国前国防部长官拘留延长 期限延至28日

韩国前国防部长官拘留延长2024-12-17 10:09:09

王楚钦谈输给樊振东 需学习关键分处理

王楚钦谈输给樊振东2024-12-17 11:21:36

女排世俱杯竞赛日程来了 排坛巨星齐聚杭城

女排世俱杯竞赛日程来了2024-12-17 11:17:56

菲批准与日本军事准入协定 强化防务合作

菲批准与日本军事准入协定2024-12-17 10:08:36

日本人带爸妈参观四行仓库!妈妈当场泪目

日本博主带父母参观四行仓库2024-12-17 11:23:36

美联储领衔!多达25家央行本周“扎堆”议息 近半个地球为之癫狂?全球市场聚焦决策时刻

美联储领衔,多达25家央行本周扎堆议息近半个地球为之癫狂2024-12-17 10:19:49

外媒:英国防部承认目前仅两艘驱逐舰可投入使用,“舰队规模创历史低点” 海军实力堪忧

外媒,英国防部承认目前仅两艘驱逐舰可投入使用,舰队规模创历史低点2024-12-17 10:17:47

拜登称离任后将继续参与政党活动 展望民主党未来

拜登称离任后将继续参与政党活动2024-12-17 11:26:32

王楚钦连续51周霸榜世排第一 国乒男单强势占据前列

王楚钦连续51周霸榜世排第一2024-12-17 11:26:41

专家:平台容纳就业的峰值加速到来 市场机制调节从业者收入

专家,平台容纳就业的峰值加速到来2024-12-17 10:21:54

加沙截肢儿童已占比全球最高,被迫无麻药接受手术 医疗物资极度匮乏

加沙截肢儿童已占比全球最高,被迫无麻药接受手术2024-12-17 10:30:11