该模型对影视动画数据进行逆向处理，从而得到高质量的工业级分镜数据集，并且设计了分镜多智能体框架，高质量实现场景、镜头、角色和动作的生成。在图像生成效果上，昆仑万维使用自研首创的DiT-Moe模型，提升图像质量。就如在正式拍摄的过程中一样，需要将分镜头有机融合在一起，才能得到一个完整的故事体系。

SkyReels使用WorldEngine，它是业界首个将AI 3D引擎与视频大模型深度融合的创新平台，实现了3D 生成、视频生成、3D与视频混合创作

。WorldEngine创新平台包含多个子环节，每个环节又分别使用了不同的模型。

在3D生成模块中，

使用的是自研的Sky3DGen大模型，它能够生成多样化的3D元素和场景，从自然景观到未来都市，从静态物体到动态角色，并且提供了实时的3D场景交互能力，使得用户可以即时看到调整和编辑的效果，加快创作流程。在WorldEngine的加持下，用户可以构建3D虚拟影棚，实现虚拟拍摄体验。

在3D与视频混合创作模块，昆仑万维以图层融合技术为核心，打造3D与视频混合创作模式。视频中的任意元素都可以自由选择使用3DAI引擎生成或者视频大模型生成。此外，针对混合中遇到的光照和风格差异细节，昆仑万维单独训练了融合生成模型，使得图层融合后的视频呈现较好的一致性。

由于引擎的使用，与传统的视频生成相比，WorldEngine实现了成本下降，同时，生成速度也提升了数个量级。虽然一个短视频到这里基本完成生成了，但常常刷剧的群体也会感受到，好的台词功底和BGM对剧情的展示，有着事半功倍的效果。在台词上，SkyReels的AI文本理解技术，经过上万本小说的深度学习，能够自动化地从文本中识别角色对话、情感表达，并预测出合理的句间停顿。在旁白方面SkyReels通过情感化语音合成技术，帮助旁白用抑扬顿挫的韵律，让角色对话充满丰富充沛的情感。昆仑万维透露，SkyReels的智能体不仅能理解文字，更能智能分析剧本中的场景氛围，“基于先进的多模态检索和背景音乐（BGM）生成能力，我们能够为视频智能配上合理的背景音乐，让每一帧画面都与音乐完美融合。”昆仑万维AI短剧平台SkyReels这一革命性的工具,有望带来AI短剧用户生成内容（UGC）与专业用户生成内容（PUGC）的爆发式增长，为短剧内容生态注入前所未有的活力，推动短剧内容创作与消费市场的进一步快速增长。一个由AI技术驱动的短剧创作与消费的时代，正在到来。昆仑万维AI UGC的全球布局国海证券研报提到，AI有望提高短剧产能，降低成本。短剧出海市场空间保守预测约为360亿美元。SkyReels是昆仑万维出海布局策略中的一个缩影，背后是他们All in AIGC的战略思考。2020年，昆仑万维创始人周亚辉就看到了AIGC的潜力，他们预判AI体系之下将会迎来新的内容的黄金时代。昆仑万维董事长兼CEO方汉回顾移动互联网时代的机遇，总结爆红内容产品的规律，发现大多数都是“免费+To C”的模式，因为群体基数足够大，只要产品能够戳中用户的需求点，就能获得指数级的用户增长，打造“AI UGC”平台成为昆仑万维的核心策略，即给1%的内容创作者提供服务、让99%的用户消费内容。那么，AIGC时代爆红的产品画像是怎样的？方汉认为，适配AI的端侧新硬件、新手机诞生的时候，或许就是AIGC获得颠覆性成果的时候，但这个过程还需要3～5年，而当下的核心任务是找准机会点，做好预判并占据AIGC的风口。按照移动互联网时代的规律，每个国家都可能有自己的超级App，也可能一个超级App同时在多个国家划分地盘。方汉经过一番思考后，认为应该先占据用户性价比和接受程度高的国家，比如欧美、日韩和中国，再逐步扩散到中东、东南亚、南美等地区。圈定国家之后，昆仑万维的管理层开始思考能够诞生超级App的垂类，他们不断问自己“怎么样才能变成巨头？”上一个时代至今还活着的内容巨头，基本都深耕某一个垂直娱乐品类，比如网文、短剧、动画，同样的逻辑在AIGC上也会重演。目前，昆仑万维已经针对“AI UGC”策略在国内进行系统布局，在大模型、AI搜索、AI音乐等板块均已构建产品矩阵。其中，昆仑万维的大模型已历经多次迭代：2月份推出新版

MoE

大语言模型“天工2.0”与新版“天工AI智能助手”APP；4月份“天工3.0”基座大模型与“天工SkyMusic”音乐大模型正式开启公测；6月份昆仑万维开源开源隶属于“天工3.0”的 2 千亿稀疏大模型 Skywork-MoE，在

OpenAI

宣称封锁来自非支持国家和地区的API流量时，天工开放平台面向OpenAl API用户推出“一键搬家计划”，并提供1.5亿Tokens的API调用资源，其中就包括天工2.0及天工3.0大模型。在迭代大模型的同时，AI搜索也进入方汉的重点关注范畴，昆仑万维早于OpenAI的SearchGPT一年时间布局AI搜索，并在今年对搜索产品进行升级，支持搜索文本、图片、视频等板块，用户可将结果以思维导图、表格、大纲等形式呈现，并能保存大纲及思维导图直接生成PPT。除了产品层面，昆仑万维耶联合国际高校，开源数字智能体研发工具包AgentStudio，为研究人员和开发者提供覆盖智能体完整开发流程的综合性平台。不论国内还是海外，每一个语言体系都需要有自己的一套产品，昆仑万维相信，AIGC平台在全球的红利期即将到来。

昆仑万维推出全球首款AI短剧平台SkyReels，短剧进入“无人区”！