太阳光染器通过几个步骤的生成过程实现参考染
SolarRenderer将游戏引擎,Blender,three.js或其他来源的无纹理结构传递转换为由单个参考第一指导的成品,风格化的实时视频.它基于 MiniMax -H3与控制和几步蒸低等级适应模型构建,在没有每场比赛训练的情况下逐一保持对象位置,运动和时间框架. 在持有结构基准上,它在九种方法中排名第一个,Elo分数为1.1313它的块因果学生每个段落呈现了4个步骤,以每秒24,的速度产生17 ?? 的片段0.70通过关键值缓存实现输入延迟和无限流. 可提供纸张,项目页面,代码和权重.
主要内容
- SolarRenderer将无纹理的发动机结构传递转换为风格化的实时视频,
- 它建立在 MiniMax -H3的基础上,具有控制 LoRA 和几个步骤蒸.的 LoRA ,仅使用参考第一个框架并且不需要每场比赛训练.
- 它支持诸如Blender,three.js,游戏引擎和手机捕捉屏幕等多种输入,并且可以通过KV缓存无休止地进行流媒体.
- 它在结构基准上以Elo 1313排名第一,并实现低延迟:每0.70秒的17片段24 FPS ,大约比输入落后1.1秒.
标签描述: 字体的类型是什么? (Meta description) SolarRenderer使用 MiniMax -H3 LoRAs将无纹理的发动机结构传递转换为风格实时视频,并报告Elo 1313结构基准.
标签: 一个字母,一个字符号. (TG) " 太阳光染器,实时视频生成,结构指导, MiniMax -H3,游戏染
首选图片: 在线视频, 下载地址: http://www. 一种抽象的技术风格, 显示无纹理的几何形状成为一种有型化的视频流.
背景:结构通道需要视觉风格
来自任何引擎的无纹理结构传递可能已经定义了物体在哪里,它们如何移动以及每个发生时,但它仍然缺乏完整的风格视频外观.SolarRenderer通过将这些传输转换为由参考第一指导的完成式视频来解决这一缺口.
发展:以第一框架为指导
该模型建立在 MiniMax -H3的基础上,具有控制 LoRA (低级适应) 和几个步骤蒸.的 LoRA .它的输出遵循输入几何形状,运动和时间框架一,因此每个对象都保持在引擎放置的地方,染与游戏保持时间.它接受任何游戏,角色或场景:Blender,3 .js浏览器游戏,游戏引擎,甚至是手机拍摄屏幕. 它以第一设定的外观进行 per染,没有每次游戏训练.
最新进展:基准值和延迟数
在一个持有的基准,SolarRenderer在结构上排名第一,Elo分数为1313与其他九种方法相比.它的块因果学生每段 89染4个步骤并以每秒24的速度每0.70秒产生17片,落后于输入大约1.1秒. 具有密钥值缓存或KV缓存,它只要输入就会持续下去. 该版本将其作为控制器驱动的无尽流进行框架化.
资源列在 纸张没有. 项目页面没有. 编码, 以及 其他: , . ! ? 权重,数据和基准值的收集. 根据该指标所述:这是什么?
Comments
No comments yet. Be the first to comment.