新媒网跨境获悉，近期在AI视频制作领域，一项创新技术正引发广泛关注。来自台北的AI初创公司GliaCloud，作为美国公司NVIDIA旗下Inception项目的成员，专注于自动化营销内容创作，近期开源了Omniverse-ComfyUI Bridge。这一技术基于NVIDIA Omniverse Kit开发，能将视觉数据直接从NVIDIA Omniverse RTX渲染器传输到ComfyUI平台，支持多种数据类型，如RGB图像、法线贴图、深度图和语义分割图。这种能力让用户能在AI驱动的图像处理流程中，高效提取并应用精准的视口数据，显著提升视频生产和定制效率。

随着生成式AI视频模型在全球创意和营销技术行业的普及，新工作流正加速生产效率并提升输出质量。GliaCloud团队在实验ComfyUI中的视频到视频（v2v）生成模型时，发现当前AI工作流对深度图等细节视觉数据的需求日益增长，从而催生了Omniverse-ComfyUI Bridge的构想。GliaCloud联合创始人兼首席执行官David Chen（来自台湾）表示，将NVIDIA Omniverse这类先进3D渲染引擎与生成视频模型结合，能提供前所未有的创意控制和视觉精度，满足新兴市场需求。在内部测试中，团队利用Omniverse渲染数据作为v2v模型输入，观察到生成内容的精细度和对象控制有明显改进。

这一进步得益于NVIDIA Omniverse Replicator工具，它通过动态掩码创建优化了开源视频生成模型的输出。现在，v2v模型能对单一输入进行多轮迭代，针对特定区域应用不同提示，实现基于对象的风格控制。新媒网跨境认为，这种技术融合不仅降低了门槛，还推动了创意产业的民主化进程，让更多中小企业和个人创作者受益。Omniverse-ComfyUI Bridge的设计强调灵活性、可扩展性和易集成性，其轻量架构确保用户能无缝融入定制化工作流，无需大量资源开销。核心功能包括单帧和多帧捕捉，支持精确编辑或动画序列；自定义节点集成，实现渲染器数据直接流入ComfyUI节点；以及实时数据处理，提供即时视觉反馈，大幅缩短迭代时间并提升生产力。

未来版本预计将添加高级动画控制、人体姿态估计模型集成和边缘检测等特性，进一步增强AI驱动工作流的精度和创意自由度。GliaCloud团队预测，随着生成式AI的持续演进，类似Omniverse-ComfyUI Bridge提供的高质量数据流将变得至关重要。社区在开发新模型的同时，工作流迭代速度将急剧提升。新媒网跨境预测，这一开源方案有望成为行业标杆，推动全球视频制作技术迈向新高度。

用户现在可借助GliaCloud的开源工具，将自有OpenUSD资产整合到v2v工作流中，结合NVIDIA Cosmos等ComfyUI节点。该方案融合了Omniverse RTX渲染器的逼真渲染能力和ComfyUI的模块化界面优势，让用户能快速实验定制管道。GliaCloud致力于拥抱开源社区，促进创意民主化。建议开发者使用NVIDIA Omniverse Kit应用模板构建自己的工具，并加入NVIDIA Omniverse开发者社区的讨论。

GliaCloud团队特别感谢来自台湾的创意技术专家Billy Ho和DevOps工程师Ying Xiang Zhao，他们对本文贡献良多。新媒网跨境发布将持续关注此类技术创新，助力行业进步。

新媒网（公号: 新媒网跨境发布），是一个专业的跨境电商、游戏、支付、贸易和广告社区平台，为百万跨境人传递最新的海外淘金精准资讯情报。

本文来源：新媒网 https://nmedialink.com/posts/4518.html