济南时报2024年10月11日日发布:图片合成3D视频!开源的3D渲染视频模型问世!

⭐发布日期:2024年10月11日 | 来源:济南时报

⭐作者:玉龙隐士 责任编辑:Admin

⭐阅读量:210 评论:2人

【下载港澳直播医开奖结果今晚】

【澳门结果立史纪录】

【澳门天天彩今晚开什么号码查询】 【天天彩app是合法的吗安全吗是真的吗】 【澳门天天彩200期结果查询】 【2020澳门彩每天结果】 【下载港澳彩结果直播视频】 【澳门现场直播结果录像下载安装】 【2023澳门天天六开好彩结果是多少号开奖记录查询】 【澳门码结果今晚上几点开彩的开奖结果记录】
【新澳门历史记录查询结果开奖结果查询】 【澳门直播下载 现场直播视频大全】 【澳门彩今天晚上开什么啊?】 【今晚澳门开什么号码?】 【澳门天空彩天彩票网下载app】 【今晚澳门特马开什么号码342】 【香港澳门号码表查询结果今天最新开奖历史记录】 【内部传真澳门传真三年老玩开奖结果记录】

Stable Diffusion官方又又又又上新了。

本次的下手对象是视频。

3月18日,Stability AI发布了用于渲染3D视频的生成式AI视频工具Stable Video 3D(SV3D)。

全新SVD的模型支持文本到视频、图像到视频生成。

只需输入几行描述性的文字,或放入一段静态图像,你就能获得一段生动的动态视频。

不光如此,它还支持物体从单一视角到多视角的转化。这意味着用户可以仅提供一个静态图像,SV3D就能够展示该对象从不同角度的样貌。并通过生成的多视角图像,进一步构建对象的3D网格模型,为用户提供一个完整的三维视觉体验。

这一全新的技术就像是给视频制作领域注入了一剂强心针,让内容创作者们激动不已。

甚至发问:

那么,SV3D是如何做出此番突破的呢?

研究人员披露:“这主要得益于大规模预训练生成模型,使其能够充分泛化到各个领域。”

Stable Video 3D基于去年末发布的Stable Video Diffusion模型,后者经过大型数据集如LAION和LVD的训练。随后,SV3D在“Objaverse”数据集的精炼版本上进行了进一步训练,该数据集包含了大量的3D物体。

这让他可轻松适应各种下游任务,包括通过对多视图数据集进行微调从单个图像进行多视图合成。

此外,SV3D还首次将视频扩散模型应用到了3D生成领域。利用视频模型的时间一致性来提高3D生成的一致性。

它有两个变体:

SV3D_u:此变体基于单图像输入生成360度环绕视频,无需相机条件。

SV3D_p:在SV3D_u的基础上扩展,能够处理单图像和轨道视图,允许沿特定相机路径创建特定视角3D视频。

不光如此,研究人员还改进了3D优化技术。

比如采用由粗到细的训练策略,优化NeRF和DMTet网格来生成3D对象。

比如设计了一种名为掩码得分蒸馏采样(SDS)的特殊损失函数,通过优化在训练数据中不直接可见的区域,来提高生成3D模型的质量和一致性。

比如引入了一个基于球面高斯的照明模型,用于分离光照效果和纹理,在保持纹理清晰度的同时有效减少了内置照明问题。

比如采用CFG(无分类器引导)来控制生成的清晰度,采用三角形CFG缩放来避免过度锐化。

形形色色,不一而足。

虽然目前只发布了基础模型,但Stability AI官方透露“正计划继续扩展,建立类似于Stable Diffusion的生态系统”。

Stable Video 3D也确实秉承了Stability AI一贯的开放传统,官方公布了两种图像到视频模型,可以以每秒3到30帧之间的自定义帧速率生成14(SVD)和25帧(SVD-XT)的视频。

美中不足的是,该模型最低的显卡运行要求为英伟达GeForce RTX 4090及以上。

此外,Stable Video 3D不可商用。想要商业使用的小伙伴,可能还得订阅一个Stability AI Professional的会员(每月20美元)。

在接受VentureBeat采访时,Stability AI首席研究员Varun Jampani表示,“Stable Video 3D是生成3D资源的宝贵工具,特别是在游戏行业内。此外,它还能制作360度环绕视频,这在电子商务中很有用,为购物提供了更具沉浸感和互动性的体验。”

或许在不久的将来,3D生成技术就会被用到游戏和视频项目中,让所有人大吃一惊。

官方网址:

https://stability.ai/news/introducing-stable-video-3d

开源地址:

https://huggingface.co/stabilityai/sv3d

【12949.cσm查询记录请】 【下载澳门六6合宝典2023】
【澳门天天彩2023记录表查询最新官网】 【澳门传真内部绝密网站】
【刘伯温现场视频】 【澳门码记录下载】
【澳门彩记录2020年历史数据查询】 【澳门现场结果直播78期】
【资料大全正版资料免费】 【澳门六开彩242期结果是什么】
【澳门直播现场直播视频回放下载开奖记录今晚】 【澳门现场直播2020年8月9日开奖记录查询】 【澳彩资料免费长期公开开奖结果记录】
上一条新闻 下一条新闻

推荐文章

发表评论

Ryle

7秒前:”

IP:12.76.4.*

佐藤康惠

7秒前:它有两个变体:

IP:82.34.6.*

弗洛劳·卡达尔

1秒前:在接受VentureBeat采访时,Stability AI首席研究员Varun Jampani表示,“Stable Video 3D是生成3D资源的宝贵工具,特别是在游戏行业内。

IP:59.56.4.*

济南时报APP介绍

APP图标

澳门现场直播2023记录表APP名:济南时报

版本:V2.31.982

更新时间:2024-10-10 15:18

澳门结果4887记录图片大全这是一个功能强大的澳门天天彩第471期结果APP,可以帮助你完成各种任务。包括最新24小时热点资讯,今日最新:随后,SV3D在“Objaverse”数据集的精炼版本上进行了进一步训练,该数据集包含了大量的3D物体。

澳门现场直播结果记录2019年APP介绍

APP图标

2024澳门记录直播APP名:济南时报

版本:V8.20.507

更新时间:2024-10-10 23:19

澳彩图库手机app官方版下载最新免费这是一个功能强大的澳门现场直播结果结果下载软件APP,可以帮助你完成各种任务。包括最新24小时热点资讯,今日最新:那么,SV3D是如何做出此番突破的呢?

澳门4949结果最快APP介绍

APP图标

天天彩平台资料在哪里找到APP名:济南时报

版本:V8.88.897

更新时间:2024-10-10 19:18

2023年澳门今晚号码直播这是一个功能强大的2024澳门记录历史查询表格大全APP,可以帮助你完成各种任务。包括最新24小时热点资讯,今日最新:全新SVD的模型支持文本到视频、图像到视频生成。

49图下载安装APP介绍

APP图标

2024澳门记录历史查询表格图片APP名:济南时报

版本:V1.77.322

更新时间:2024-10-10 20:17

澳彩资料大全部下载手机版最新这是一个功能强大的澳门49码第一现场直播视频APP,可以帮助你完成各种任务。包括最新24小时热点资讯,今日最新:SV3D_u:此变体基于单图像输入生成360度环绕视频,无需相机条件。

澳门结果最新APP介绍

APP图标

202o年澳门号码APP名:济南时报

版本:V7.40.928

更新时间:2024-10-10 16:17

澳门现场直播网址是什么呢视频这是一个功能强大的2024澳门结果出来6APP,可以帮助你完成各种任务。包括最新24小时热点资讯,今日最新:比如采用由粗到细的训练策略,优化NeRF和DMTet网格来生成3D对象。

2021年澳门记录查询表图片APP介绍

APP图标

天天彩平台奇迹团队怎么进入APP名:济南时报

版本:V1.77.338

更新时间:2024-10-10 22:24

澳门结果+记录2020这是一个功能强大的2021澳门码结果查询APP,可以帮助你完成各种任务。包括最新24小时热点资讯,今日最新:甚至发问:

2021澳门码记录结APP介绍

APP图标

m6cc澳门天天彩库app下载APP名:济南时报

版本:V9.68.456

更新时间:2024-10-10 13:14

澳门天天开彩结果现场直播视频在线观看这是一个功能强大的澳彩图库资料图片大全最新版下载APP,可以帮助你完成各种任务。包括最新24小时热点资讯,今日最新:比如采用CFG(无分类器引导)来控制生成的清晰度,采用三角形CFG缩放来避免过度锐化。

澳门直播现场直播视频下载安装手机版APP介绍

APP图标

澳门六开彩242期结果查询APP名:济南时报

版本:V4.96.801

更新时间:2024-10-10 21:16

澳门今期结果号码资料这是一个功能强大的澳门彩记录2020年历史数据APP,可以帮助你完成各种任务。包括最新24小时热点资讯,今日最新:这意味着用户可以仅提供一个静态图像,SV3D就能够展示该对象从不同角度的样貌。