通过文字描述生成3D模型?!NVIDIA和模型平台合作即将推出文本生成模型工具

赋明通

点击上方蓝字CG世界关注我们

“ 感知技术 · 感触CG · 感受艺术 · 感悟心灵 ”
中国很有影响力影视特效CG动画领域自媒体VIKI翻译整理GTC 2023正在如火如荼的进行着，每年NVIDIA都会在这一刻发布很多先进的技术和产业相关的内容。今年也不例外，据小编了解到NVIDIA正与资产库Shutterstock合作，创造一个新的基于AI工具，有了这个工具用户只需输入文本描述即可生成自定义3D模型。这个技术现在也有，如谷歌的DreamFusion和英伟达自己的Magic3D，可以根据文本描述生成3D模型，但是生成的模型质量达不到使用的标准。而这次NVIDIA和资产平台的合作，目标是通过文字描述生成的模型能达到商业使用的高质量模型的要求。按预想，文本生成3D模型的功能将添加到Shutterstock的人工智能应用程序创意流程中，之后会加入到Shutterstock旗下的TurboSquid网站上，提供给用户使用。

NVIDIA还与Adobe和Getty图片社合作，为推出Nvidia Picasso创建了新的文本到图像和文本到视频模型，用于构建生成人工智能工具的新云服务。

基于文字描述创建3D模型：人工智能艺术工具的“圣杯”

Shutterstock 3D创新副总裁Dade Orgeron在发布会前接受外媒采访时表示，通过文本提示创建高质量的3D模型是生成式人工智能艺术工具的“圣杯”。

最近几个月，生成的3D模型的细节水平出现了“惊人的飞跃”，与一年前创建的模型相比，当前的人工智能模型是“惊人的”。


Shutterstock的文本到3D服务能做什么？Shutterstock希望新的文本生成3D服务在推出时能够生成高质量的模型，能适合3D从业者的工作高标准的要求，或者生成之后能作为手动改进的一个基础也好。所有的制作都是在网上完成，预计每个模型大约需要15分钟的时间。最初，服务预计将生成具有单个纹理的单个网格，尽管未来可能会生成更复杂的多部分模型。
按照官方的预想，最初能实现的模型质量能为工业数字孪生创建内容，重现机械、建筑和汽车等真实世界的物体，但是对于有着高标准的娱乐行业有望未来实现。
如果没有人愿意将模型作用AI训练的基础怎么办？当然了，有AI就得需要基础进行训练，那这些基础模型从哪里来呢？TurboSqued，这个网站大家应该都不陌生，是CG行业内模型数量最大的网站之一。官方的意思是将使用TurboSquid的资产进行培训，据统计这个网站有150多万个3D模型。
那么一直以来使用艺术家的作品来训练人工智能工具是一个有争议的。Shutterstock将政策描述为“负责任的人工智能”，该政策是在与DALL-E开发商OpenAI合作创建在线文本到图像生成器后推出的，做法就是艺术家可以选择自己的模型不用作人工智能训练数据，Shutterstock上个月将该选项添加到帐户设置中，目前从后台数据得知只有大约10%的用户进行设置No AI。
Shutterstock负责人介绍说说3D模型对训练数据集的价值取决于许多因素，包括网格的质量、零件的命名方式以及材质的表达方式等等。对3D行业产生什么影响？其实对于开发通过文字描述生成3D内容而非2D图像的AI工具，从CG的制作流程上来讲还是重要意义的。从去年开始陆续有各种通过文字生成图像应用浪潮之后，谷歌发现缺乏用于训练AI的3D资产，大规模标记数据集是开发等效文本生成3D工具的主要障碍。能够在TurboSquid等在线市场的资产上训练人工智能模型消除了这一障碍。Shutterstock和TurboSquid对生成人工智能的立场与其他在线市场不同，“最大目标是通过创建一项服务来帮助创作者”负责人说，艺术家可以自己使用这项服务来生成基本网格，然后再进行手动细化。商业项目对3D内容的需求超过了从零开始创建的速度。

使用新的Nvidia Picasso生成人工智能工具平台开发Shutterstock的新文本生成3D服务正在使用NVIDIA的Picasso开发，Picasso是NVIDIA在GTC 2023发布的一个新的基于云的平台，用于构建和部署生成AI工具。Picasso面向的是开发人员，服务是通过英伟达的合作伙伴推出的。除了Shutterstock，NVIDIA还与Getty图片社合作，开发了基于其库存图像训练的新的文本到图像和文本到视频模型，并扩大了与Adobe的现有合作关系。看到这些，小编忧虑的不是失业不失业的问题，而是我们国内的发展好像已经被落的太远了，而且已经越来越远了，着急啊！哎

，什么时候我们国家也重视下CG行业技术的开发与研发呢？

好了，今天内容就到这里吧，明天继续干货！记得给小编点个赞赞。




end


点击图片进入详情页


AI又进化了！GPT-4可控制UE5灯光；Midjourney更新V5版



全是技巧！ZBrush雕刻手部的7个实用油管教程分享！



做CG该配置什么样的电脑？



Nvidia发布Canvas 1.4，可生成360°环境贴图

Respect！模型、材质、渲染都无敌了！