2022年最重要的技术和软件发布

weimiao 2023-01-25 发布于安徽

展开全文

让我们通过回顾过去一年中最重要的软件发布，来进行一次行业前沿技术革新的总结。

1技术和软件的发布

大家好，2022年诞生了很多让我们喜欢的数字美术作品，也让我们看到了在这一年里给我们带来灵感的很棒的项目。

今天，我们专门介绍一下2022年最重要的技术和软件发布、值得注意的事件，以及改变了成千上万艺术家的工作流程并完全改变了数字艺术景观的不可思议的程序。通过今天的榜单，我们将重温我们最喜爱的3D软件的最重要的升级，回顾今年的新工具和现有工具的插件，当然，还要再看一下2022年出现的各种AI。

所以，不再多说，让我们开始吧

今年1月，Plask的发布为这一年开了个好头。Plask由Plask AI开发，是一个基于网络、由人工智能驱动的3D动画编辑器和动作捕捉工具，为成千上万的动画师提供了一个强大的mocap工具集，可以免费使用。最重要的是，在人工智能的帮助下，该应用程序具有将任何视频作为mocap制作数字角色动画的巧妙能力。

巧合的是，我们想强调的下一个版本也是为动作捕捉而设计的，但早在2月份就作为Blender的免费插件发布了。BlendArMocap是一个无标记的mocap解决方案，允许用户使用网络摄像头进行手部、面部和姿势检测。此外，该插件还拥有将检测到的数据轻松转移到Rifigy平台的能力，从而实现便捷、无缝的工作流程。

同月，工程系学生Priyanjali Gupta给我们留下了深刻的印象，他的人工智能模型能够将美国手语实时翻译成英语，非常实用。该模型使用了Tensorflow对象检测API，并使用从预训练的ssd_mobilenet模型中转移学习的方式建立。

我们想重温的另一个伟大的人工智能模型是Instant NeRF，这是一项很酷的技术，可以将几张2D图像变成一个3D场景，由英伟达研究团队早在三月底发布。Instant NeRF由神经辐射场（Neural Radiance Fields）提供支持，这种特殊的人工智能可以通过训练从不同角度拍摄的少量2D图像中重建3D场景。Instant NeRF可以在几秒钟内处理一堆镜头，并在几十毫秒内渲染出结果的3D场景。

4月初，3D艺术和游戏开发社区被虚幻引擎5的第一个稳定版本的发布所震撼了。这个期待已久的引擎版本最初是在2020年发布的，它带来了现在深受喜爱的Lumen和Nanite功能、用于创建超级真实的细节和设置栩栩如生的物理学的升级工具，以及无数其他的功能和升级，极大地改善了艺术家和开发者的工作流程。

除了虚幻引擎5，Epic Games还交付了Lyra，这是一个旨在帮助创作者掌握引擎新版本的入门游戏，并分享了城市样本，其中有一个完整的城市、建筑、车辆和《黑客帝国觉醒》演示中的人群。

就这样开始了。就在UE5发布的几天后，OpenAI发布了DALL-E 2，一个由人工智能驱动的文本到图像模型，它普及了人工智能生成的图像，并开始了持续的趋势，在Midjourney和稳定扩散的进一步推动下。

然而，DALL-E 2一经发布，就受到了社区的热烈欢迎，这要归功于它强大的能力，可以从自然语言的描述中创造出逼真的图像和艺术，能够对现有图像进行逼真的编辑等等。该模型的发布标志着 '人工智能热潮 '的开始，该热潮贯穿了整个一年，我们还没有谈到。

4月中旬，一个开发者团队展示了SNUG，这是一个令人印象深刻的神经网络，用于为参数化人体所穿的服装增加3D变形。该框架通过一个消除了对地面真实样本的需求的方案进行训练，使该团队能够交互式地操纵主体的形状参数，同时产生高度逼真的服装变形，在训练时间内不使用任何监督。

5月和6月没有什么特别有趣的事情发生，7月让我们感到高兴的是Buildify的发布，这是一个由Pavel Oliva开发的Blender的免费几何节点驱动的库。这个工具包使数以千计的Blender艺术家能够在短时间内组装新的建筑，提供了易于使用的挤出、复制和粘贴面的工具，而建筑本身也是自动生成的。

同样在7月，来自英伟达和斯坦福大学的研究人员发布了EG3D，这是一个混合的显式-隐式网络架构，能够实时生成高分辨率的人脸和猫脸的多视图一致的2D图像，并赋予生成的图像高质量的3D几何图形。利用最先进的2D CNN生成器（如StyleGAN2），该模型的创建是为了提高3D GAN的计算效率和图像质量，而不过度依赖近似值。

前面提到的 '人工智能热潮 '在8月被推到了新的高度，当时StabilityAI团队发布了Stable Diffusion的代码，该团队的文本到图像的扩散模型能够从文本提示和粗略的草图中创造出伟大的图像。除了为大量的人提供强大的免费使用的工具集，让他们只需点击几下就能产生自己的想法，此举也改变了一切，鼓励其他开发者也将他们的AI开源化。

9月，随着 '人工智能热潮 '的盛行和人工智能爱好者对文本到图像模型的掌握，Runway（一个基于网络的机器学习驱动的视频编辑器）的开发者更进一步，推出了一个令人敬畏的文本到视频功能。这个由人工智能驱动的系统允许Runway的用户使用自然语言的文本描述来生成视频，并通过提供简短的提示来编辑它们。

拥有强大的软件是伟大的，但支持你的程序的强大硬件也同样重要。幸运的是，在2022年，NVIDIA和AMD为3D艺术家和游戏开发者提供了他们的新GPU。

前者推出了GeForce RTX 4090和4080显卡，由NVIDIA的Ada Lovelace架构驱动。第一款带来了24GB的G6X内存，而第二款则有两种内存配置。12GB和16GB，两者都比3000系列的型号强大得多，并具有第三代深度学习超级采样（DLSS 3）。

AMD紧随其后，也推出了两款新的GPU--RX 7900 XTX和RX 7900 XT--由该公司的RDNA 3架构驱动。这两款卡都支持DisplayPort 2.1，使用户能够以1440p甚至4K的三位数帧率运行游戏。第一款GPU拥有96个计算单元，时钟频率为2.3GHz，24GB GDDR6内存以384位运行，而便宜的XT型号提供84个计算单元，基本时钟速度为2G Hz，内存总线稍慢320位。

9月下旬，英伟达的研究人员通过GET3D再次给我们留下了深刻的印象。GET3D是一个生成模型，能够创建具有复杂拓扑结构和丰富几何细节的全纹理3D网格。通过对一组二维图像的训练，该人工智能有能力生成大量的资产，包括汽车、椅子、动物、摩托车、人类角色和建筑物。据该团队称，该模型的创建得益于今年在可分化表面建模、可分化渲染和2D GANs方面的成功。

在10月举行的Adobe MAX 2022会议期间，Adobe团队加入了这个名单，正式发布了Substance 3D Modeler 1.0，该公司用于数字建模和雕刻的工具。

该软件在4月底首次推出，由Substance 3D团队与VR雕刻工具Oculus Medium的创建者合作开发。该工具最引人注目的特点是，它允许3D艺术家在桌面和VR上雕刻和组装他们的项目，随时改变模式。

11月初，Sparseal团队推出了CozyBlanket 2.0，这是该团队为iPad开发的令人难以置信的重绘应用的新的改进版本，给我们留下了深刻印象，并简化了成千上万艺术家的工作流程。

新版本的应用程序提供了大修的视口渲染，以便在重构阶段有更好的对比度和可读性，增加了在解包阶段通过绘制网格边缘来绘制、删除和扩展UV接缝的能力。引入了在烘焙阶段从导入的目标网格创建切线空间法线图和颜色图的能力，以及其他无数的改进，使iPad用户能够将任何工作过程中最令人恐惧的部分变成一个方便和愉快的体验。

在CozyBlanket 2.0发布一周后，我们被一款名为Move AI的软件惊呆了，这是一款方便的无标记mocap程序，能够使用先进的AI从视频中提取自然的人体动作，并自动将数据重新定位到你的角色装备上。此外，该工具还具有将数据直接输出到任何游戏引擎或数字环境中的能力，从而使工作流程更加方便和无缝。

过去一年的最后一个月以RealityScan的发布开始，这是一款3D扫描应用程序，允许其用户将智能手机照片变成高保真3D模型，由Epic Games与Quixel和Capturing Reality合作开发。

要开始使用RealityScan，你需要做的就是用你的iOS智能手机或平板电脑拍摄你想复制的3D物体的照片，该应用程序将使用云处理自动组装模型。在那里，你可以将你的模型上传到Sketchfab或下载到你选择的3D软件中使用。

2022年是各种生成性人工智能的质量和品质空前提高的一年，作为今年的最后一个版本，突出OpenAI最近的，也可以说是最令人心动的人工智能模型ChatGPT是很合适的。

12月初发布的ChatGPT是一个人工智能模型，能够以对话的方式进行互动，回答后续问题，并对输入的提示作出详细回应。在不到一个月的时间里，该模型被证明能够创建一个电影大纲、Blender的Python脚本、一个 '选择你自己的冒险 '的故事、一个关于使用虚幻引擎的蓝图的分步教程、一个以2Pac和Notorious B.I.G.的风格在金融技术和银行之间的说唱战，以及更多。