人工智能_什么是人工智能_人工智能专业学什么

青岛VR培训中怎么为AR/VR设计创作3D人物全息

2022-12-23点击量：2796

近日，体三维视频捕捉技术开发商Volograms本文讨论了一系列的解决方案及其优缺点，希望能为您提供一些参考。以下是映维网的具体整理：1.虚拟化身可定制虚拟化身(有时称为合成人类)是我们人类在数字空间中的相应定制角色，从卡通风格到类人风格。我们最熟悉的例子最熟悉的例子包括Bitmoji、苹果的Memoji和FacebookAvatars。但事实上，你可以发现一系列公司使用虚拟化身AR/VR。这种数字角色通常是高度定制的，允许你轻松改变肤色、头发、衣服、配饰、身高等。保真度：我们需要区分两种类型：首先，高度程式化的虚拟化身保真度很低，如卡通类型的虚拟化身。它们的优点是，你可以成为很难通过外表或动作识别任何角色的人。事实上，即使是3D，我们对卡通角色都很舒服。其他类型的虚拟化身试图实现高保真度，并使用非常现实的特征。挑战是，我们的大脑会自动深入分析它们，而过于现实的类人角色会导致恐怖谷效应。有趣的是，该行业有一个解决方案，允许您自动定制虚拟化身（通常使用一个人的照片）。动画：一般来说，虚拟化身是为了方便定制调整和制作动画而设计的。根据虚拟化身解决方案，您将能够实现各种手势和姿势。此外，它们可能会附加一个运动库或允许您导入自己的动作。沉浸感：在这方面，低保真度的虚拟化身往往优于试图实现高保真度的虚拟化身。在大多数情况下，你不认为你在与真实的人类分享这个空间，但这对你正在做的工作来说可能并不重要。成本：行业支持和具体支持AR/VR平台集成的免费卡通解决方案。UnityAssetStore其他标准存储库发现虚拟化身解决方案功能有限，但成本和操作接近人们。另一方面，您可以通过专业供应商找到基于动态捕获技术和人工智能驱动的高质量虚拟化身。时间：通常，定制和配置虚拟化身的动画是一个非常快速的过程，但前提是您正在使用的工具提供所需的定制和动画选项。如果需要任何切割，这可能是一个棘手而漫长的过程，或者根本无法实现。例如，您希望移动虚拟化身的眉毛，但相关工具根本不提供选项。结论：虚拟化身是一个很好的解决方案，不需要高度逼真或身临其境的内容。动画和所需的时间使它成为互动内容的强大选择，如训练模拟器或游戏（事实上，传统的游戏角色可以被视为虚拟化身）。然而，如果你想实现真正的身临其境，或者你的内容给观众留下深刻印象，你应该找到一个替代品。2.3D设计人类的3D设计是一个使用特殊软件从零开始创建人类角色的过程。你可以把它当作画像，但这是3D中进行。3D艺术或专业设计师将创建具有特定细节水平的模型，然后用数字骨架绑定，使其具有动画效果。你将得到一个独特的虚拟化身。当然，要设计一个与真人相似的细节特征3D角色，你需要难以置信的专业知识。顶级的3D专家将根据角色的个性为数字人类量身定制视觉外观。为了降低复杂性，设计师通常从预定义模型、三维扫描和人体模型库开始，并产生混合技术和结果。3D不仅可以设计角色AR和VR，在过去的电影中也有广泛的应用，比如《指环王》中的咕噜声和《加勒比海盗》中的戴维·琼斯，《玩具总动员》中的伍迪等等。保真：你可以选择不同的外观风格：卡通、现实主义、幻想等。只要有合适的艺术、工具、时间和预算，你就可以实现其他方法难以实现的保真。动画：这取决于3D设计质量。D角色可以动画到不可思议的细节水平。顶级工作室甚至使用深度学习引擎来驱动设计，这样角色的一切，甚至肤色都会随着动作而略有变化。在实践中，对于一个普通的身临其境的项目，你可以使用标准的工具和合理的动画水平来设计角色，但不要期望太高的真实性。沉浸感：同样，这取决于你的设计质量。如果技能高超，三维设计可以带来高水平的沉浸感。低质量的设计可能会导致非常令人毛骨悚然的结果，或者只是给整个身临其境的体验带来低端的印象。成本:根据你的方法，3D设计可能是最昂贵的解决方案。您需要内部人才来创建设计和制作动画，或外包工作。此外，根据选择，3D设计工具和硬件可能需要你付出昂贵的代价。时间：一个3D设计艺术可能需要几个月的时间来发展一个合适的人类角色。类似地，电影或3A专业设计师团队可能需要几周的时间来发展游戏的角色。这个过程可以更快地完成，但它涉及到成本或质量的平衡。总结:高端AR/VR内容所需的独特角色不是直接从现实中捕捉到的真实人物，3D设计可能是最好的解决方案，这种方法经常用于游戏和电影杰作。如果你不追求高质量，但不能通过定制虚拟角色来获得所需的结果，3D设计也值得你考虑。但当然，前提是你有合适的人才和设备，以及足够的预算。必须根据您的用例调整设计类型。3.3D扫描动画三维扫描是利用专业技术分析现实世界中的人或物，从而生成数字三维副本的过程。通常称为数字孪生或3D扫描。深度传感器和摄影测量是该行业最常见的技术。深度传感器计算对象与传感器本身之间的距离，摄影测量使用从不同位置和角度拍摄的照片，并使用特殊软件组合在一起形成三维模型。就其本身而言，人类的3D扫描就像一个静止的数字雕塑，需要用数字骨绑定和数字蒙皮，才能动画。换句话说，模型的关节和活动组件需要识别和编程，模型的形状在这个过程中不会发生疯狂的变化。保真:根据你能负担得起的预算，你可以考虑不同的质量水平。好莱坞工作室使用高质量的3D扫描装置，但你可以通过智能手机摄像头实现基本的3D扫描。在动画过程中会出现保真问题：很难人工绑定三维扫描和蒙皮，这通常会导致机器人或木偶的不自然效果。只有顶级工作室合格3D艺术团队可以通过静态扫描实现3D的逼真度。目前，自动化工具很少能达到优异的效果。动画：如前所述，这是3D最大限度的扫描D扫描的本质是静态的。绑定操作和皮皮是不断的技术挑战。如果缺乏熟练的艺术，标准工具将难以提供令人信服的结果。然而，如果真实性和沉浸感不是首要任务，该行业有一系列值得考虑的软件解决方案。沉浸感:如果动画可以高标准拍摄制作，3D3.专家团队完成D扫描可以实现令人信服的数字人类，带来高度沉浸感的体验。所有质量水平为3D扫描会有恐怖谷般的外观和感觉。成本:如果你想自己做3D扫描，一个3D扫描装置通常需要你购买几十个摄像头和一系列配件。摄影测量软件的成本是可以接受的，运行重建过程并不是一门深刻的科学。另一种选择是雇佣一个3D扫描工作室来完成特定的工作，可能降低成本。如果这两个选项都不好，你可以用摄像头从不同的角度捕捉肖像，然后重建，但这将是一个耗时的细节。同样，将3D扫描成一个动画数字人类，你需要一个拥有优秀3的团队D昂贵的软件解决方案，专业知识，甚至不能提供最令人兴奋的结果。时间：如果您有三维扫描设备或有权访问提供服务的公司，三维模型的捕获不是一个耗时的过程。正如上面提到的，3D用摄像机从不同的角度捕捉一个人，但这需要时间和专业水平。标准动画制作不是一个耗时的过程，但会导致有限的结果。为了达到一个体面的质量水平，你需要更长的时间来完成捕获过程。你可以参考这篇关于华纳音乐如何成为歌手的文章CARYS粉丝制作经验文章，说明来自3D扫描创建专业动态3D使用动捕技术创建动作后，模型的背后和效果。总结:传统上，3D扫描和动画的结合一直是真人AR和VR或其他3D世界(如游戏)的首选方法。交给合格的3D在设计师团队中，这是一个非常强大的工具组合。但在大多数情况下，你的公司可能缺乏这样的团队，所以3D扫描可能不是你的选择。就像上面的讨论一样，标准的绑定操作和蒙皮技术会使模型看起来粗糙，有时甚至会产生恐怖谷效应。在这种情况下，你会牺牲沉浸感。三维视频(见下文)可以解决这个问题，你提供了更自然的结果。当然，如果你在创建一个更长的AR/VR内容或多个角色的内容意味着比3D动画扫描更大的文件。4.2DBillboards2DBillboards是集成到3D空间中的普通视频剪辑，你会觉得它似乎在3D之中。不能真正移动的AR/VR体验(所谓三自由度/3DOF），这是一个值得考虑的计划。在这种情况下，即使你的身体移动，你也能感知到虚拟环境的位置，包括Billboard不会改变。但在糟糕的实现中，Billboards它看起来像电影舞台上的一块扁平纸板，打破了沉浸感。保真度:作为视频，从单个角度看，2DBillboards它可以提供高保真度。但它将局限于一个非常具体的视角，它不能与之相匹配AR/VR体验提供的3D结合照明效果，很难描述深度。动画性：2DBillboards动画几乎不可能。你在原始视频中录制的内容是你捣乱的对象。DeepFake视频编辑技术可能会帮助你稍微调整一下动作，但你不能创建一个互动片段。沉浸感：2DBillboards没有沉浸感，是的AR/VR这是一个非自然的解决方案。在非常特殊的情况下(3)DOF，具体照明等)，它们可能会达到很好的效果。但即使你一动不动，人眼也会觉得太过2D的元素。一般来说，在沉浸式应用程序中，当内容不接近用户位置，深度效果最小时，2DBillboards能起效。成本：这是2DBillboards最大的优势。创建它们意味着制作正常的视频（是否有绿色屏幕），然后划分背景。硬件一点也不贵。只要你有合适的软件或时间，你就不需要特殊的技能来操作它们。以一种看似可靠的方式将内容集成到AR/VR体验可能是更大的挑战。时间：视频拍摄速度快，绿屏分割时间不宜过长。因此，所需的时间将在很大程度上取决于您想要集成内容的程度。总结：2DBillboards一般不适合AR/VR体验。一旦用户移动，魔咒就会被打破。但我们建议在三种情况下使用2DBillboards：当你的预算非常有限时，但你真的需要把一个特定的角色带到体验中；角色位于愿景中，在用户永远不会接近的位置；当你真的只是想AR或VR当空间呈现高清视频的外观和感觉时。例如，这可能有助于你准确描述纹理、透明度、头发和其他困难D重现在三维视频中的元素。5.体三维视频体积视频是一种捕捉人或物并生成一系列三维模型的技术。换句话说，体三维视频是3D扫描就像摄影中的视频。一般来说，你可以将体三维视频的每一帧视为3D扫描。因为它直接捕捉现实，你可以用它准确地带来真实的人类AR/VR之中。你可以从任何角度看到内容，因为它是三维的。从技术上讲，体三维视频就像3D同样，扫描也是基于多摄像头装置，包括深度传感器。事实上，一个人的三维捕捉设备与一个3非常相似D扫描设备只设置为记录视频而不是图片。保真度：这是三维视频的关键优势之一。它的优点是形状和动作不是分开生成的，而是直接在3D捕捉移动人物。在没有高质量艺术的监督下，没有办法实现这种自然逼真。与其他技术类似，体三维视频将根据您的预算和部署平台提供不同级别的保真度。精密装置配备100多个摄像头，质量非常高。但对于大多数人来说，这可能是用牛刀杀鸡，因为当你使用最先进的三维视频重建软件时，你可以使用15个摄像头获得非常现实的结果。基于多个深度传感器和摄像头的更简单的装置可能会产生具有噪点，低分辨率或根本不是完全三维的低质量内容。动画性：体三维视频和普通视频一样不需要动画。你可以从现实中捕捉AR/VR体验所需的动作，从而使其具有最大的保真度。反过来，体三维视频在重新设置动画方面受到限制：你可以对其进行绑定操纵并对其进行蒙皮，但有可能会失去原始捕获的真实性和保真度。与3D扫描相比，它有两个主要优势：首先，你有关于人物如何运动的内置信息，因此你可以精准地确定驱动运动的数字骨骼。其次，你可以使用原始的动作并调整它们以更好地匹配你的故事（例如，改变时间、视线、方向），而不是完全重新设置动画。事实上，有公司专门从事这种体三维内容的后期制作。未来，深度学习系统可能会从原始的体三维视频中学习，并用全新的但逼真的动作来实现动画捕捉。沉浸感：与一个体三维人物共享一个空间将是仅次于现实的交互案例。像视频一样，一般的外表和动作，甚至是情绪都是以原始保真度捕捉，这样的表达和反应最为真实。由于它是全三维，所以可以集成到AR或VR空间之中，并且可以从任何角度进行体验。你同时可以添加一定的效果，例如让体三维角色注视着用户。成本：如果你想搭建自己的体三维装置，最简单的机器都适合初学者，而且价格合理，只是不能提供专业的结果。最复杂的装置可能要花费过百万美元，但它们可以产生真正高端的结果。事实上，所需的空间可能是最为昂贵的资源，亦即专门的体三维捕捉空间。如果你与一个体三维捕捉工作室合作进行一次性项目合作，成本会高于2DBillboards和标准虚拟化身，但可能会低于3D设计或3D扫描+动画，而且体三维视频提供了更高的质量。一般来说，你不需要专业的人才，除非你想后期制作或重新制作你的捕获动画。时间：这是体三维视频之于其他方案的优势之一。第一步是捕捉，它所花费的时间和普通的视频拍摄差不多。过去，处理视频是一个漫长的过程，但目前的云解决方案已允许处理过程在几小时，甚至几分钟内完成。另一个优点是，获得的结果可以直接从处理管道集成到体验之中。总结：如果AR/VR内容的关注点是人，需要以真实方式捕捉人物及相关的情感和动作，体三维视频可能是你的最佳选择。如果你需要在内容中加入一个特定的人物，比如名人、品牌大使、公司高管或艺术家，这一点尤其正确。但需要尤其注意的是：如果你的内容具有高度交互性（如游戏），你将需要结合特定的绑定操纵和蒙皮技术。6.如何动画化3D角色？只有两种方法（2DBillboards和体三维视频）直接捕捉原始人类的动作。你可能会想知道“我如何以数字方式动画化虚拟化身、我自己设计的3D角色或我的3D扫描呢？“从广义上讲，动画可以分为两类：人为动画：由人类设计或编程的动作。动作捕捉（mocap）：从真实人物提取的动作。运动是一门人类艺术。我们对数字角色中的非自然运动非常敏感。人为动画的成本可以很低，但它通常无法以高保真都描绘人类的运动和情感。从逻辑上讲，动捕解决方案是一个更好的选择，因为我们能够捕捉和叠加真实的运动，但这存在代价：高质量动捕设置的成本要高于体三维捕捉设置。最重要的是评估你的项目的需求。如果保真度和沉浸感对你的项目而言并不重要，你可以高兴地选择人为动作。另外，3D模型的质量和运动的质量需要齐头并进。尽管卡通般的设计可以很好地配合简单的动作，但为了避免恐怖谷效应，逼真的3D设计需要非常高的运动保真度。总而言之，如果你的项目能够支持不需要动画的解决方案，如体三维视频，则相关解决方案是确保非常自然和高端的人体运动，并且是获得最具沉浸感效果的最佳方法。如果你依赖动画，而且拥有预算，你可以选择动捕。但最终重要的是，无论选择的方案是什么，要创造令人信服和身临其境的内容，关键都是你自己的创造力。选择正确的方法来来创建3D人物非常重要，有时这是一个漫长的过程。以上考虑事项可以帮助你在设计下一个AR/VR项目时的决策。你要确保为内容选择正确的方法，因为正确的沉浸式体验有助于建立你的信誉，并带来更多的客户和项目合作。...