-
【AI论文与新生技术】Tex4D:文本+3D无贴图纹理模型引导视频生成
Tex4D是一种零样本方法,Tex4D将网格序列中固有的 3D 几何知识与视频扩散模型的表现力相结合,以生成多视图和时间一致的 4D 纹理。给定无纹理的网格序列和文本提示作为输入,这种方法会生成多视图、时间一致的 4D 纹理。 Tex4D:文本+3D无贴图纹理模型引导视频生成开源项目链接👇 AI论文与新生技术专题: https://heehel.com/collection/topic-aipap…- 0
- 0
-
P4:使用 Move AI One 和 Metahuman Animator 在虚幻引擎进行电影级动作捕捉
用AI工具辅助制作电影级游戏CG画面,Metahuman Animator 使 AAA 级面部动画的制作变得简单且廉价,但动作捕捉套装对许多人来说仍然太昂贵。然而,确实存在一些低成本、易于使用的全身动作捕捉解决方案,例如基于人工智能的 Move AI One。这是一份详细的教程,展示了在虚幻引擎 5 中同时使用 Move One 和 Meta human Animator 创建电影场景的每一步。 …- 0
- 0
-
【AI论文与新生技术】SyntheOcc:根据对场景的描述生成符合描述的街景图片
自动驾驶的进步越来越依赖于高质量的注释数据集,特别是在 3D 占用预测任务中,其中占用标签需要大量的人力进行密集的 3D 注释。在概述中,研究人员提出了 SyntheOcc,它表示一种扩散模型,通过调节驾驶场景中的占用标签来合成真实感和几何可控图像。 这将为训练感知模型和模拟等应用产生无限量的多样化、带注释和可控的数据集。 SyntheOcc 解决了如何有效地将 3D 几何信息编码为 2D 扩散模…- 0
- 0
-
【AI论文与新生技术】Lotus:预测图像中每个像素的深度和法线信息扩散模型
想象一下,你给一个AI看一张图片,然后它能够神奇地预测出图片中每个点距离你有多远。这就像是给AI装上了一双能够感知深度的眼睛。而且,Lotus这个AI非常特别,它不需要看很多图片就能学会这个技能,甚至在看一张图片的时候,它也能注意到图片中的很多小细节。这就像是你在街上看到一辆车快速开过来,你能很快地判断它的距离一样。Lotus能够迅速地给出准确的预测,而且它处理信息的速度非常快,这对于很多需要快速…- 0
- 0
-
AI3D生成工具Tripo与Rodin哪个好?AI建模对3D打印玩家已非常友好【蟑螂恶霸3D】
Tripo是由VAST公司推出的一款3D模型生成平台。它利用了DiT和U-Net模型的复合架构,能够快速生成具有丰富细节和高质量材质的3D模型。Tripo基于海量3D高质量原生数据库训练,是一个数十亿参数级别的3D大模型,与传统的3D建模相比,它在生成速度和质量上都有显著提升。此外,Tripo最近推出了多图生成模型的功能,这使得它在AI 3D模型生成领域中备受关注。 (AI3D生成工具Tripo与…- 0
- 0
-
Neural4D:DreamTech推出的文本生成、图片生成3D模型生成平台
Neural4D是由DreamTech团队(一家专注于原生3D生成的AI创业公司)推出的一款AI驱动的3D模型生成平台,它利用先进的人工智能技术,使用户能够通过输入文字描述或上传图片来快速生成高质量的3D模型和动画。这一平台特别适合于那些希望简化3D内容创作流程的创作者,无论是专业人士还是业余爱好者。 Neural4D的主要功能包括文本生成3D模型的转换和图片生成3D模型的生成。用户可以输入简单的…- 0
- 0
-
为什么说网红产品Tripo2.0 3D生成模型AI工具颠覆了行业【蘑小菇给你一拳】
Tripo2.0是一款由初创公司 VAST 在线3D建模平台推出的新模型,旨在通过文本、单张或多张图片输入,在几秒内完成复杂的3D模型创建。该模型采用了融合DiT和U-Net模型的复合架构,通过学习捕捉高质量的3D数据,实现了3D大模型的Scaling Law。Tripo2.0在实现过程中强调了3D Scaling Law的重要性,并基于海量千万级高质量数据库进行训练。 Tripo2.0的生成过程…- 0
- 0
-
P2:使用 Move AI One 和 Metahuman Animator 在虚幻引擎进行电影级动作捕捉
用AI工具辅助制作电影级游戏CG画面,Metahuman Animator 使 AAA 级面部动画的制作变得简单且廉价,但动作捕捉套装对许多人来说仍然太昂贵。然而,确实存在一些低成本、易于使用的全身动作捕捉解决方案,例如基于人工智能的 Move AI One。这是一份详细的教程,展示了在虚幻引擎 5 中同时使用 Move One 和 Meta human Animator 创建电影场景的每一步。 …- 0
- 0
-
P1:使用 Move AI One 和 Metahuman Animator 在虚幻引擎进行电影级动作捕捉
用AI工具辅助制作电影级游戏CG画面,Metahuman Animator 使 AAA 级面部动画的制作变得简单且廉价,但动作捕捉套装对许多人来说仍然太昂贵。然而,确实存在一些低成本、易于使用的全身动作捕捉解决方案,例如基于人工智能的 Move AI One。这是一份详细的教程,展示了在虚幻引擎 5 中同时使用 Move One 和 Meta human Animator 创建电影场景的每一步。 …- 0
- 0
-
AI3D生成奇点临近,3D模型生成AI工具Tripo2.0详细测评#1【T-BOY】
Tripo3D又更新了,这次带来了全新的生成模型Tripo2.0,相较于之前的模型,这次简直就是升维更新,不仅有了PBR贴图生成,还具有了更精细和高还原度的模型,直逼真人建模师。效果炸裂。 本视频利用开源Flux.1 ComfyUI工作流,生成原画,再利用Tripo2.0生成模型。并进行了低面拓补,结构超出预期,不仅布线规整,造型达到了接近建模的水平,贴图还原度也不错,但还有一定的瑕疵。 视频…- 0
- 0
-
【AI论文与新生技术】DrawingSpinUp:单个平面2D角色绘图的3D动画转换
对各种角色图画进行动画处理是一项引人入胜的视觉内容创建任务。考虑到单个角色的绘制,现有的动画方法仅限于平面 2D 运动,因此缺乏 3D 效果。另一种解决方案是根据角色绘图重建 3D 模型作为代理,然后将 3D 运动数据重新定位到其上。然而,现有的图像到 3D 方法在外观和几何方面不能很好地适用于业余角色绘图。我们观察到,字符绘图中常见的轮廓线由于其视图依赖性,会在纹理合成中引入显着的模糊性。 此外…- 0
- 2
-
【AI论文与新生技术】TransGS:在 5 秒内将 PBR 面部数据转换为高质量3D资产模型
由影眸科技、Adobe、上海科技大学、香港大学推出的GauFace是一种新颖的高斯泼溅表示,专为高效动画和基于物理的面部资产的渲 而定制。利用强大的几何先验和约束优化, GauFace确保整洁且结构化的高斯表示,在 Snapdragon 8 Gen 2 移动平台上提供30fps@1440p的高保真度和实时面部交互。 所以,我们引入了TransGS ,这是一种扩散转换器,可以立即将基于物理的面部资产…- 0
- 0
-
hyperhuman Rodin姐妹工具chatavatar:使用 AI 将肖像照片变成 3D 模型
Hyperhuman Rodin 和 ChatAvatar 是由 DeemosTech 开发的高级 3D 资产生成工具。ChatAvatar 已经准备好用于生产,能够根据文本或图像创建超现实的 3D 面部资产,并且具有 PBR(物理基础渲染)纹理。而 Rodin 则接近生产就绪状态,可以生成逼真的 3D 模型,同样支持从文本或图像输入。 (Hyperhuman chatavatar照片生成3d模型…- 0
- 0
-
【AI论文与新生技术】GST:使用高斯泼溅变压器从单张图像中获得精确的3D人体模型
我们的工作基于3D 高斯分布(3DGS),这是一种由高斯混合组成的场景表示。GST从单个输入图像预测人类的此类混合具有挑战性,因为它是具有严格物理约束的不均匀密度(与输入像素具有多对一关系)。同时,它需要灵活地适应各种衣服和姿势。我们的主要观察结果是,标准化人体网格(例如 SMPL)的顶点可以为高斯提供足够的密度和近似的初始位置。 然后,我们可以训练一个 Transformer 模型来联合预测这些…- 0
- 0
-
Meshy AI是最好的 AI 3D 工具吗? AI3D动画制作教程
博主简要介绍了 Meshy AI 这一AI工具,强调其在 3D 建模中的高效性。接着,他详细讲解了模型创建的过程,从基本的形状设计到细节处理,包括如何使用 Meshy AI 生成基础模型,并对模型的纹理进行修复和优化。 在3D动画部分,视频介绍了如何将创建的模型导入 Blender 进行3D动画制作。Blender 是一个功能强大的开源 3D 创作软件,博主演示了如何在 Blender 中为模型添…- 0
- 0
-
【AI论文与新生技术】Meta Reality Labs推出视频人物人体表面法线预测、动作识别模型“Sapiens”
Meta Reality Labs 推出了Meta Sapiens,这是一个用于四种基本的以人为中心的视觉任务的模型系列:2D 姿势估计、身体部位分割、深度估计和表面法线预测。我们的模型本身支持 1K 高分辨率推理,并且只需对在超过 3 亿张野外人类图像上预训练的模型进行微调,就可以非常轻松地适应各个任务。即使标记数据稀缺或完全合成,所得模型也对野外数据表现出显着的泛化能力。我们简单的模型设计还带…- 0
- 0
-
全新AI工具Meshy AI轻松制作四足角色动物行走3D动画
Meshy AI 是一款基于人工智能技术的在线3D内容生成式人工智能工具,旨在简化和加速3D建模与贴图的工作流程。该工具主要面向3D艺术家、爱好者、XR开发者、游戏制作者以及设计师等用户群体。Meshy的核心功能包括通过文本和图像生成3D模型,并为这些模型自动贴图。 Meshy的主要功能有三种:文本生成贴图纹理(AI Texturing)、文本生成3D模型(Text to 3D)以及图片生成3D模…- 0
- 0
-
【AI论文与新生技术】LayerPano3D:用于生成超沉浸式场景的分层3D场景全景图
3D 沉浸式场景生成是计算机视觉和图形学领域中一项极具挑战性且至关重要的任务。理想的虚拟 3D 场景具备以下特点:1) 能够展现出全向视图的一致性;2) 允许用户在复杂的场景层次结构中自由探索。现有的技术方法通常依赖于通过修复实现的连续场景扩展,或者使用全景图像来表示具有广阔视场的场景环境。然而,在场景扩展的过程中,这些方法往往会出现语义漂移的问题,并且难以处理场景层次结构间的遮挡问题。 为了解决…- 0
- 0
-
【AI论文与新生技术】3D Gaussian Splatting :3D 高斯散射的次表面散射
由于表面下复杂的光传输,由散射材料制成的物体的 3D 重建和重新照明提出了重大挑战。 3D Gaussian Splatting 引入了实时速度的高质量新颖视图合成。 虽然 3D 高斯可以有效地近似物体的表面,但它们无法捕获次表面散射的体积特性。研究人员提出了一个框架,用于在给定多视图 OLAT(一次一光)数据的情况下优化物体的形状以及辐射传输场。研究人员的方法将场景分解为表示为 3D 高斯的显式…- 0
- 0
-
【AI论文与新生技术】MVInpainter:多视图对象移除、合成、插入和替换
新颖视图合成 (NVS) 和 3D 生成最近取得了显着的改进。然而,这些工作主要集中在有限的类别或合成 3D 资产上,无法推广到具有挑战性的野外场景,并且无法直接用于 2D 合成。此外,这些方法严重依赖于相机姿势,限制了它们的实际应用。 为了克服这些问题,研究人员提出了 MVInpainter,将 3D 编辑重新制定为多视图 2D 修复任务。具体来说,MVInpainter 使用参考指导部分修复多…- 0
- 0
-
如何使用 Move AI 和 Metahumans 在虚幻引擎5中制作3A角色动画
这是一部分,在幕后看看作者如何创建一个简短的场景,在一个非人类生物角色上测试Metahuman动画师的作品,该角色已使用 Metapipe 转换为Metahuman绑定文件。我们同时捕捉到了这两场表演。动作捕捉是使用六台 GoPro 10 和 Move.AI 完成的,面部动画是使用安装在 Rokoko 头戴装置和 DIY 头盔摄像头上的 iPhone 13 和 15 捕捉的,然后使用 Metahu…- 2
- 0
-
【AI论文与新生技术】Object Images:使用 UV 贴图生成逼真的 3D 模型新方法
我们引入了一种新方法,通过称为“Object Images”的表示形式使用 UV 贴图生成逼真的 3D 模型。这种方法将表面几何形状、外观和面片结构封装在 64x64 像素图像中,有效地将复杂的 3D 形状转换为更易于管理的 2D 格式。通过这样做,我们解决了多边形网格固有的几何和语义不规则性的挑战。该方法允许我们使用图像生成模型(例如扩散变压器)直接进行 3D 形状生成。在 ABO 数据集上进行…- 0
- 1
-
【AI论文与新生技术】MeshAnything V2:艺术家创建的具有相邻模型标记化的3D模型生成
我们推出了 MeshAnything V2,这是一种自回归转换器,可生成与给定形状对齐的艺术家创建的多边形模型模型 (AM)。它可以与各种3D资产制作流程集成,实现高质量、高度可控的AM生成。我嘞个“无限建制”?! MeshAnything V2 使用相同尺寸的模型在效率和性能上都超越了以前的方法。这些改进归功于我们新提出的多边形模型模型标记化方法:相邻多边形模型模型标记化(AMT)。与以前用三个…- 0
- 0
-
Stability AI推出Stable Fast 3D:从单个图像快速生成 3D 模型资产
喜好儿小斥候消息,Stability AI近期推出了Stable Fast 3D,它标志着3D资产生成技术的重大突破。这项技术能够在短短0.5秒内,将单个输入图像转化为详尽的3D模型,为3D重建领域的速度和质量设定了新的行业标准。 Stable Fast 3D的运行机制十分高效。用户只需上传一个对象的图像,该技术便能迅速生成一个完整的3D资产,包括UV展开网格、材料参数以及降低光照烘焙的反照率颜色…- 0
- 0
-
Sudo AI:免费在线AI文本描述、图片生成3D模型建模软件网站
Sudo AI是一个创新的在线平台,它通过结合艺术创作和技术力量,为用户提供了一个简单易用的3D模型生成工具。这个平台的特色在于,它利用先进的人工智能算法,允许用户通过文本描述或上传图片来快速生成3D模型,极大地简化了传统3D建模的复杂流程。无论是设计领域的专业人士还是普通用户,都能够在这个平台上轻松地创作出高质量的3D作品。 Sudo AI的“Text to 3D”功能,使用户只需在文本框中输入…- 0
- 0
-
Aiuni AI图片生成3D模型工具:基于Unique3D技术快速生成逼真的游戏场景和角色模型
Aiuni AI是一款令人印象深刻的3D模型生成工具,它基于Unique3D这一开源项目,能够在短时间内将任意RGB图像转换成高保真的3D模型。这项技术由清华大学和Aiuni AI团队联合开发,展示了深度学习和扩散模型在图像到3D转换领域的强大能力。 (Aiuni AI官网链接👇) 工具箱:https://heehel.com/category/ai-soft Aiuni AI的操作流程非常简便。…- 0
- 0
-
【AI论文与新生技术】SparseCraft:通过立体引导几何线性化进行少样本神经重建
我们提出了一种从一些彩色图像中恢复 3D 形状和视图相关外观的新颖方法,从而实现高效的 3D 重建和新颖的视图合成。我们的方法以有符号距离函数(SDF)和辐射场的形式学习隐式神经表示。 喜好儿看见,该模型通过启用光线行进的体积渲染进行逐步训练,并使用免学习多视图立体 (MVS) 线索进行规范化。我们贡献的关键是一种新颖的隐式神经形状函数学习策略,该策略鼓励我们的 SDF 场在水平集附近尽可能呈线性…- 0
- 0
-
【AI论文与新生技术】Shape of Motion:从单个视频进行 4D 重建通用动态场景的方法
由于任务的高度不适定性质,单眼动态重建是一个具有挑战性且长期存在的视觉问题。现有方法的局限性在于它们要么依赖于模板,要么仅在准静态场景中有效,要么无法显式地对 3D 运动进行建模。 在这项工作中,我们介绍了一种能够从随意捕捉的单眼视频中重建通用动态场景的方法——Shape of Motion,该场景具有明确的、全序列长的 3D 运动。我们通过两个关键见解来解决该问题的约束不足性质:首先,我们通过使…- 0
- 0
-
【AI论文与新生技术】VD3D:驯服大型视频扩散变压器以实现 3D 摄像机控制
现代文本到视频合成模型展示了从文本描述中连贯、逼真地生成复杂视频。然而,大多数现有模型缺乏对相机移动的细粒度控制,这对于与内容创建、视觉效果和 3D 视觉相关的下游应用程序至关重要。 最近,VD3D的新方法展示了生成具有可控相机姿势的视频的能力——这些技术利用预先训练的基于 U-Net 的扩散模型,明确地解开空间和时间生成。尽管如此,现有的方法还没有能够对新的基于变压器的视频扩散模型进行相机控制,…- 0
- 0
-
【AI论文与新生技术】CharacterGen:从单张图像高效生成 3D 角色,多视图姿势校准
在论文中,作者介绍了CharacterGen,这是一个为高效生成3D 角色而开发的框架。 CharacterGen 引入了简化的生成流程以及图像调节的多视图扩散模型。该模型有效地将输入姿势校准为规范形式,同时保留输入图像的关键属性,从而解决不同姿势带来的挑战。 基于变压器的、可推广的稀疏视图重建模型是我们方法的另一个核心组成部分,有助于从多视图图像创建详细的 3D 模型。他们还采用纹理反投影策略来…- 0
- 0
-
【AI论文与新生技术】RodinHD:利用扩散模型生成高保真 3D 模型头像
我们推出 RodinHD,它解决了从正面肖像图像生成高保真 3D 头像的任务。现有的方法很难捕捉复杂的细节,例如我们在本文中解决的布料纹理和发型。具体来说,我们首先发现了一个被忽视的灾难性遗忘问题,该问题是由 MLP 解码器共享方案在大量化身上顺序拟合三平面时出现的。为了克服这个问题,我们引入了一种新颖的数据调度策略,称为任务重放和权重合并正则化项,它有效地提高了解码器渲染更清晰细节的能力,并充分…- 0
- 0
-
3D Rodin AI模型生成越来越好:Rodin从零开始建模到虚幻引擎3D模型资产过程演示
使用Leonardo AI 通过上传 2D 图像自动生成 3D 模型,展示了非常逼真的人脸模型和角色模型。Hyperhuman Rodin 则是通过 AI 生成各种 3D 模型,包括人类和非人类。视频展示了使用这两个工具生成的各种 3D 模型,并展示了其高质量和逼真度。 (登录后查看Leonardo AI官网和Rodin官网链接👇) Leonardo 内容专区: https://heehel.co…- 0
- 0
-
给人物模型快速绑定添加动画,Meshy 这项新功能太方便了!【MeshyAI】
Meshy 引入了全新的动画功能,你可以直接使用 Meshy 生成的角色,进行快速绑定,实现行走或奔跑的动画效果,并立即集成到 3D 环境中使用。动画功能节省了数小时的绑定和制作时间,简化了工作流程,使角色能够更快地动起来。 使用 Meshy 创建动画角色非常简单。只需打开已生成的 3D 模型,点击右侧边栏的「动画」图标,选择角色类型,调整角色方向,在模型上放置绑定点,便可开始生成动画。生成完毕后…- 0
- 0
-
【AI论文与新生技术】Meta 发布 Meta 3D Gen 文本生成3D模型
我们推出了 Meta 3D Gen (3DGen),这是一种用于文本到 3D 资产生成的最先进的快速管道。3DGen 可在一分钟内提供具有高提示保真度和高质量 3D 形状和纹理的 3D 资产创建。 它支持基于物理的渲染 (PBR),这是在实际应用程序中重新照明 3D 资产所必需的。此外,3DGen 还支持使用用户提供的其他文本输入对先前生成(或艺术家创建)的 3D 形状进行生成式重纹理处理。3DG…- 0
- 0
-
【AI论文与新生技术】YouDream:生成解剖学上可控的一致文本转 3D 动物
由文本到图像扩散模型引导的 3D 生成能够创建具有视觉吸引力的资产。然而,以前的方法探索基于图像或文本的生成。创造力的界限受到可以通过文字或可获取的图像表达的内容的限制。 我们推出 YouDream,一种生成高质量解剖学可控动物的方法。 YouDream 使用由 3D 姿势先验的 2D 视图控制的文本到图像扩散模型进行引导。我们的方法生成 3D 动物,这是使用以前的文本到 3D 生成方法无法创建的…- 0
- 0
❯
今日签到
有新私信
私信列表
搜索
客服
扫码打开当前页
联系客服
公众号
返回顶部
幸运之星正在降临...
点击领取今天的签到奖励!
恭喜!您今天获得了{{mission.data.mission.credit}}积分
我的优惠劵
-
¥优惠劵使用时效:无法使用使用时效:
之前
使用时效:永久有效优惠劵ID:×
没有优惠劵可用!