随着人工智能技术的飞速发展,3D生成模型已成为研究和应用的热点。为了科学、公平地评价这些模型,复旦大学和上海AI lab的研究人员推出了3DGen-Arena,一个创新的3D生成模型评测平台。
3DGen-Arena的诞生背景
3D生成模型的数量在迅速增长,但如何评价它们的性能却是一个公认的难题。现有的3D评测指标多沿用2D领域的范式,难以满足3D领域的需求。因此,3DGen-Arena应运而生,旨在提供一个多维度、全方位的评估体系。
3DGen-Arena的特点
赛道设置
3DGen-Arena设置了两个赛道:文生3D和图生3D,分别对应根据文本和图像生成3D模型的任务。
展示与投票方式
平台提供3D资产的法线图、无纹理几何图和贴纹理RGB图的360°环绕视频,使评审者能够全面评估模型生成的3D资产。投票方式简单直观,分为三个步骤:选择prompt、生成模型、从五个维度投票。
模型与社区互动
目前平台上已有19个开源3D生成模型,支持社区成员与指定模型进行比较和单个模型交互。
3D生成评测的挑战
现有的3D评测指标存在局限性,而3DGen-Arena通过设计丰富的prompt集和多维度评估体系,提供了一种新的解决方案。
3DGen-Arena的优势
多维度评估
3DGen-Arena的评估体系包括几何合理性、几何精细度、纹理质量、几何-纹理一致性和文本/图像-3D一致性五个维度,全面覆盖了3D生成模型的关键评价指标。
Prompt集设计
平台精心设计了1k+条prompt,涵盖六大基础类别,为模型提供了丰富多样的测试场景。
未来计划
开发团队计划继续扩充模型库、维护排名榜,并计划推出支持开放式输入的在线生成服务。
结论
3DGen-Arena的推出,为3D生成领域的发展注入了新的活力。它不仅有助于深入理解现有模型的优缺点,指导模型改进和新算法的开发,而且对实践应用具有重要的指导意义。
暂无评论...