Sketch2Scene 论文笔记

Sketch2Scene

现有的基于草图的3D模型搜索和合成技术

通常针对个人所需的模型重复以下过程：首先进行2D草图绘制，然后进行检索，最后进行3D放置。此2D-3D-2D迭代过程与传统的设计工作流程（即2D概念设计，后跟3D建模）不兼容，后者在很大程度上是连续的，并且通常需要专门从事不同任务的专业人员（例如，概念艺术家，3D建模者）。 此外，它们的性能对单个草图的质量高度敏感。 因此，在过程的每个步骤中通常都需要用户干预。

在这项工作中，我们集中于一组草图对象（简称草图）的联合处理，这些对象对应于感兴趣的3D场景中的多个模型。 这可以显着减少检索和放置步骤中引起的歧义。 例如，虽然单个草图本身（例如，图2中的计算机鼠标）难以识别，但其他输入草图可能会提供强大的上下文提示来检索所需模型。 同样，一个草图可能会给另一个草图（例如，Keyboardona办公桌）提供布置提示。

我们的最终目标是找到与场景中的示例场景尽可能局部相似的最佳场景，同时满足从输入草图得出的约束。

我们通过解决两个新问题来实现此目标：基于草图的共同检索3D模型的基于草图的共同放置。 我们提出了结构组的概念，即在结构良好的3D场景的大型数据库中对象之间可靠关系的紧凑总结。 我们的结构小组为联合检索和联合安置提供了有效而有效的解决方案，这些解决方案构成了组合优化问题。 如图1所示，给定分段素描图作为与感兴趣的多个场景对象相对应的输入，我们的技术会自动将输入的素描转换为上下文一致且排列合理的3D模型场景，并具有即时反馈（请参见随附的视频）

两大组成：

基于草图的协同检索

基于草图的三维模型的共放。