山西网站建站系统哪家好,wordpress opendir,wordpress设置cdn,网站文章优化技巧机器之心发布作者#xff1a;赵悠悠中科院计算所、香港城市大学、英国卡迪夫大学以及加拿大西蒙弗雷泽大学的研究者#xff0c;近日提出了一种能够表达几何细节和复杂拓扑结构的三维模型深度生成方法 SDM-NET#xff0c;解决了之前方法的一部分局限性#xff0c;使得生成的…机器之心发布作者赵悠悠中科院计算所、香港城市大学、英国卡迪夫大学以及加拿大西蒙弗雷泽大学的研究者近日提出了一种能够表达几何细节和复杂拓扑结构的三维模型深度生成方法 SDM-NET解决了之前方法的一部分局限性使得生成的模型具有高质量的几何细节并可以支持快速编辑。该研究已被计算机图形学顶会 Siggraph Asia 2019 接收。三维模型的生成一直是计算机图形学领域一个热门方向。不同于三维模型二维图像的生成在深度神经网络的帮助下已经有了高质量的结果基于深度网络的图像生成方法生成的图像已经足够以假乱真。例如Deep Fake 已经可以做到非常真实的人脸替换。许多研究者尝试将深度网络类似地应用于三维模型的生成上但因为缺乏有效的表示方法生成的模型不具有精细的几何细节。例如基于点云的方法是在空间中离散分布的采样无法刻画几何模型的细节和拓扑基于体素的方法受限于复杂度的问题分辨率较低基于片网的方法对模型的表面进行逼近但是仍然无法表示连续曲面。因此学界及业界尚未有合适的高质量的三维模型深度生成方法。中国科学院计算技术研究所的学者在三维模型的高质量生成方法上进行探索在三维模型的表示上有了系列的研究基础 [1,2,3]。为了进一步生成具有复杂拓扑结构及高质量几何的三维模型中科院计算所联合香港城市大学、英国卡迪夫大学以及加拿大西蒙弗雷泽大学的研究者提出了一种能够表达几何细节和复杂拓扑结构的三维模型深度生成方法 SDM-NET解决了之前方法的一部分局限性使得生成的模型具有高质量的几何细节并可以支持快速编辑。论文地址https://arxiv.org/pdf/1908.04520.pdf项目主页http://geometrylearning.com/sdm-net/论文SDM-NET: Deep Generative Network for Structured Deformable Mesh该方法涉及一种新的三维模型编码方式同时深度生成网络的设计也与这种编码方式耦合在一起完成对三维模型的生成生成的三维模型可以直接进行编辑。图一展示了在 SDM-NET 隐含层上插值生成的高质量结果能够实现模型拓扑之间的连续变换如飞机引擎的从无到有。图二展示了 SDM-NET 与其他方法在细节上的比较。图一SDM-NET 隐含层插值生成模型结果图二细节展示及对比SDM-NET 的生成模型具有的另一大优势是可直接编辑如下面这段动图所展示的由 SDM-NET 生成的模型可以直接进行交互式的变形(如删除扶手、拉长椅腿及椅背等)。SDM-NET 生成的模型可以直接变形编辑研究人员在最近于澳大利亚布里斯班举行的 Siggraph Asia 2019 上展示了他们的研究成果Siggraph Asia 是 CCF A 类会议计算机图形学领域的顶级会议每年都会发布图形学领域中高质量的最新研究和学术成果今年的会议吸引了将近一万人参会包括学者、工程师、艺术家和学生等。被该会议接收的论文都会发表在 ACM Transactions on Graphics 期刊上。该期刊的 SCI 影响因子在 ACM 出版的所有期刊中排名第一享有极高的声誉是被学界及业界高度认可的 ACM 汇刊。如下图(来自 ACM TOG 官网)所示SIGGRAPH、SIGGRAPH ASIA 和 ACM Transactions on Graphics 具有同样高的质量。方法概述一个咖啡杯能够由一个简单的圆圈变换得到如图三所示这是因为它们实际上是同胚的。一个咖啡杯的细节可以由变换来刻画研究人员便利用细节等同于变换的思想来表示三维几何模型的细节。同时直接对模型整体建模比分块建模要更困难为了实现高质量的三维模型生成论文作者将完整的模型分割为具有特定语义标签的部件逐一对每个部件进行建模。如图四所示为每一个部件构建轴对齐的包围盒将包围盒同胚变换到被包围的部件上刻画几何细节。对一类模型(如椅子类别)的不同部件分别进行上述操作便将模型转换为几个同胚集合的并集。每个标签的部件集合对应一个同胚集合集合中的变换进一步送到每个部件语义标签各自的变分自编码器(VAE)进行编码与学习。图三咖啡杯和圆圈是同胚的图四对模型逐部件分析构建网格包围盒通过包围盒的变换刻画几何细节三维模型不只具有精细的几何细节同时还有复杂的拓扑结构。如图五所示研究人员通过部件包围盒之间的支撑关系、对称关系来对模型的复杂结构进行建模。相比采用相邻关系支撑关系更能准确描述部件之间的物理支持属性从而保证生成的三维模型是物理上具有稳定支撑的特性。图五分析部件之间的支撑关系、对称关系对模型复杂拓扑结构建模将结构信息与刻画部件细节的变形信息串联在一起得到模型部件完整的编码如图六所示。研究人员进一步构建一个变分自编码器来联合编码模型的几何形状与拓扑结构保证生成模型的几何与结构的一致性。这也是第一次尝试运用神经网络结构对支撑形状结构进行编码。最终的网络由两级 VAE 组成部件层次编码变形的 VAE 与模型层次联合编码几何和结构的 VAE用于结构化变形网格的编码与生成被称作 SDM-NET。在网络训练完成后可生成高质量、平滑的三维模型。图六模型部件的完整编码结果展示图七与基于点云和片网的三维模型表示方法的比较图八与基于体素的三维模型生成方法的比较如图八所示作者与基于体素的三维模型生成方法做了比较可以看到在生成模型的质量上 SDM-NET 具有很大的优势。下面这个动图展示了模型插值的结果可以看到 SDM-NET 可以实现在不同拓扑结构模型之间的插值。SDM-NET 可以在不同拓扑结构模型之间插值有关论文的更多细节及论文、视频、代码的下载请浏览项目主页。参考文献[1] Lin Gao, Jie Yang, Yi-Ling Qiao, Yu-Kun Lai, Paul L. Rosin, Weiwei Xu, and Shihong Xia. 2018. Automatic unpaired shape deformation transfer. ACM Trans. Graph. 37, 6 (2018), 237:1–237:15.[2] Qingyang Tan, Lin Gao, Yu-Kun Lai, Jie Yang, Shihong Xia. 2018. Mesh-based Autoencoders for Localized Deformation Component Analysis. AAAI Conference on Artificial Intelligence (spotlight). 2452-2459.[3] Lin Gao, Yu-Kun Lai, Jie Yang, Ling-Xiao Zhang, Shihong Xia, and Leif Kobbelt. 2019. Sparse Data Driven Mesh Deformation. IEEE Trans. Vis. Comput. Graph. (2019).
