论文地址：https://arxiv.org/pdf/2203.12835.pdf

开源代码：https://github.com/jcyang98/InST

项目主页：https://jcyang98.github.io/InST/home.html

摘要

我们提出了一种新型的样式转移方法，以快速创建一种新的视觉产品，可为工业设计师参考提供漂亮的外观。鉴于源产品，目标产品和艺术风格图像，我们的方法会产生一个神经翘曲场，该神经扭曲场扭曲源形状，以模仿目标的几何样式和神经纹理转换网络，将艺术风格转移到扭曲的源产品。我们的模型“工业风格转移”（Inst）由大规模的几何翘曲（LGW）和兴趣一致性纹理转移（ICTT）组成。 LGW的目的是探索源掩模和目标产品的形状面膜之间的无监督转换，以拟合大规模形状翘曲。此外，我们引入了一个面具平滑度正则化项，以防止源产品细节的突然变化。 ICTT引入了一个兴趣正规化术语，以通过使用艺术风格图像对扭曲产品的重要内容进行维护。广泛的实验结果表明，Inst在多个视觉产品设计任务（例如公司的蜗牛徽标和经典瓶子）上实现最新性能（请参见图1）。据我们所知，我们是第一个扩展神经风格转移方法以创建工业产品出现的人。

主要贡献

总体而言，这项工作的贡献总结如下：

  • 对于视觉产品设计过程中的大规模几何差异，我们探索了一种基于掩模的大规模几何变形模块，将几何形状风格从一个对象产品转移到另一个对象产品，即使语义不相关。
  • 对于在样式化过程中的产品内容维护，我们使用SuperPoint Network提取的兴趣点和描述符引入了兴趣一致性纹理转移，以保留内容详细信息。
  • 将LGW与ICTT相结合，我们提出了一个工业风格的转移框架，以快速产生新产品的视觉外观，例如公司的徽标，飞行汽车和瓷器。据我们所知，这项工作可以打开新的风格转移领域，设计工业产品的外观。

实验

为了证明所提出的Inst具有创建具有出色视觉外观的新产品的几何和纹理传递能力，我们将其与两种最近的几何传输方法进行比较，例如DST [28]和GTST [38]和三种纹理传输方法，例如，Adain [21]，Linearwct [32]和ArtFlow（内容保存）[3]。

内容中包含的图片若涉及版权问题，请及时与我们联系删除