Neural style transfer (NST) can create impressive artworks by transferring reference style to content image. Current image-to-image NST methods are short of fine-grained controls, which are often demanded by artistic editing. To mitigate this limitation, we propose a drawing-like interactive style transfer (IST) method, by which users can interactively create a harmonious-style image. Our IST method can serve as a brush, dip style from anywhere, and then paint to any region of the target content image. To determine the action scope, we formulate a fluid simulation algorithm, which takes styles as pigments around the position of brush interaction, and diffusion in style or content images according to the similarity maps. Our IST method expands the creative dimension of NST. By dipping and painting, even employing one style image can produce thousands of eye-catching works. The demo video is available in supplementary files or in http://mmcheng.net/ist.
翻译:神经风格传输( NST) 可以通过向内容图像转换引用样式来创造令人印象深刻的艺术作品。 当前图像到图像NST 方法没有精细的显示控制,而艺术编辑经常需要这种精细的控制。 为了减轻这一限制,我们建议一种像绘图一样的互动风格传输( IST) 方法, 用户可以通过这种方法互动创建和谐风格的图像。 我们的 IST 方法可以作为一种刷子, 从任何地方浸泡样式, 然后油漆到目标内容图像的任何区域。 为了确定动作范围, 我们设计一种流体模拟算法, 将样式作为刷子互动位置的颜料, 并根据相似的地图在样式或内容图像中传播。 我们的 IST 方法扩大了NST 的创造性层面。 通过绘图和绘画, 即使使用一种样式的图像也可以产生成千上万的抓眼作品。 演示视频可以在补充文件或http://mmcheng.net/ist中查阅。