Synthesis of embroidery based on convolutional neural network(基于卷积神经网络的刺绣风格数字合成)

针对刺绣风格数字化模拟方法立体感不强、缺少线条方向等问题,提出了一种基于深度学习和卷积神经网络的算法,将刺绣艺术风格传输到目标图像。利用图像语义分割网络及风格迁移网络,分别对目标内容图像与刺绣艺术风格图像进行目标提取和风格迁移。首先,输入目标内容图像与刺绣艺术风格图像,采用基于条件随机场的图像语义分割,将目标内容图与刺绣艺术风格图的前景与背景分离,并进行二值化处理,形成掩模图像;其次,将目标内容图与刺绣艺术风格图的RGB 颜色空间转换为YIQ;最后,参照掩模图像使用VGG19 网络模型提取目标内容图的内容特征及刺绣艺术风格图的风格纹理特征进行目标区域内的风格迁移,从而对刺绣艺术进行数字化模拟。...

Full description

Bibliographic Details
Main Authors: ZHENGRui(郑锐), QIANWenhua(钱文华), XUDan(徐丹), PUYuanyuan(普园媛)
Format: Article
Language:zho
Published: Zhejiang University Press 2019-05-01
Series:Zhejiang Daxue xuebao. Lixue ban
Subjects:
Online Access:https://doi.org/10.3785/j.issn.1008-9497.2019.03.002
_version_ 1797235720349286400
author ZHENGRui(郑锐)
QIANWenhua(钱文华)
XUDan(徐丹)
PUYuanyuan(普园媛)
author_facet ZHENGRui(郑锐)
QIANWenhua(钱文华)
XUDan(徐丹)
PUYuanyuan(普园媛)
author_sort ZHENGRui(郑锐)
collection DOAJ
description 针对刺绣风格数字化模拟方法立体感不强、缺少线条方向等问题,提出了一种基于深度学习和卷积神经网络的算法,将刺绣艺术风格传输到目标图像。利用图像语义分割网络及风格迁移网络,分别对目标内容图像与刺绣艺术风格图像进行目标提取和风格迁移。首先,输入目标内容图像与刺绣艺术风格图像,采用基于条件随机场的图像语义分割,将目标内容图与刺绣艺术风格图的前景与背景分离,并进行二值化处理,形成掩模图像;其次,将目标内容图与刺绣艺术风格图的RGB 颜色空间转换为YIQ;最后,参照掩模图像使用VGG19 网络模型提取目标内容图的内容特征及刺绣艺术风格图的风格纹理特征进行目标区域内的风格迁移,从而对刺绣艺术进行数字化模拟。该算法能模拟出具有刺绣艺术效果的结果图像,能更好地模拟真实刺绣艺术的线条方向,突出了线条的立体感。通过使用语义分割与风格迁移相结合的方法,有效模拟了色彩艳丽、立体感强的刺绣艺术风格图像,是对非真实感绘制的有效补充,为刺绣数字化保护与非物质文化传承奠定了基础。
first_indexed 2024-04-24T16:52:26Z
format Article
id doaj.art-b7c3f36ffc214df68da934b31f84bc42
institution Directory Open Access Journal
issn 1008-9497
language zho
last_indexed 2024-04-24T16:52:26Z
publishDate 2019-05-01
publisher Zhejiang University Press
record_format Article
series Zhejiang Daxue xuebao. Lixue ban
spelling doaj.art-b7c3f36ffc214df68da934b31f84bc422024-03-29T01:58:39ZzhoZhejiang University PressZhejiang Daxue xuebao. Lixue ban1008-94972019-05-0146327027810.3785/j.issn.1008-9497.2019.03.002Synthesis of embroidery based on convolutional neural network(基于卷积神经网络的刺绣风格数字合成)ZHENGRui(郑锐)0https://orcid.org/0000-0003-4671-2516QIANWenhua(钱文华)1https://orcid.org/0000-0001-8023-9094XUDan(徐丹)2PUYuanyuan(普园媛)3 1.Department of Computer Science and Engineering, Yunnan University, Kunming 650504, China( 1.云南大学 信息学院 计算机科学与工程系,云南 昆明 650504) 1.Department of Computer Science and Engineering, Yunnan University, Kunming 650504, China( 1.云南大学 信息学院 计算机科学与工程系,云南 昆明 650504) 1.Department of Computer Science and Engineering, Yunnan University, Kunming 650504, China( 1.云南大学 信息学院 计算机科学与工程系,云南 昆明 650504) 1.Department of Computer Science and Engineering, Yunnan University, Kunming 650504, China( 1.云南大学 信息学院 计算机科学与工程系,云南 昆明 650504)针对刺绣风格数字化模拟方法立体感不强、缺少线条方向等问题,提出了一种基于深度学习和卷积神经网络的算法,将刺绣艺术风格传输到目标图像。利用图像语义分割网络及风格迁移网络,分别对目标内容图像与刺绣艺术风格图像进行目标提取和风格迁移。首先,输入目标内容图像与刺绣艺术风格图像,采用基于条件随机场的图像语义分割,将目标内容图与刺绣艺术风格图的前景与背景分离,并进行二值化处理,形成掩模图像;其次,将目标内容图与刺绣艺术风格图的RGB 颜色空间转换为YIQ;最后,参照掩模图像使用VGG19 网络模型提取目标内容图的内容特征及刺绣艺术风格图的风格纹理特征进行目标区域内的风格迁移,从而对刺绣艺术进行数字化模拟。该算法能模拟出具有刺绣艺术效果的结果图像,能更好地模拟真实刺绣艺术的线条方向,突出了线条的立体感。通过使用语义分割与风格迁移相结合的方法,有效模拟了色彩艳丽、立体感强的刺绣艺术风格图像,是对非真实感绘制的有效补充,为刺绣数字化保护与非物质文化传承奠定了基础。https://doi.org/10.3785/j.issn.1008-9497.2019.03.002刺绣卷积神经网络图像语义分割掩模风格迁移
spellingShingle ZHENGRui(郑锐)
QIANWenhua(钱文华)
XUDan(徐丹)
PUYuanyuan(普园媛)
Synthesis of embroidery based on convolutional neural network(基于卷积神经网络的刺绣风格数字合成)
Zhejiang Daxue xuebao. Lixue ban
刺绣
卷积神经网络
图像语义分割
掩模
风格迁移
title Synthesis of embroidery based on convolutional neural network(基于卷积神经网络的刺绣风格数字合成)
title_full Synthesis of embroidery based on convolutional neural network(基于卷积神经网络的刺绣风格数字合成)
title_fullStr Synthesis of embroidery based on convolutional neural network(基于卷积神经网络的刺绣风格数字合成)
title_full_unstemmed Synthesis of embroidery based on convolutional neural network(基于卷积神经网络的刺绣风格数字合成)
title_short Synthesis of embroidery based on convolutional neural network(基于卷积神经网络的刺绣风格数字合成)
title_sort synthesis of embroidery based on convolutional neural network 基于卷积神经网络的刺绣风格数字合成
topic 刺绣
卷积神经网络
图像语义分割
掩模
风格迁移
url https://doi.org/10.3785/j.issn.1008-9497.2019.03.002
work_keys_str_mv AT zhengruizhèngruì synthesisofembroiderybasedonconvolutionalneuralnetworkjīyújuǎnjīshénjīngwǎngluòdecìxiùfēnggéshùzìhéchéng
AT qianwenhuaqiánwénhuá synthesisofembroiderybasedonconvolutionalneuralnetworkjīyújuǎnjīshénjīngwǎngluòdecìxiùfēnggéshùzìhéchéng
AT xudanxúdān synthesisofembroiderybasedonconvolutionalneuralnetworkjīyújuǎnjīshénjīngwǎngluòdecìxiùfēnggéshùzìhéchéng
AT puyuanyuanpǔyuányuàn synthesisofembroiderybasedonconvolutionalneuralnetworkjīyújuǎnjīshénjīngwǎngluòdecìxiùfēnggéshùzìhéchéng