项目名称: 具有表现力的维吾尔语可视语音合成技术研究

项目编号: No.61261037

项目类型: 地区科学基金项目

立项/批准年度: 2013

项目学科: 无线电电子学、电信技术

项目作者: 赵晖

作者单位: 新疆大学

项目金额: 43万元

中文摘要: 语音及视觉特征是人们交流的重要手段,它们传递着情感、态度、意图、说话风格等丰富的表现力信息,正是这些表现力信息,增强了人们对语言的理解,提高了交流的效率。本项目旨在进行文本驱动的有表现力的维吾尔语可视语音合成研究,即让计算机根据标注了表现力信息的维吾尔文文本,合成出同步的、符合维吾尔语语音和维吾尔族表情特点的、有表现力的语音和人脸动画头像。其主要研究内容包括维吾尔语视位特征的定量描述、维吾尔语文本表现力的标注、语音、脸像表现力特征的表示和提取、维吾尔语语音动画头像合成等。本项研究将丰富可视语音合成技术的理论与方法,对于新疆地区的影视娱乐、教育、电子商务、安全等方面具有重要意义,特别是对新疆维吾尔语电视制作和远程教育具有重要现实意义。新疆维吾尔语言与中东地区和中西南亚地区民族语言极度相似,开展这方面的研究具有广阔的应用前景和商业意义,对提高我国国际地位,扩大国际影响力也有不可忽视的积极作用。

中文关键词: 维吾尔语视位;动态视位模型;维吾尔语可视语音合成;维吾尔语情感语音转换;维吾尔语情感词典

英文摘要: Speech and vision are important means of people communicating, and convey people's emotion, attitude, intention, speaking style and other prolific expressiveness.People communication becomes harmonious due to these prolific expressivenesses,which improve the efficiency of communication.This project aims to the research of Expressive Text-to-Visual-Speech synthesis in Uyghur.That is to say,according to the Uyghur text marked expression information,the expressive speech and animated avatar are synthesized which are synchronized and conformed with the Uyghur speech and the Uyghurs' expression.The main research contents include description of Uyghur viseme features,Uyghur text expression tagging methods,speech and facial expressiveness feature denotation and extraction ,Uyghur talking-head synchronized with speech.This research will enrich the theory and methods of Visual-Speech synthesis.In addition,it is significant for entertainment, education,E-commerce and security in Xinjiang. Especially, it has important practical significance to Uyghur television production and distance education. The Uyghur in Xinjiang is extremely similar with nationality in the Middle East and in Southwest Asia,so the research has a great future on application and business,and it's positive to raise the international standing of our cou

英文关键词: Uyghur Viseme;Dynamic Viseme Model;Uyghur Visual-Speech Synthesis;Uyghur Emotional Speech Conversion;Uyghur sentiment lexicon

成为VIP会员查看完整内容
0

相关内容

多语言语音识别声学模型建模方法最新进展
专知会员服务
30+阅读 · 2022年2月7日
微软《神经语音合成》综述论文,63页pdf530篇文献
专知会员服务
29+阅读 · 2021年7月3日
知识增强的文本生成研究进展
专知会员服务
96+阅读 · 2021年3月6日
专知会员服务
54+阅读 · 2020年12月20日
多模态视觉语言表征学习研究综述
专知会员服务
185+阅读 · 2020年12月3日
最新《知识驱动的文本生成》综述论文,44页pdf
专知会员服务
74+阅读 · 2020年10月13日
专知会员服务
25+阅读 · 2020年9月9日
【ACM MM2020】跨模态分布匹配的半监督多模态情感识别
专知会员服务
41+阅读 · 2020年9月8日
中文知识图谱构建技术以及应用的综述
专知会员服务
305+阅读 · 2019年10月19日
语音合成:模拟最像人类声音的系统
PaperWeekly
2+阅读 · 2021年11月30日
CSIG云上微表情第21期研讨会成功举办--Facial Expression Coding
CSIG机器视觉专委会
1+阅读 · 2021年10月19日
领域知识图谱研究综述
专知
15+阅读 · 2020年8月2日
Interspeech 2019 | 基于多模态对齐的语音情感识别
AI科技评论
23+阅读 · 2019年9月21日
【机器视觉】表面缺陷检测:机器视觉检测技术
产业智能官
25+阅读 · 2018年5月30日
国家自然科学基金
1+阅读 · 2014年12月31日
国家自然科学基金
0+阅读 · 2014年12月31日
国家自然科学基金
0+阅读 · 2012年12月31日
国家自然科学基金
1+阅读 · 2012年12月31日
国家自然科学基金
0+阅读 · 2012年12月31日
国家自然科学基金
0+阅读 · 2012年12月31日
国家自然科学基金
0+阅读 · 2012年12月31日
国家自然科学基金
1+阅读 · 2009年12月31日
国家自然科学基金
1+阅读 · 2009年12月31日
国家自然科学基金
0+阅读 · 2009年12月31日
Arxiv
0+阅读 · 2022年4月21日
A Survey on Edge Intelligence
Arxiv
48+阅读 · 2020年3月26日
Deformable Style Transfer
Arxiv
14+阅读 · 2020年3月24日
Arxiv
23+阅读 · 2017年3月9日
小贴士
相关VIP内容
多语言语音识别声学模型建模方法最新进展
专知会员服务
30+阅读 · 2022年2月7日
微软《神经语音合成》综述论文,63页pdf530篇文献
专知会员服务
29+阅读 · 2021年7月3日
知识增强的文本生成研究进展
专知会员服务
96+阅读 · 2021年3月6日
专知会员服务
54+阅读 · 2020年12月20日
多模态视觉语言表征学习研究综述
专知会员服务
185+阅读 · 2020年12月3日
最新《知识驱动的文本生成》综述论文,44页pdf
专知会员服务
74+阅读 · 2020年10月13日
专知会员服务
25+阅读 · 2020年9月9日
【ACM MM2020】跨模态分布匹配的半监督多模态情感识别
专知会员服务
41+阅读 · 2020年9月8日
中文知识图谱构建技术以及应用的综述
专知会员服务
305+阅读 · 2019年10月19日
相关资讯
语音合成:模拟最像人类声音的系统
PaperWeekly
2+阅读 · 2021年11月30日
CSIG云上微表情第21期研讨会成功举办--Facial Expression Coding
CSIG机器视觉专委会
1+阅读 · 2021年10月19日
领域知识图谱研究综述
专知
15+阅读 · 2020年8月2日
Interspeech 2019 | 基于多模态对齐的语音情感识别
AI科技评论
23+阅读 · 2019年9月21日
【机器视觉】表面缺陷检测:机器视觉检测技术
产业智能官
25+阅读 · 2018年5月30日
相关基金
国家自然科学基金
1+阅读 · 2014年12月31日
国家自然科学基金
0+阅读 · 2014年12月31日
国家自然科学基金
0+阅读 · 2012年12月31日
国家自然科学基金
1+阅读 · 2012年12月31日
国家自然科学基金
0+阅读 · 2012年12月31日
国家自然科学基金
0+阅读 · 2012年12月31日
国家自然科学基金
0+阅读 · 2012年12月31日
国家自然科学基金
1+阅读 · 2009年12月31日
国家自然科学基金
1+阅读 · 2009年12月31日
国家自然科学基金
0+阅读 · 2009年12月31日
微信扫码咨询专知VIP会员