态度语音的多模态跨语言研究

来源 :南京师范大学 | 被引量 : 0次 | 上传用户:songxin_gkong
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
本文用场景诱导的方式采集了“情愿-不情愿”和“确信-怀疑”两对态度的汉语普通话语料,并用于声学特征分析和跨语言多模态的听辨感知实验。本文的研究思路如下:(1)构建“情愿-不情愿”、“确信-怀疑”的汉语态度语音语料库。每种态度包含12个目标句,每个目标句都由特定的情景引导激发。(2)感知实验招募2组不同文化背景的被试,包括16名中国人和14名韩国人,模态采用纯音频、纯视频、音视频三种。(3)对采集的两对汉语态度语料进行声学分析,提取基频、音强、时长、嗓音16个相关声学参数,并通过主成分与判别分析,考察性别、态度与声学特征之间的对应关系。感知实验结果如下:(1)在语言组上,中国组对两对态度的听辨正确率均高于韩国组;在模态上,音视频正确率均为最高,“情愿-不情愿”纯视频高于纯音频,而“确信-怀疑”纯音频高于纯视频;在态度上,不情愿正确率高于情愿,确信与怀疑之间差异较小。(2)中国组在判断不情愿、确信与怀疑时仅依靠声音信息就可以取得较高的正确率,判断情愿时仅依靠面部表情就可以取得较高的正确率;韩国组在判断情愿、不情愿与怀疑时仅依靠面部表情就可以取得较高的正确率,判断确信时仅依靠声音信息就可以取得较高的正确率。两国文化差异主要体现在不情愿与怀疑上,中国人更多依靠声音信息,而韩国人更加依靠面部表情。声学分析结果如下:(1)方差分析结果显示,发音人表达情愿时会使用较高的基频、较快的语速,而表达不情愿时则为较低的基频、较快的语速、较小的基频抖动、较大的振幅抖动;发音人表达确信时会使用较低的基频,而表达怀疑时则为较高的基频、较快的语速、较小的基频抖动和振幅抖动、较大的谐噪比。(2)对两对态度语料提取的16个声学相关参数进行主成分分析,发现两对态度的前四个公共因子(嗓音因子、基频因子、音强因子、时长因子)可以包含73.1%(情愿-不情愿)、75.0%(确信-怀疑)的信息。(3)在判别分析中,情愿-不情愿(81.2%vs 79.3%vs 87.1%)、确信-怀疑(80.9%vs 79.7%vs 91.1%)得到的声学判断正确率与韩国组主观判断正确率相接近,却显著低于中国组。说明韩国组在主观判断时绝大部分参考声学参数,而中国组会同时结合自己的其他认知来判断。
其他文献
目的:本研究旨在构建IER3基因真核表达载体。方法:采用PCR方法,从人肺癌A549细胞系中扩增出该基因,并克隆至pGEMTeasy载体中,测序正确后,亚克隆至pcDNA3.1-6His载体。将构建
胆管癌是起源于胆管不同部位的上皮细胞肿瘤的统称,是除了原发性肝癌外最常见的肝部肿瘤。手术切除是治疗胆管癌最有效的方式,但由于胆管癌临床症状隐蔽,绝大部分病人确诊时
目的 急性肾损伤是由多种原因导致的短时间内肾功能迅速下降而产生的临床综合征。急性肾损伤导致患者死亡率增加、住院时间延长、常常进展为慢性肾脏病。目前仍缺乏较好的预防急性肾损伤的方法。中医体质在疾病预防方面发挥重要作用。本研究旨在探讨急性肾损伤与中医体质的相关性,明确急性肾损伤患者的体质特点,阐明急性肾损伤患者体质与预后的关系。方法 符合纳入排除标准的2018年12月1日至2019年12月1日在杭州市
所谓P2P(Peer-to-Peer以下简称P2P行业)是指协助投资者与借款人实现直接借贷行为的服务行业。中国的P2P行业的起步还比较早,发展相对比较迅速。目前,P2P已成为比较重要的金融
肺癌是全世界死亡率最高的恶性肿瘤,也是我国新增发病数和死亡率最高的恶性肿瘤,给人类健康带来巨大的威胁。肺癌CAD在肺癌早期检测方面具有重要作用,但由于肺部疾病繁多,组
随着人们对安全和隐私的重视度的提高,现代门禁系统正在向高科技,高安全,低成本等方向发展。基于CPLD的门禁系统设计周期短,设计灵活,可以降低成本,进一步提高系统的可靠性和
HIF是细胞适应低氧环境和促进新生血管生成的代表性转录活性因子,HIF已成为肿瘤治疗的新靶点。HIF-1α与肿瘤增殖、侵袭转移和血管发生等诸多环节都有关系,它的过度表达与恶
目的:了解在结直肠癌术后患者中应用FOLFOX方案后,在不同年龄段人群及不同性别人群中引起白细胞变化的差异,为更好地在不同人群中合理使用FOLFOX方案,减少对白细胞的影响提供
索拱结构是索和拱杂交形成的新型预应力结构形式,通过在纯拱结构中合理布置预应力索,充分发挥拱体的受压性能和索的受拉性能,改善结构的受力性能,并且索的存在可以限制拱体的
侧凸的腰椎使用椎弓根皮质骨轨迹(Cortical Bone Trajectory,CBT)固定技术矫正,可以使用有限元方法模拟仿真。提出一种简易有效的方法建立三维(Three-Dimensional,3D)实体模