多模态语音情感语料库的 语言符号学“全文本”解读

重庆交通大学学报（社会科学版） ›› 2016, Vol. 16 ›› Issue (4): 134-138.

多模态语音情感语料库的语言符号学“全文本”解读

汤朝菊，魏全凤

电子科技大学外国语学院，成都 611731

收稿日期:2016-02-26 出版日期:2016-08-01 发布日期:2016-09-02
作者简介:汤朝菊（1968—），女，重庆人，电子科技大学外语学院教授，博士，研究方向：语言学；魏全凤（1972—），女，四川人，电子科技大学外语学院副教授，博士，研究方向：符号学。
基金资助:
电子科技大学人文社科重点培育项目“语音情感识别多模态研究：语力、韵律和情感互动关系”（ZYGX2015SKZ01）；中国社会科学院创新工程项目子课题 “语力、韵律与情感研究”

Fulltextualizing towards Multimodal Corpus of Emotion in Speech from Linguistic Semiotics

TANG Chaoju, WEI Quanfeng

(School of Foreign Languages, University of Electronic Science and Technology of China, Chengdu 611731, China)

Received:2016-02-26 Online:2016-08-01 Published:2016-09-02

摘要/Abstract

摘要： 在符号学与语言学的交叉学科语言符号学视角下，探讨语言符号学对语料库全文本解读的可行性和实际应用价值，是语言符号学应用广度上一个新尝试，也是对语料库后续价值的进一步挖掘。本文主要从已经建立的语力和韵律关联性多模态语音情感语料库的语言符号学全文本解读分析入手，论证语言符号学视角下多模态语音情感语料库的全文本解读不仅可以还原语料库的原有信息，而且生成新的可用信息，更好地解释语力、韵律和情感的互动关联，同时为语料库的后续研发提供资源基础，从而说明语言符号学这个新兴交叉学科的实际应用价值和对研究空间的拓展功能。

关键词: 语言符号学, 多模态, 语音情感语料库, 全文本

Abstract: The feasibility and practical application of fulltextualizing towards Multimodal corpus of emotion in speech is explored from the perspective of linguistic semiotics. It is actually an initial methodological application and discussion on both the discipline of linguistic semiotics and further explorations and researchers of the established corpus. With the implication of the interface of semiotics and linguistics, the fulltextualizing perspectives and methods can not only restore the given information, but also dig out new information carried by the transcribed corpus.

Key words: linguistic semiotics, multimodality, corpus of emotion in speech, fulltext

汤朝菊，魏全凤. 多模态语音情感语料库的语言符号学“全文本”解读[J]. 重庆交通大学学报（社会科学版）, 2016, 16(4): 134-138.

TANG Chaoju, WEI Quanfeng. Fulltextualizing towards Multimodal Corpus of Emotion in Speech from Linguistic Semiotics[J]. , 2016, 16(4): 134-138.

参考文献

［1］GU Y.Multimodal text analysis:a corpus linguistic approach to situated discourse［J］．Text and talk,2006,26(2):127－167.
［2］GU Y.From real-life situated discourse to video-stream data-mining［J］.International journal of corpus linguistics,2009,14(4):433－466.
［3］GU Y.A conceptual model of Chinese illocution,emotion and prosody［C］//Human language resources and linguistic typology.Taipei:Academia Sinica,2013:309-362.
［4］顾曰国.论言思情貌整一原则与鲜活话语研究:多模态语料库语言学方法［J］.当代修辞学,2013(6):1-19.
［5］GU Y.Elementary introduction to multimodal corpus linguistics［R］//Sino-UK school of corpus linguis-tics.Shanghai:Shanghai Jiao Tong University,2014.
［6］DAMASIO A.Descartes Error:emotion,reason and the uuman brain［M］.London:Papermac,1996.
［7］DAMASIO A.The feeling of what happens:body and emotion in the making of consciousness［M］.London:William Heinemann,1999.
［8］DAMASIO A.Looking for spinoza:joy,sorrow,and the feeling brain［M］.London:William Heinemann,2003.
［9］DAMASIO A,MEYER K.Consciousness:an overview of the phenomenon and of its possible neural basis［C］//LAUREY S,TONONI G.The neurology of consciousness.Amsterdam:Academic Press Elsevier,2009.
［10］王铭玉.谈语言符号学系统理论的构建［J］.外语学刊,2007(1):105-112.
［11］王铭玉.符号学与语言学［J］.外语研究,1999(2):5－7.
［12］王铭玉.从符号学看语言符号学［J］.解放军外国语学院学报,2004(1):1－9.
［13］王铭玉.语言符号学［M］.北京:高等教育出版社,2004.
［14］王铭玉,等.现代语言符号学［M］.北京:商务印书馆,2013.
［15］LOTMAN J.The structure of artistic text［M］.Ann Arbor:University of Michigan Press，1970:64．
［16］赵毅衡.“全文本”与普遍隐含作者［J］.甘肃社会科学,2012(6):145.
［17］赵毅衡.论文本的普遍性［J］.重庆广播电视大学学报,2013,25(6):23.
［18］吕红周.索绪尔的语言系统观研究［J］.外语学刊,2010(4):57－60.
［19］KRESS G,LEEUWEN van T.Front pages:the critical analysis of newspaper layout［C］//BELL A,GARRETT P.Approaches to media discourse.London:Times New Roman,1998:186.
［20］KRESS G,LEEUWEN van T.Multimodal discourse:the modes and media of contemporary communication［M］.London:Arnold,2001:111.
［21］BAUDERANDE de R.Text,discourse and process［M］.Norwood NJ:Ablex,1980.

[1]	张欢雨. 多模态新闻语篇图片极差表意机制研究[J]. 重庆交通大学学报（社会科学版）, 2019, 19(5): 87-92.
[2]	孙红元，汪敏飞. “反腐倡廉”系列公益广告的多模态隐喻框架研究[J]. 重庆交通大学学报（社会科学版）, 2018, 18(5): 133-136.
[3]	王小平，梁燕华. 多模态宣传语篇的认知机制研究[J]. 重庆交通大学学报（社会科学版）, 2015, 15(3): 130-135.
[4]	裘莹莹1，汪少华2. 教师话语的多模态隐喻架构分析 ——以“外教社杯”全国大学英语教学大赛为例[J]. 重庆交通大学学报（社会科学版）, 2015, 15(1): 127-131.
[5]	章柏成. 输入强化在多模态PPT演示中的实现[J]. , 2009, 9(03): 133-133.