《HNC的语言模型.ppt》由会员分享，可在线阅读，更多相关《HNC的语言模型.ppt（34页珍藏版）》请在三一办公上搜索。
1、HNC的语言模型,苗 传 江2006年8月22日 北京师范大学,提纲,1.HNC说略2.HNC的目标和基本内容3.HNC的语义网络4.HNC的概念表述模式5.HNC的语句表述模式6.HNC的知识表示体系7.HNC的语言理解技术8.小结,1.HNC说略,Hierarchical Network of Concepts（概念层次网络）一个关于NLU的新理论（Natural Language Understanding,自然语言理解）一种表述和处理自然语言的新模式基于概念和语义的语言理论中国科学院声学研究所黄曾阳先生创立,发展历程19891993 理论创立19941996 理论实验19972000
2、技术实现2001 技术应用影响和地位业界关注三大流派之一应该带来语言学的一场革命,黄曾阳先生与HNC家学渊源多学科优势闭关面壁学术风格我与HNC,2.HNC 的目标和基本内容,目标：以概念联想脉络为主线，建立一种模拟大脑语言感知过程的自然语言表述模式和计算机理解处理模式，使计算机获得消解模糊的能力。,自然语言的五重模糊发音模糊音词转换模糊词的多义模糊语义块构成的分合模糊指代冗缺模糊消解模糊语言理解的首要任务对NLU当前阶段的定位如何获得消解模糊的能力？消解模糊靠什么？,NLU的必由之路模拟大脑语言感知过程建立概念联想脉络大脑感知或理解语言的实质概念联想脉络激活、扩展、浓缩、转换与存储的全过程运
3、作概念联想脉络与语言概念空间,HNC的两个基本假设第一假设：所有的自然语言空间对应着同一的语言概念空间。这是对语言本体的认识，也是对“自然语言理解”的理解。语言概念空间的同一性是第一位的，差异性是第二位的。补充1：语言概念空间并非概念空间的全部。补充2：语言概念空间的历时性变化是局部的、缓慢的。,第二假设：语言概念空间是一个四层级的结构体。这是关于语言概念空间结构特征的假设。语言概念空间的四个层级：基层概念基元 空间/世界/符号体系第一介层句类 空间/世界/符号体系第二介层语境单元 空间/世界/符号体系上层语境框架 空间/世界/符号体系四层级构成语言思维的载体，简称概念层次网络(HNC)，因为
4、语言概念空间的基本特征是它的层次性和网络性。,HNC第二假设隐含着三项“无限与有限”的假设：语言概念无限而语言概念基元有限；语句无限而语句的概念类型（句类）有限；语境无限而语境单元有限。,HNC的具体目标就是为语言概念空间的四个层级设计符号体系，建立表述模式。进展：前两个层级的模式已基本完善，后两个层级的模式取得了一定进展。,前两个层级的进展可概括为5个方面：设计了对语言概念空间进行总体描述的语义网络建立了自然语言概念体系的表述模式建立了自然语言语句的表述模式形成了提纲挈领式的知识表示体系形成了称为句类分析的自然语言理解处理技术,HNC的基本内容,语 义 网 络,概念和语句表述模式,知 识 库
5、,句类分析系统,3.HNC的语义网络,对自然语言概念体系的总体描述语言概念空间的框架结构建立概念联想脉络的基础,HNC语义网络概览抽象概念的三大聚类基元概念基本概念逻辑概念具体概念基本物挂靠近似表达,HNC语义网络的特点概念化基元化层次化网络化不是词义分类系统,HNC语义网络的思想来源国内训诂学汉语“字义基元化、词义组合化”现象国外Quillian语义网络（semantic network）Fillmore格语法（case grammar）Schank概念从属理论（conceptual dependency）,4.HNC的概念表述模式,词汇层面的概念联想脉络对词汇语义的形式化描述HNC符号,H
6、NC符号示例,思考 v80产生 v311情感 g713立法 v9311&ga5思维 g80消除 v312爱 vg7135违法 vd002|ga5 想法 r80推动 v361爱情 gr71359承担 v901力 g008抑制 v362保护 v3219责任 rc010力量 gz00调节 v360照顾 v653219圆满 u30a力度 z00年 wj10-维护 v93219完成 v30a8弱 u00c21月 wj10-0保卫 vc3219 精力 gz655098强 u00c22日 wj10-00写作 va31旺盛 zu5098e71 萌芽 gv10ac41体 j20-作家 pa31 幸福 gu50a
7、9ae81成长 v10ac42面 j20-0治疗 va82生活 gv50a9成熟 vu10ac43线 j20-00处方 gwa82衰亡 v10ac44点 j20-000 药物 wa82达成 vc249a$(v308|(jlv001/v810),关系即意义消解模糊示例召开 vc3959+va01精力 gz655098会议 gc39e219旺盛 zu5098e71回忆 vg6802经理 pea20/p44e61会意 v8108经历 vr65108,以关联性代替任意性，显现词义之间的概念关联。首要目的和价值不是给出概念的精确表示，而是给出概念联想脉络的线索。每一个符号基元都具有确定的意义，可以充当概
8、念联想的激活因子。具有语义完备性，能够与自然语言的任何词语建立起语义映射关系。,5.HNC的语句表述模式,句子层面的联想脉络建立了句子的语义结构表示式发现了句子语义的57种基元类型可以描述任何句子的语义结构,基本句类及其表示式示例主动反应句X21J=X2A+X21+XBC反应者+反应+反应引发者及其表现张三反对李四的看法。信息转移句T3J=TA+T3+TB+T3C转移发出者+转移+接收者+转移内容张三告诉李四王五结婚了。基本句类是句子语义的基元类型老张表扬了小王的工作成绩。X21T3*21J=TAX2A+X21T3+XBC,句类表示式是句子语义的基本框架语句理解的启发性知识句子的深层结构确定句
9、类表示式是语句理解的基本任务,句类和语义块是对句子的语义描述与句法结构无关主席团坐在台上。台上坐着主席团。张三打了李四。张三把李四打了。李四被张三打了。张三打了李四。张三讨厌李四。张三支持李四。张先生喜欢李小姐的个性。张先生喜欢李小姐的妹妹。特征语义块有复合构成胡锦涛将对俄罗斯进行友好访问。很多人对北京的交通状况持悲观态度。语义块可以分离李四被张三打断了腿。中国正在对国有企业进行产业结构调整。句蜕要还原为句子这些话语似乎表示了他对奴隶的同情。,6.HNC的知识表示体系,区分概念、语言、常识及专业三个层面定位于消解语言模糊以概念联想脉络为主线，以句类知识为纲领，把语法、语义、语用和世界知识综合起
10、来进行抽象与提炼概念化、数字化，不是用自然语言描述自然语言,HNC汉语词语知识库示例：词形:起诉概念类别:v;ugHNC符号:va5a句类代码:T3R011*322格式:!113;!320S:TB:pea56 RB2:pe;pCA:ug,Q H:gw|书;状;T3R011*322J=TA+T3R011+TB+RB2,HNC理解处理系统的基本框架,预处理,语义块感知和句类假设,句类检验,语义块构成分析,语境生成,隐知识揭示,要点主题分析,短时记忆,基本词库,概念知识库,词语知识库,7.HNC的语言理解技术,句类分析三部曲：语义块感知和句类假设lv感知；v排除排队句类检验预期匹配语义块构成分析同行
11、优先准则刘嘉玲正式向上海中级人民法院起诉汕头雅丽丝实业公司。,以语义为主导自上而下和自下而上相结合分析结果及其应用以搜索“布什访问俄罗斯”为例布什访问俄罗斯布什出访俄罗斯布什对俄罗斯进行国事访问布什抵达俄罗斯开始为期五天的访问访问俄罗斯的布什总统接见了莫斯科的美商代表,8.小结,HNC建立了基于概念联想脉络的语言模型，揭示出自然语言总体上是well-defined的。HNC的语言模型可以使计算机实现对大脑语言感知过程的初步模拟，获得相当强的消解模糊能力，从而迈上自然语言理解的第一个台阶。HNC的语言模型提供了观察自然语言的望远镜和显微镜，为语言研究开辟了新天地。,附：资源,黄曾阳.1998.HNC(概念层次网络)理论.北京:清华大学出版社黄曾阳.2004.语言概念空间的基本定理和数学物理表示式.北京:海洋出版社苗传江.2005.HNC（概念层次网络）理论导论.北京:清华大学出版社晋耀红.2006.HNC（概念层次网络）语言理解技术及其应用.北京:科学出版社苗传江,杜燕玲(主编).2004.第二届HNC与语言学研讨会论文集.北京:海洋出版社张全,萧国政(主编).2001.HNC与语言学研究.武汉:武汉理工大学出版社http:/http:/,敬请批评指正，谢谢！,
