- 1、本文档共6页,可阅读全部内容。
- 2、有哪些信誉好的足球投注网站(book118)网站文档一经付费(服务费),不意味着购买了该文档的版权,仅供个人/单位学习、研究之用,不得用于商业用途,未经授权,严禁复制、发行、汇编、翻译或者网络传播等,侵权必究。
- 3、本站所有内容均由合作方或网友上传,本站不对文档的完整性、权威性及其观点立场正确性做任何保证或承诺!文档内容仅供研究参考,付费前请自行鉴别。如您付费,意味着您自己接受本站规则且自行承担风险,本站不退款、不进行额外附加服务;查看《如何避免下载的几个坑》。如果您已付费下载过本站文档,您可以点击 这里二次下载。
- 4、如文档侵犯商业秘密、侵犯著作权、侵犯人身权等,请点击“版权申诉”(推荐),也可以打举报电话:400-050-0827(电话支持时间:9:00-18:30)。
- 5、该文档为VIP文档,如果想要下载,成为VIP会员后,下载免费。
- 6、成为VIP后,下载本文档将扣除1次下载权益。下载后,不支持退款、换文档。如有疑问请联系我们。
- 7、成为VIP后,您将拥有八大权益,权益包括:VIP文档下载权益、阅读免打扰、文档格式转换、高级专利检索、专属身份标志、高级客服、多端互通、版权登记。
- 8、VIP文档为合作方或网友上传,每下载1次, 网站将根据用户上传文档的质量评分、类型等,对文档贡献者给予高额补贴、流量扶持。如果你也想贡献VIP文档。上传文档
查看更多
山西大学商务学院
BUSINESS COLLEGE OF SHANXI UNIVERSITY
2015届本科毕业论文
基于汉语构架网的语义角色注释
姓名 指导教师 专业软件工程学院名称信息学院
二〇一六年十一月
基于汉语构架网的语义角色自动标注
——自动标注算法研究
内容摘要:基于构架的语义角色标注是根据一个文本句中的目标谓词所激起的构架与相关句子成分之间的语义关系而赋予这些句子成分一定的语义信息的方法。论文在基于汉语构架网(CFN)的基础上,提出了基于PT-GF匹配和最大熵分类器的语义角色自动标注方法,并对该方法进行了有效性验证。
关键词:
构架本体 语义标注 文本匹配 最大熵
1. 引言
语义标注,从本体角度是添加实例,丰富本体的过程;从语义网的角度是语义信息的发布过程,即用户依据一定的本体为页面添加语义信息。基于构架的语义角色标注(Semantic Role Labeling)是浅层语义分析的一种可行性方案,通过分析句子的论元结构,标记出句子中某个动词的所有论元,根据句子中的目标谓词所激起的构架与相关的句子成分之间的语义关系而赋予这些句子成分的语义角色信息。
国外的基于构架下的语义角色标注开始于Dan Gildea和DanJurafsky,他们实验所用的语料是Berkeley大学开发的FrameNet。FrameNet是以构架语义为标注的理论基础,对英语国家的语料库进行部分标注,试图描述一个词汇单元(主要为动词)的构架以及这些构架之间的关系。国内的语义角色标注研究起步较晚,较早的研究者刘挺等主要参照英文进行标注;刘怀军等主要进行“语义角色分类研究”。
本体构架网是一个支持性内容,它构建了某一领域本体的大体构架,给出了这一领域知识的宏观结构。它类似于词典,构建了一个某一领域所有本体的构架网络体系,这些本体构架根据其之间的不同联系,构成了纵向的继承关系、总分关系;横向的因果关系、起始关系、参见关系等;词元即目标词,词元库包含了某一构架下所有的目标谓词,当文本中出现了这些词时,我们优先将其选择为中心词;语义角色标注例句库是语料库的核心内容,具体标记了所有例句中目标词和其论元成分在文本中的位置、路径等特征和构架元素、短语类型、句法功能三元组的具体标注,并对同一个目标词的各个特征进行了总结。
2. CFN语义角色的自动标注
CFN中语义角色自动标注是在对语料库例句进行统计、分析和自动学习的基础上,利用一定的算法和模型给输入文本的各个谓语参数赋予语义的过程。
语义角色自动标注一般分为3个阶段:
·首先分词、
·词性标注、
·语义角色标注
图1 计算机
图2 软盘
2.1 CFN语义角色自动标注流程
由于汉语构架网的建设仍然处于初级阶段,本文所讲的自动标注是在已知给定文本的目标词及其所属构架前提下,并对各短语进行识别、词性标注和句法分析等技术的基础上,探讨语义角色进行自动标注问题,所采用流程如图3所示。
2.2 PT-GF的语义角色匹配运算
基于PT-GF的语义角色自动标注是综合考虑短语类型、短语相对于目标词位置、句法功能三个因素以及这三个方面对句子相似度影响的权重,利用余弦算法对输入文本和例句文本的相似度进行计算。
2.2.1 语义角色自动标注
最大熵原理是在1957年由E.T.Jaynes 提出的,主要思想是在只掌握关于未知分布的部分知识时,应该选取符合这些知识但熵值最大的概率分布。最大熵语义角色标注是在统计学的基础上发展起来的,以句子中词、短语或语块为标注的基本单元,根据一定语言学知识列出该词汇单元的各种特征,标注单元与该单元的语义角色类型组成学习实例,使用某种学习算法对这些实例进行自动学习,以对新的实例进行预测。参照我国现有的最大熵研究成果,简单特征、复合特征和扩展特征总结如表1所示
表一 数据表
分析算法
数据集C4.5
SPRINTILASDT总数MONK463019 =SUM(LEFT) 95Balance Scale17414254 =SUM(left) 370Breast755726 =SUM(left) 158
2.2.2相似度计算
利用余弦算法分别对输入文本和例句文本的短语类型、短语相对于目标词位置、句法功能的相似度进行计算。
3. 基于PT-GF算法的标注实例
我们以“我县不少单位和个人以私自户外接电等手段偷大肆电。”作为输入文本,经过预处理处理后。
4. 结语
在文中我们基于汉语构架网以法律领域为例分别用PT-GF匹配和最大熵模型对输入文本进行了自动标注。在PT-GF匹配模型中,我们以短语为基本单位根据权重对文本短语的词性、相对
文档评论(0)