宗成庆--自然语言处理--第一章-绪论.ppt

Company Logo 1.3 自然语言理解研究的基本方法及其发展 1.3.2自然语言理解的发展 －萌芽期：1946年世界上第一台计算机出现，自然语言理解的研究起始于机器翻译。 －发展期：自1966年美国自动语言处理咨询委员会(ALPAC) 提出ALPAC报告。研究重点转写其它分支：人机接口、对话系统、信息检索等。基本方法：基于规则分析方法。 －繁荣期：自20世纪80年代末期以后，基于语料库的统计方法引入自然语言处理。 Company Logo 1.3 自然语言理解研究的基本方法及其发展 1.3.2 自然语言理解的发展 在20世纪80年代末期和90年代初期，曾经引发了关于理性主义和经验主义两种不同的观点的激烈争论。但随着时间的推移，当人们从哪些空泛的辩论中冷静下来以后，逐渐地认识到，无论是理性主义也好，还是经验主义也罢，任何一种方法都不可能完全解决自然语言处理这一复杂问题，只有将两种方法很好的结合起来，甚至建立一种新的理论方法才是自然语言处理研究的真正出路。 Company Logo 1.3 自然语言理解研究的基本方法及其发展 1.3.2自然语言理解的发展 理性主义方法与经验主义方法的融合 符号智能＋ 计算智能 理性主义研究方法— 符号处理系统 经验主义研究方法— 基于语言数据的计算方法 理性主义与经验主义的合谋— 融合方法 Company Logo 1.4 自然语言理解的研究现状 基本研究现状 （1）很多技术已经达到或基本达到实用程度，并在实际应用中发挥着巨大作用。 －文字处理器 －文字输入 －网络有哪些信誉好的足球投注网站引擎 －辅助翻译、电子词典 －语音合成 …… Company Logo 1.4 自然语言理解的研究现状 基本研究现状 （2）许多新的研究方向不断出现 －网络内容管理、信息监控、有害信息过滤等 －语音文摘生成 （3）许多理论问题尚未得到根本解决。 －语义的形式化问题。 －与计算问题。 －句法分析问题 －指代歧义消解问题。 Company Logo 相关网站 刘群个人空间 /~liuqun/index_zh.htm 中文自然语言处理开放平台 / Company Logo LOGO 第一章 绪论 统计自然语言处理 Company Logo 第一章 绪论 基 本 概 念 1 自然语言处理研究的内容和面临的困难 2 自然语言处理的基本方法及其发展 3 自然语言处理的研究现状 4 Company Logo 第一章 绪论 以色列的“巴比通天塔”纪念币 Company Logo 第一章 绪论 以色列的“巴比通天塔”纪念币 “圣经故事”系列是以色列纪念币发行中的延续性项目之一。今年发行的是第七套，它选取的题材为招致上帝愤怒的“巴比通天塔”。 《旧约·创世纪》第11章讲述了“通天塔”的故事。很久很久以前，天下的人都居住在一个叫做古巴比伦的地方，那时候人们都使用同一种语言。后来，古巴比伦人计划修建一座塔，塔顶要高耸入云，直达天庭，以显示人们的团结和力量。塔越建越高，惊动了天庭的耶和华。他想，现在天下的人都是一个民族，都说一种语言，他们团结一致，什么奇迹都可以创造，那神还怎么去统治人类？于是上帝便决定要惩罚惩罚人类。他施魔法变乱了人们的口音，使他们无法沟通，高塔因此无法继续建造下去。最后，上帝还把人类驱散到地球的各个角落。 ——摘自中国金币网（/）  Company Logo 第一章 绪论 计算机发明以来，人类首先想到的计算机的应用之一，就是自动翻译。然而时至今日，计算机处理自然语言的能力在大多数情况下都不能满足人类社会信息化时代的要求。有关专家指出，语言障碍已经成为制约21世纪社会全球化发展的一个重要因素。 因此，如何尽早实现自然语言的有效理解，打破不同语言之间的固有壁垒，已经成为备受人们关注的极具挑战力的国际前沿研究课题。 Company Logo 1.1 基本概念 1.1.1 语言学和语音学； 语言学(linguistics) 是指对语言的科学研究。作为一门纯理论的学科，语言学在近期获得了快速发展，尤其从上个世纪60年代起，已经成为一门知晓度很高的广泛教授的学科。 包括：历时语言学（diachronic linguistics）（或称历史语言学（historical linguistics））和共时语言学（synchronic linguistics）、描述语言学（descriptive linguistics）、对比语言学（contrastive linguistics）、结构语言学（structural linguistics）等等。 Company Logo 1.1 基本概念 1.1.1 语言学和语音学； 语音学(ph