[常用语料库软件的应用.ppt

* * 双语语料库 常用建库及检索软件的应用 Evaluation only. Created with Aspose.Slides for .NET 3.5 Client Profile 5.2.0.0. Copyright 2004-2011 Aspose Pty Ltd. CONTENTS 语料库的基本特征 语料抽样：理论与抽样操作 语料文本的基本处理：主要处理方式和实现方式 双语语料的对齐：方式和方法 语料检索：基本检索和高级检索(普通、正则和term list) 双语语料检索：基本检索和高级检索 语料数据后续处理：z-score; log-likelihood; factor analysis; correlation; keyness 微型教学语料库的创建和使用 翻译课堂教学用双语语料的制作和应用 Evaluation only. Created with Aspose.Slides for .NET 3.5 Client Profile 5.2.0.0. Copyright 2004-2011 Aspose Pty Ltd. 语料库的基本特征-1 Computer-readable: txt, xml, html, doc, pdf Consistency: his mother; his mother; his\nmother Annotation: 我们_r; 我们/r; 我们r; w pos=“r”我们/w Header: 有关文本的元信息，涉及文本的作者、文体、出版时间等 LANGUAGEChinese/LANGUAGESLEnglish/SLTITLEMeiGuoShi/TITLETRANSWeiYeChou/TRANSCATEGORY1/CATEGORYSTYLE3/STYLEGENREG/GENREPUBLISHERShangwuyinshuguan/PUBLISHERTIME1929/TIMEERAB/ERASIZE23052/SIZE 相对完整的语料文件范本 Evaluation only. Created with Aspose.Slides for .NET 3.5 Client Profile 5.2.0.0. Copyright 2004-2011 Aspose Pty Ltd. 语料库的基本特征-2 语料库可以视为结构合理的语料文件的集合。往往以数据库形式存在（如文件夹）。这是语料库建库工作中最重要的部分，也是最耗时费力的部分。 语料数据库建成之后，就可以从库中提取信息，称为检索。检索效果高低要看能否充分运用检索手段，但最终依赖语料库本身能提供多少可能性。 检索结果的处理需要技巧，事关处理的质量和效率。 Evaluation only. Created with Aspose.Slides for .NET 3.5 Client Profile 5.2.0.0. Copyright 2004-2011 Aspose Pty Ltd. 语料抽样：理论与抽样操作 有代表性、结构合理的语料文本集合，但不是任意搜集的文本数据库，也不是越大越好，而是“finite-sized body of machine-readable text”，语料库通常有抽样框架。一般说来，处于研究的需要，语料宜尽量平衡，这样就不能照单全收，需要考虑从中抽取一部分。抽取多少，如何抽取，这个问题可以说众说纷纭。 Brown/LOB：分层抽样，大小一致；分层抽样如文学中小说占35%，散文占8%，戏剧占2%。2nd generation corpora: The Corpus di Italiano Scritto BNC：大小不一（max：40，000 words）；25%/75%（lit./inf.） ENPC: 40%/60%(non-lit/lit)；S. Johansson Size: 2.6 million words Language: English, Norwegian; Number of texts/samples: 100 orig., 100 transl. Period: 1975–1995 抽样字数及分配 语料取样计算 Evaluation only. Created with Aspose.Slides for .NET 3.5 Client Profile 5.2.0.0. Copyright 2004-2011 Aspose Pty Ltd. 语料文本的基本处理：主要处理方式-1 语料的最常用存储方式是纯文本，纯文本顾名思义就是只有文字，不支持任何其他字符格式，如粗体、斜体、下划线、表格框，等等。语料以这种方式存储占