基于最大熵模型的QA系统置信度评分算法.pdf

◎2005Journal 1000．9825／2005／16(08)1407 ofSoftware软件学报 V01．16，No．8 基于最大熵模型的QA系统置信度评分算法宰 游 斓+，周雅倩，黄萱菁，吴立德 (复旦大学计算机科学与工程系，上海200433) AMaximumModelBasedConfidence for QA Entropy ScoringAlgorithm YOU Li-De Lan+，ZHOU Ya-Qian，HUANGXuan-Jing，WU Scienceand Fudan (DepartmentofComputer EngineeringUniversity，Shanghai200433，China) 1xt31 author：Phn：+86—2 +Corresponding Received 2004—07··06 2004·-02··25；Accepted You LD．Amaximummodelbasedconfidence for L，Zhou XJ，Wu scoringalgorithmQA． YQ，Huang entropy Journal ofSoftware；2005，16(8)：1407-1414．DOI：10．1360／josl61407 scoredescribeshowconfidenta isaboutits Abstract：Confidence question—answeringsystem totrainanME aMaximumModelbased whichusesseveralfactors model，and paperpresents Entropy algorithm theconfidenceofother ofthismethodhasbeen thentheMEmodelisusedtocalculate questions．Efficiency proved TREC11’s the ofthe hasbeen after the by QAevaluation，whereperformancesystem improveddramatically confidence ranking． words：natural system；maximumentropy Key languageprocessing；informationretrieval；question—answering score model；confidence 摘要： 置信度指的是一个问题回答系统(QA系统)对其所作回答的自信程度．描述了一种基于最大熵模型的算 法．首先，从训练语料中提取若干因素来训练最大熵模型；然后应用训练好的模型在测试集上计算置信度．在2002年 度的文本检索会议(TREc)中，QA系统用该算法计算每个问题答案的置信度，并依此排序，获得了显著的成绩．