基于人工标注的个性化检索系统评测的研讨.pdf

基于人工标注的个性化检索系统评测的研究★ 张宇，范基礼，郑伟，邹博伟，刘挺 哈尔滨工业大学信息检索研究室哈尔滨150001 E-mail：{zhangyu，jlfan,z、v，bwzou,tliu}@ir．hit．edu．ca 摘要：个性化信息柃索可以根据用户的检索兴趣返回个性化的检索结果。本文构建了个性化检索标注系 统和个性化检索评测系统，生成个性化检索系统所需的语料集：并提出了以用户为中心的基于人工标注的 个性化检索评价方法。个性化检索评测系统采用了NIST所建立的评价体系，根据用户的标注结果对个性 化检索系统的性能进行自动评价，并给出量化、直观的性能指标。 关键词：个性化信息检索，以用户为中心，评价方法 Researchon I Evauati on Personal i zedl nformati on of Retri evaI BasedonHandMarki ng Yu Fan，Wei Liu Zhang，Jili Zheng，BoweiZou，Ting InformationRetrieval Institute 5000i Lab，HarbinofTechnology,Harbin．1 E—mail：{zhangyu,jlfan，zw,bwzou,tliu)@ir．hit．edu．ca Abstract：Personalizedinformation retrievalcall theuSerS’retrievalintentionandfind results． grasp personalized A andanevaluationfor IRarebuiltto the for markingsystem systempersonalized corpus generate evaluating IR hand evaluationmethodis inthis personalizedsystem．User-centeredmarking proposedpaper．Evaluation NISTis inthe evaluationcanbeachieved tothe systemprovidedby adoptedevaluation，automatic according results andintuitiveresultscallalsobe thismethod． markingbyusers．Quantify giventhrough lnformation Method． Keywords：PersonalizedRetrieval；User-centered；Evaluation 1 引言 随着网络的发展，Intemet上存在大量不同类型的信息资源，有哪些信誉好的足球投注网站引擎作为网络信息检 索丁具而被人们广泛使用，但是随着网络信息量的增加，面对用户个性化的信息需求，传 统有哪些信誉好的足球投注网站引擎同益显现其不足，具体表现在以下几个方面： (1)大部分有哪些信誉好的足球投注网站引擎是基于关键词匹配的，这种匹配完全是一种机械式的匹配，它既 不能区分关键词的同形异义，也不能联想到相关同义词，更不可能考虑到关键词所处的特 殊语言环境