数学科普资料：谷歌如何从网络的大海里捞到针.doc

谷歌如何从网络的大海里捞到针 David Austin 关键词：?谷歌，有哪些信誉好的足球投注网站，随机矩阵，特征值 想象一个含有250亿份文件，却没有集中管理机构和馆员的图书馆，而且任何人都可以在任何时间添加新的文件而不需要通知其他人。一方面你可以确定，这庞大的文件堆中有一份文件含有对你至关重要的信息，而另一方面，你又像我们中的大多数人那样没有耐心，想要在几秒钟之内就找到这条信息。你有什么办法呢？ 摆在你面前的这个难题看起来似乎无法解决。而这个文件堆跟万维网（World Wide Web）其实相差无几，后者就是一个超大的、高度混乱的以各种形式存放的文件堆。当然，从万维网中找信息我们有办法解决，因为我们对有哪些信誉好的足球投注网站引擎非常熟悉（或许你就是通过有哪些信誉好的足球投注网站找到这篇文章的）。本文将介绍谷歌的网页排序算法（PageRank Algorithm），以及它如何从250亿份网页中捞到与你的有哪些信誉好的足球投注网站条件匹配的结果。它的匹配效果如此之好，以至于“谷歌”（google）今天已经成为一个被广泛使用的动词了。 包括谷歌在内，多数有哪些信誉好的足球投注网站引擎都是不断地运行计算机程序群，来检索网络上的网页、有哪些信誉好的足球投注网站每份文件中的词语并且将相关信息以高效的形式进行存储。每当用户检索一个短语，例如“有哪些信誉好的足球投注网站引擎”，有哪些信誉好的足球投注网站引擎就将找出所有含有被检索短语的网页。（或许，类似“有哪些信誉好的足球投注网站”与“引擎”之间的距离这样的额外信息都被会考虑在内。）但问题是，谷歌现在需要检索250亿个页面，而这些页面上大约95%的文本仅由大约一万个单词组成。也就是说，对于大多数有哪些信誉好的足球投注网站而言，将会有超级多的网页含有有哪些信誉好的足球投注网站短语中的单词。我们所需要的其实是这样一种办法，它能够将这些符合有哪些信誉好的足球投注网站条件的网页按照重要程度进行排序，这样才能够将最重要的页面排在最上面。 确定网页重要性的一个方法是使用人为排序。例如，你或许见过这样一些网页，他们包含了大量的链接，后者连接到某个特定兴趣领域的其他资源。假定维护这个网页的人是可靠的，那么他推荐的网页在很大程度上就可能有用。当然，这种做法也有其局限性，比如这个列表可能很快就过期了，也可能维护这个列表的人会无意或因某种未知的偏见而遗漏掉一些重要的网页。 谷歌的网页排序算法则不借助人为的内容评估来确定网页的重要性。事实上，谷歌发现，它的服务的价值很大程度上是它能够提供给用户无偏见的有哪些信誉好的足球投注网站结果。谷歌声称，“我们软件的核心就是网页排序（PageRank）。” 正如我们将要看到的，技巧就是让网页自身按照重要性进行排序。 如何辨别谁重要 如果你曾建立过一个网页，你应该会列入一些你感兴趣的链接，它们很容易使你点击到其它含有重要、可靠信息的网页。这样就相当于你肯定了你所链接页面的重要性。谷歌的网页排序算法每月在所有网页中进行一次受欢迎程度的评估，以确定哪些网页最重要。网页排序算法的提出者，谢尔盖?布林(Sergey Brin)和拉里?佩奇(Lawrence Page)的基本想法是：一个网页的重要性是由链接到它的其他网页的数量及其重要性来决定。 我们对任意一个网页P，以I(P)来表述其重要性，并称之为网页的网页排序。在很多网站，你可以找到一个近似的网页排序值。（例如，美国数学会的首页目前的网页排序值为8，最高分是10。你可以试试找到一个网页排序值为10的网页吗？）这个网页排序值仅是一个近似值，因为谷歌拒绝提供真实的网页排序值，以阻止那些试图干扰排序的行为。 网页排序是这样确定的。假定网页Pj有lj个链接。如果这些链接中的一个链接到网页Pi，那么网页Pj将会将其重要性的1/lj赋给Pi。网页Pi的重要性就是所有指向这个网页的其他网页所贡献的重要性的加和。换言之，如果我们记链接到网页Pi的网页集合为Bi，那么 I(Pi)=∑Pj∈BiI(Pj)lj. 这或许让你想起“先有鸡还是先有蛋”的问题：为了确定一个网页的重要性，我们首先得知道所有指向它的其他网页的重要性。然而，我们可将这个问题改写为一个更数学化的问题。 首先建立一个矩阵，称为超链矩阵（hyperlink matrix），H=[Hij]，其中第i行第j列的元素为 Hij=???1lj?0如果Pj∈Bi上述条件不成立. 注意到H有一些特殊的性质。首先，它所有的元都是非负的。其次，除非对应这一列的网页没有任何链接，它的每一列的和为1。所有元均非负且列和为1的矩阵称为随机矩阵，随机矩阵将在下述内容中起到重要作用。 我们还需要定义向量I=[I(Pi)]，它的元素为所有网页的网页排序——重要性的排序值。前面定义的网页排序可以表述为 I=HI. 换言之，向量I是矩阵H对应特征值1的特征向量。我们也称之为矩阵H的平稳向量（stationary vector）。 让我们来看一个例子。下图所示为一个网页集合（8个），箭头表示链接。 其相应的矩阵为 这说明网页8的受欢迎程度最高。下图是阴影化的图，其中网页排序值越高的网页阴影越浅。 计