第十九章 图解(第3节)

4年，谷歌保存的索引数据就已经超过了5pb（1pb=1024tb，1tb＝1024gb）。

有意思的是，谷歌45万台服务器中的大多数都是使用diy配件组装起来的pc（个人电脑）级别的廉价服务器。没有使用性能更稳定，价格更高昂的服务器专用主板和硬盘，而是大量使用个人电脑配件，因此被人戏称是全球diy电脑最大消费者，也是民间用电大户。

当然普通个人电脑配件的稳定性自然没有更加昂贵的服务器配件效果好，因此谷歌使用大量备份镜像，系统会根据各台服务器的负载情况自动分配任务，保证每台可用服务器的负载都在安全范围内，并且及时排除死机出错设备的影响。

谷歌自己设计了gfs/mapreduce/逼gtable/这三个架构在linux之上的平台，将其45万台廉价服务器巧妙的组织起来，构成了这个星球上最强力的超级计算机集群之一。

gfs谷歌文件系统将数十上百亿网页的索引文件集中存放，形成一个个64mb的文件块，通过分级管理，大大简化了海量文件的搜索管理难度。

mapreduce是google开发的c++编程工具，用于大规模数据集的并行运算。它会安排多个计算机同时计算一个任务，一旦一台计算机有了结果，其它计算机就停止该任务，而进入下一任务。因为同时用多台计算机进行一个工作，个别计算机偶尔的宕机出错也就不会影响整体任务的执行了。

至于逼gtable，这是一个用来处理大数据量的系统，适合处理半结构化的数据。

不过谷歌的服务器集群虽然强力，却没有报名参加全球超级计算机top500排名。

每年6月和11月，top500排行榜就会更新一次，目前最新的数据还是去年11月的排名。马竞也曾经去这家国外网站上去瞻仰过这些全世界最快的电脑。et