01搜索引擎使用被称为“网络爬虫”的程序来抓取网页上的所有链接。由于互联网的特性，大多数Web页面都可以通过其他页面的链接得到访问。自有限的少数Web页面出发，网络爬虫可以访