全网搜索引擎（百度，google类似的技术上怎么实现）

全网搜索引擎(百度、谷歌及类似技术)介绍:像百度、谷歌这样的全网搜索引擎是如何搜索未知网站的？比如我现在在上面放了一个网站，每小时更新一次。 百度、谷歌抓取解决方案的方式是: