爬虫如何只爬取更新数据

如何抓取只更新数据如何抓取只更新数据简介:目前爬虫已经实现了爬虫指定内容的信息，但是遇到了数据更新的问题。 因为要抓取的信息是实时的，所以会不定期更新。但是爬虫目前是定点抓取整个站点，这就给更新的数据存储带来了一个问题，就是如何只更新新的数据。