从哪能看出来蜘蛛来过网站，都抓取了哪些内容？

哪里能看出蜘蛛去过网站，抓取了什么内容？哪里能看出蜘蛛去过网站，抓取了什么内容？简介: ltp gt ltstrong gt九问九答说: ltp gt日志里有抓取记录，可以分析一下