请问如何爬取某网站上的所有url链接呢？比如163网站的

请问如何抓取一个网站的所有网址链接？比如163网站，如何抓取一个网站的所有url链接？比如163网站的介绍:比如你想获取网易首页所有的url链接，广告不算。 如果能获得二级链接就更好了。 它是某个链接被点进去之后，新页面中的链接。可以拿到3级。 请问有大神做过类似的事情吗？大意是什么？