如何设计爬虫代理机制？

如何设计一个爬虫代理机制？如何设计一个爬虫代理机制？简介:目标是抓取几十个网站，但其中只有少数几个在某些域名下有反抓取机制。尝试用代理访问，明显比没有代理慢，而且有的IP质量很差。我觉得如果一开始不需要代理就没必要加代理，但是我希望自己的爬虫不要。