因为在爬虫时，如果使用了默认的IP 可能导致自己的IP遭到封禁 所以就要隐藏自己的IP 事先说明 爬虫要有度 也要考虑服务器的压力 本篇基于win10 tor
分类：搜索推荐
搜索引擎的三个目标和三个核心问题
三个目标： 1、更全 “更全”是从搜索引擎所索引的网页数量的角度来说的，数据显示，目前能够搜索到的数据大概只有信息量的千分之二，因此，对于“暗网”的抓取需要在“爬虫”上下功夫。 2、更快 “更快
因为在爬虫时，如果使用了默认的IP 可能导致自己的IP遭到封禁 所以就要隐藏自己的IP 事先说明 爬虫要有度 也要考虑服务器的压力 本篇基于win10 tor
三个目标： 1、更全 “更全”是从搜索引擎所索引的网页数量的角度来说的，数据显示，目前能够搜索到的数据大概只有信息量的千分之二，因此，对于“暗网”的抓取需要在“爬虫”上下功夫。 2、更快 “更快