本出版物最后由way2time于2018-4-2608:24编辑。
许多人建立了CDN来源。这允许一些蜘蛛直接从源站点获取数据。
这样做的好处是它保证了蜘蛛网站内容的稳定性并有利于数据恢复。
但是,这样做有一些缺点。
1
如果服务器不好并且网站内容配置不正确,则蜘蛛爬行时间会很慢。
2
什么蜘蛛返回源头?
它不是公共数据,而是每个CDN公司建立的机制。假蜘蛛可以直接找到Web服务器的实际地址并发起一些攻击。它将是主机服务器上的负载。
3
跟踪蜘蛛主要取决于您网站的网页是否开放,快速且链接内容是否稳定。它会影响抓取吗?如果这些不是问题并返回源头,那么该人认为对SEO的负面影响是有限的。
不返回源的优点是启动CDN服务器的一些负载和风险并减少跟踪时间。如果主机不执行gzip压缩,则CDN有助于压缩起始页面,从而加快蜘蛛爬行速度。
---
欢迎个人无知,探索。