禁止抓取外链，外链被反复采集的危害
什么是外链？
外链指的是链接的一种，它是指从一个网站指向另一个网站的链接。在 SEO 领域中，外链也被称为反向链接或者过程链接。
为什么要禁止抓取外链？
禁止抓取外链是出于保护网络资源的需要。这是因为，外链属于引用，通过网络来链接和引用他人的信息，可以为读者提供更为多元、更为丰富的知识内容。但是，由于一些不负责任的网站会不断地采集他人的外链，给原始链接网站的服务器带来压力，同时也会对一些公司造成经济损失。
外链被反复采集有什么影响？
网络中的外链一旦被反复采集，就会出现两个主要的影响，其一，会拖慢链接站的速度，这会引起网站链接的延迟和加载速度慢的情况出现。其二，大量的损失会直接导致原始链接的下架与删除，这就会遭受流量的损失。
怎样有效地禁止抓取外链？
禁止抓取外链是通过一些技术手段来解决的。一是通过使用 Robots 协议来禁止搜索引擎的采集，这会告诉其不需要抓取页面中含有链接的内容。二是通过让搜索引擎抓取都需要经过人工审核，这可以有效地阻挡认定不尊重合规的平台进行大量采集。三是通过一些轻重不同的限制方式，例如对 day 量的控制，账号的登录验证以限制其子祖链接等等，限制其提高频率的时间。
总的来说需要注意什么？
为了来避免外链被反复采集，避免恶意账号绕过 Robots 自动来抓取站长设置的参数，请网站在开发好 Robots 协议的制定、对每一个采集者进行独立筛选，并限制其采集频次、使用抗盗链技术防止其它网站盗链等方面进行综合考虑，从而为网站的正常访问和内容管理带来更好的保障。
