ExtLinksBot

ExtLinksBot是一个由维基百科（Wikipedia）自动编辑程序使用的网络爬虫，它用于检查和更新维基百科条目中的外部链接。维基百科允许编辑者在条目中添加外部链接以提供更多相关信息，而ExtLinksBot会定期访问这些链接，检查其有效性并更新维基百科上的链接状态信息。

这个爬虫的作用在于帮助维基百科保持其条目中的外部链接是有效的和可靠的。通过定期检查这些链接，ExtLinksBot可以帮助维基百科确保其内容的质量和准确性，同时也使读者能够访问到真实可靠的信息。

不过对于国内网站来说不会带来什么流量，可以选择robots.txt协议禁止。

User-agent: ExtLinksBot

Disallow: /