牛牛在线工具

RepoLookoutBot

收录 76 种搜索引擎蜘蛛(爬虫)的 UserAgent 与说明。

RepoLookoutBot

RepoLookout蜘蛛

RepoLookoutBot 是一个 GitHub 机器人,用于监视 GitHub 仓库中的活动并提供相关的通知。它不是传统意义上的网络爬虫,而是一个自动化程序,可以帮助用户跟踪他们关注的 GitHub 仓库,并在有新的活动时发送通知。 RepoLookoutBot 可以监视仓库的提交、问题、拉取请求等活动,并根据用户的设置向他们发送通知。这有助于开发人员和团队及时了解其关注的仓库的最新动态,以便更好地进行协作和开发工作。 不过对于国内网站来说不会带来什么流量,可以选择robots.txt协议禁止。 User-agent: RepoLookoutBot Disallow: / 如果还是禁止不了,可以选择nginx规则禁止访问,如下: if ($http_user_agent ~* "RepoLookoutBot") { return 403; }