FackleBot 是由 fackle.com 平台运营的网络爬虫。本页面向网站运营者说明其身份和行为。

身份

用户代理
FackleBot/1.0 (+https://fackle.com/bot)
运营者
Aaron Thomas,fackle.com 的运营者
来源 IP
51.81.78.30(反向 DNS crawler.fackle.com
身份验证
请求使用 Web Bot Auth(HTTP 消息签名,Ed25519)进行签名。密钥目录:https://fackle.com/.well-known/http-message-signatures-directory

目的

FackleBot 是一个元数据索引器。它仅从每个已爬取的页面收集主页级别的元数据:页面标题、meta 描述、Open Graph 标签(og:title、og:description、og:image)、页面语言和网站图标 URL,其中标题和描述以简短摘要形式存储。仅对已验证为其运营者所有的域名执行更深入的多页面索引。它不会收集页面正文内容、个人数据,也不会收集网站图标引用之外的媒体内容。

爬取行为

  • 遵守 robots.txt
  • 低流量:最多 1–2 个并发连接,大约每两秒一个请求,通常每周对每个外部站点发起一次主页请求。
  • 广泛但浅层:对大多数域名仅爬取主页;深度爬取仅限于所有权已验证的域名。

联系方式

有关 FackleBot 活动的问题或请求:admin@fackle.com