A AumCreate 模板、免费插件、AI 工具与定制开发

wordpress · 2026/11/4 · 更新于 2026/11/4

AumCrawl 不扫描死链:WordPress 404 清单导出与批量 301 完整方法

许多站长误以为 AumCrawl 插件能扫描全站死链并导出 404 清单。实际上 AumCrawl 用于记录 AI 抓取工具请求和配置 crawler 访问规则。本文梳理 AumCrawl 真实功能,并给出 WordPress 下导出 404 清单与批量 301 的可行步骤。

WordPress 后台批量 301 重定向导入 CSV 示意图
图片来源:Pexels / Markus Winkler

摘要

AumCrawl 是记录 AI 抓取工具请求的 WordPress 插件,不负责扫描全站死链。本文说明如何用通用方法导出 404 清单并批量创建 301 重定向。

很多 WordPress 站长在查找 AumCrawl 插件时,会期待它能扫描全站死链并导出 404 清单,然后批量 301。但根据 AumCreate 官方目录,AumCrawl 的定位并不是死链扫描工具。本文先澄清 AumCrawl 的实际用途,再给出在 WordPress 中实现 404 清单导出与批量 301 的通用方法。

AumCrawl 的真实功能:不是死链扫描工具

AumCrawl 是一款免费的 WordPress 插件,可在 WordPress.org 插件目录获取。它的核心能力是:

  • 记录已识别 AI 抓取工具的请求;
  • 为支持的 crawler user-agent 配置访问规则。

换句话说,它关注的是 AI 爬虫(如 GPTBot、ClaudeBot 等)对网站的访问行为,以及站长对这些爬虫的允许或禁止策略,而不是常规用户访问产生的 404 错误。

为什么不能用 AumCrawl 导出 404 清单

AumCrawl 不解析页面链接,不检查响应状态码,也不维护 404 日志。因此它无法回答“全站有多少死链”“哪些页面返回 404”“这些死链从哪里被链接”这类问题。如果你需要的是死链审计,AumCrawl 不是合适的工具。

全站死链扫描的替代方案

要获得全站 404 清单,通常有两种思路:使用独立爬虫工具,或在 WordPress 内部记录 404 请求。

使用爬虫工具扫描 404

专业爬虫(如 Screaming Frog、Sitebulb 或类似工具)可以遍历整个站点,收集每个内部链接的响应状态码。筛选出状态码为 404 的 URL,即可得到完整的死链清单。这些工具通常支持导出为 CSV,包含源页面、目标 URL、状态码等字段。

使用重定向插件记录 404

WordPress 中有许多支持 404 日志的重定向插件。安装后,每当访问者或爬虫触发 404,插件会记录请求的 URL、来源页面和时间。积累一段时间后,你可以在插件后台导出这些日志为 CSV。这种方式更贴近真实用户行为,但可能无法覆盖未被访问的死链。

导出 404 清单为 CSV

无论采用哪种方法,最终你都需要一份结构化的 404 清单。CSV 至少应包含两列:旧 URL(404 的路径)和目标 URL(要重定向到的有效页面)。如果数据来自爬虫工具,还可以包含来源页面,帮助你判断是否需要保留链接或修改锚文本。

批量创建 301 重定向

拿到 CSV 后,批量 301 主要有两种方式。

导入 CSV 映射

许多重定向插件支持 CSV 导入。将“旧 URL”和“目标 URL”两列映射到插件的导入字段,即可一次性创建大量 301 规则。导入前建议抽查几条,确认路径格式正确(建议使用相对路径,避免域名变化导致失效)。

使用正则批量规则

如果死链存在规律(例如旧的分类结构 /category/xxx 迁移到 /blog/xxx),可以使用正则表达式创建一条规则,覆盖所有匹配的 URL。这种方式更高效,但需要谨慎测试,避免误伤正常页面。

验证与持续监控

批量 301 后,务必抽查旧 URL 是否返回 301 状态码,并确认目标页面返回 200。可以借助浏览器开发者工具或在线状态码检查服务进行验证。另外,AumCreate 提供免费的 网站技术体检 工具,可以快速检查网站首页的 HTTPS、搜索引擎声明、移动端视口、联系入口和 AI 爬虫规则,但该工具不进行全站死链扫描。

AumCreate 相关资源

如果你在使用 WordPress 过程中还需要管理 SEO 和 AI 可见性相关的元数据,可以关注 AumViso;如果需要围绕网站进行 GEO 技术设置,AumCreate 也提供固定价格的 WordPress 网站 GEO 技术设置服务。但请注意,死链扫描与 301 重定向不属于这些工具或服务的主要范围。

FAQ

AumCrawl 能扫描全站死链吗?

不能。AumCrawl 用于记录 AI 抓取工具的请求,并为支持的 crawler user-agent 配置访问规则,不提供死链扫描、404 日志或重定向功能。

如何批量导出 WordPress 的 404 清单?

可以使用专业爬虫工具遍历全站并导出状态码为 404 的 URL 列表,也可以安装支持 404 日志的重定向插件,记录前端 404 请求后导出为 CSV。

批量 301 重定向怎么操作?

在支持 CSV 导入的重定向插件中,将包含旧 URL 和目标 URL 的 CSV 文件导入,即可批量创建 301 规则;也可对规律性 URL 使用正则表达式批量处理。

AumCreate 有检查网站死链的免费工具吗?

AumCreate 的免费工具“网站技术体检”只检查公开首页和标准文件,不扫描全站死链。它用于检查 HTTPS、搜索引擎声明、移动端视口、联系入口和 AI 爬虫规则。

AumCrawl 是免费的吗?在哪里下载?

AumCrawl 是免费插件,可在 WordPress.org 插件目录获取(https://wordpress.org/plugins/aumcrawl/)。

相关文章

相关项目:AumCreate 项目记录