技术 SEO 是 SEO 中最重要的部分,但事实并非如此。页面需要可抓取和可索引才有机会获得排名,但与内容和链接相比,许多其他活动的影响微乎其微。
我们编写了这份初学者指南来帮助您了解一些基础知识以及如何最好地利用时间以最大限度地发挥影响力。
第 1 部分
技术 SEO 基础知识 #
什么是技术 SEO? #
技术 SEO 是优化您的网站以帮助搜索引擎查找、抓取、理解和索引您的网页的做法。它有助于提高搜索引擎的可见性和排名。
技术SEO有多复杂? #
视情况而定。基础知识并不难掌握,但技术 SEO 可能很复杂且难以理解。在本指南中,我将尽可能简化内容。
第 2 部分
了解抓取 #
在本章中,我们将介绍如何确保搜索引擎能够有效地抓取您的内容。
爬取的工作原理 #
抓取是指搜索引擎从网页抓取内容,并使用其中的链接查找更多网页。您可以通过多种方式控制网站上抓取的内容。以下是一些选项。
Robots.txt #
robots.txt文件告诉搜索引擎他们可以访问您网站上的哪些地方,以及不能访问哪些地方。 你可知道?
如果有链接指向无法抓取的网页,Google 可能会将其编入索引。这可能会令人困惑,但如果您想阻止网页被编入索引,请查看本指南和流程图,它们可以指导您完成整个过程。
抓取率 #
robots.txt 中有一个 crawl-delay 指令,许多爬虫程序都支持该指令。它允许您设置它们抓取页面的频率。不幸的是,Google 不尊重这一点。[1]对于 Google,您需要在 Google Search Console 中更改抓取率。[2]
访问限制 #
如果您希望某些用户可以访问该页面但不能让搜索引擎访问,那么您可能需要以下三个选项之一:
- 某种登录系统
- HTTP 身份验证(访问时需要密码)
- IP 白名单(仅允许特定 IP 地址访问页面)
这种设置最适合内部网络、会员专属内容或暂存、测试或开发网站。它允许一组用户访问该页面,但搜索引擎将无法访问该页面,也不会将其编入索引。
如何查看抓取活动 #
具体来说,对于 Google 而言,查看其抓取内容的最简单方法是使用Google Search Console 中的“抓取统计信息”报告,该报告可为您提供有关其如何抓取您的网站的更多信息。
如果您想查看网站上的所有抓取活动,则需要访问服务器日志,并可能使用工具来更好地分析数据。这可能相当高级。但如果您的主机有 cPanel 之类的控制面板,您应该可以访问原始日志和一些聚合器,如 AWstats 和 Webalizer。
抓取调整 #
每个网站都有不同的抓取预算,它结合了 Google 希望抓取网站的频率和网站允许的抓取量。更受欢迎的页面和经常更改的页面将被更频繁地抓取,而那些似乎不太受欢迎或链接不太好的页面将被较少地抓取。
如果爬虫程序在爬行您的网站时发现压力迹象,它们通常会减慢速度甚至停止爬行,直到情况改善。
网页被抓取后,会进行渲染并发送到索引。索引是搜索查询可返回的网页主列表。我们来谈谈索引。
第 3 部分
了解索引 #
在本章中,我们将讨论如何确保您的网页已被索引以及检查它们是如何被索引的。
机器人指令 #
robots 元标记是一个 HTML 代码段,用于告诉搜索引擎如何抓取或索引某个页面。它位于网页的 <head> 部分,如下所示:
<meta name="robots" content="noindex" />
规范化 #
当重复内容创建同一页面的多个版本时,Google 会选择一个版本存储在其索引中。此过程称为规范化,被选为规范的 URL 将是 Google 在搜索结果中显示的 URL。它使用许多不同的信号来选择规范 URL,包括:
要查看 Google 如何索引网页,最简单的方法是使用Google Search Console 中的URL 检查工具。它会向您显示 Google 选择的规范 URL。

第 4 部分
技术 SEO 快速取胜 #
对于 SEO 来说,最难的事情之一就是确定优先级。有很多最佳实践,但有些变化对你的排名和流量的影响会比其他变化更大。以下是我建议优先考虑的一些项目。
检查索引 #
确保你希望人们找到的页面可以在 Google 中编入索引。前两章都是关于抓取和索引的,这并非偶然。
您可以查看站点审核中的可索引性报告,以查找无法编入索引的页面及其原因。它在Ahrefs 网站管理员工具中免费提供。

运行免费的技术 SEO 审核 #
对于已验证所有权的网站免费我
在此注册即可免费 使用Ahrefs 网站管理员工具 ↗
恢复丢失的链接 #
网站往往会随着时间的推移而更改其 URL。在许多情况下,这些旧 URL 包含来自其他网站的链接。如果它们没有重定向到当前页面,那么这些链接就会丢失,不再对您的页面有用。现在进行这些重定向还不算太晚,您可以快速恢复任何丢失的价值。可以将此视为您有史以来最快的链接构建。
您可以使用 Ahrefs 的站点资源管理器找到恢复丢失链接的机会。输入您的域名,转到按链接排序的最佳报告,然后添加“404 未找到”HTTP 响应过滤器。我通常按“引荐域”对其进行排序。1800flowers.com
的情况如下:

查看 archive.org 中的第一个 URL,我发现这以前是母亲节页面。通过将该页面重定向到当前版本,您将重新获得来自 59 个不同网站的 225 个链接 – 而且还有更多机会。
我甚至创建了一个脚本来帮助你匹配重定向。不要害怕;你只需要下载几个文件并上传它们。Colab 笔记本会引导你完成这个过程,并为你处理繁重的工作。
您需要将所有旧的 URL通过 301 重定向到其当前位置,以恢复此丢失的价值。你可知道?
301 重定向是永久性重定向。在 Google 看来,任何指向重定向 URL 的链接都将计入新 URL。[3]
添加内部链接 #
内部链接是从您网站上的一个页面链接到您网站上的另一个页面。它们有助于您的页面被找到,也有助于提高页面排名。我们在网站审核中有一个名为“内部链接机会”的工具,可以帮助您快速找到这些机会。
此工具的工作原理是查找您网站上已经排名的关键词。然后,它会建议它们作为上下文内部链接机会。
例如,该工具在我们的重复内容指南中提到了“分面导航”。由于 Site Audit 知道我们有一个关于分面导航的页面,它建议我们向该页面添加内部链接。

添加架构标记 #
架构标记是一种代码,可帮助搜索引擎更好地理解您的内容,并支持许多功能,可帮助您的网站在搜索结果中脱颖而出。Google 有一个搜索库,其中显示了各种搜索功能以及您的网站符合条件所需的架构。
第 5 部分
其他技术 SEO 项目 #
本章中我们将要讨论的项目都是值得关注的好事情,但它们可能需要做更多的工作,而且收益可能比上一部分中的“速赢”项目要少。这并不意味着你不应该做这些项目。这只是为了帮助你了解如何对各种项目进行优先排序。
页面体验信号 #
这些是次要的排名因素,但为了用户着想,您仍然需要考虑。它们涵盖了影响用户体验 (UX) 的网站方面。

核心网络指标 #
核心网页指标是 Google 网页体验信号的一部分,用于衡量用户体验。该指标使用最大内容绘制 (LCP)来衡量视觉负载,使用累积布局偏移 (CLS)来衡量视觉稳定性,使用首次输入延迟 (FID) 来衡量交互性。
HTTPS #
HTTPS可保护您的浏览器和服务器之间的通信,防止其被攻击者拦截和篡改。这为当今绝大多数 WWW 流量提供了机密性、完整性和身份验证。您希望您的页面通过 HTTPS 而不是 HTTP 加载。
任何在地址栏中显示“锁定”图标的网站都使用 HTTPS。

移动友好性 #
简而言之,这会检查网页是否显示正常且是否易于移动设备上的用户使用。
如何知道您的网站对移动设备的友好程度?请查看Google Search Console中的“移动可用性”报告。

此报告将告诉您您的任何页面是否存在移动设备友好性问题。
插页广告 #
插页式广告会阻止用户看到内容。这些弹出窗口会遮盖主要内容,用户可能需要与它们互动才能离开。
Hreflang——适用于多种语言 #
Hreflang是一种 HTML 属性,用于指定网页的语言和地理定位。如果您有同一网页的多个不同语言版本,则可以使用 hreflang 标签将这些变体告知 Google 等搜索引擎。这有助于他们向用户提供正确的版本。
常规维护/网站健康 #
这些任务不太可能对您的排名产生太大影响,但通常对于用户体验来说是一件好事。
链接失效 #
无效链接是指您网站上指向不存在资源的链接。这些链接可以是内部链接(即指向您域上的其他页面),也可以是外部链接(即指向其他域上的页面)。
您可以使用“链接”报告中的“网站审核”快速找到网站上的无效链接。它在Ahrefs 网站管理员工具中是免费的。

重定向链 #
重定向链是在初始 URL 和目标 URL 之间发生的一系列重定向。
您可以使用“重定向”报告中的“网站审核”快速找到您网站上的重定向链。它在Ahrefs 网站管理员工具中是免费的。

第 6 部分
技术 SEO 工具 #
这些工具可以帮助您改善网站的技术方面。
Google 搜索控制台 #

Google Search Console(以前称为 Google Webmaster Tools)是 Google 提供的一项免费服务,可帮助您监控和排除网站在搜索结果中出现的问题。
使用它来查找和修复技术错误、提交站点地图、查看结构化数据问题等。
Bing和Yandex都有自己的版本,Ahrefs 也有。Ahrefs网站管理员工具是一款免费工具,可帮助您提高网站的 SEO 性能。它允许您:
- 监控您网站的 SEO 健康状况。
- 检查 100 多个 SEO 问题。
- 查看所有反向链接。
- 查看所有您排名的关键词。
- 了解您的网页接收了多少流量。
- 寻找内部链接机会。
这是我们对 Google Search Console 局限性的回答。
谷歌的移动友好度测试 #

Google 的移动设备友好度测试可检查访问者在移动设备上使用网页的难易程度。它还可识别特定的移动设备可用性问题,如文本太小而无法阅读、使用不兼容的插件等。
移动设备适合性测试显示 Google 在抓取网页时看到的内容。您还可以使用富媒体搜索结果测试查看 Google 在桌面设备或移动设备上看到的内容。
Chrome 开发者工具 #

Chrome DevTools 是 Chrome 的内置网页调试工具。使用它来调试页面速度问题、提高网页渲染性能等。
从技术 SEO 角度来看,它的用途无穷无尽。
Ahrefs 的 SEO 工具栏 #

Ahrefs 的 SEO Toolbar 是Chrome和Firefox的免费扩展程序,可提供有关您访问的页面和网站的有用 SEO 数据。
其免费功能包括:
- 页面 SEO 报告
- 使用 HTTP 标头重定向跟踪器
- 断开的链接检查器
- 链接高亮器
- SERP 位置
此外,作为 Ahrefs 用户,您还可以获得:
- 您访问的每个网站和页面以及 Google 搜索结果的 SEO 指标
- 直接在 SERP 中显示关键字指标,例如搜索量和关键字难度
- SERP 结果导出
PageSpeed 洞察 #

PageSpeed Insights 会分析您网页的加载速度。除了性能分数外,它还会显示可操作的建议,以加快网页加载速度。
关键要点 #
- 如果您的内容未被索引,那么搜索引擎就找不到它。
- 当出现影响搜索流量的问题时,修复可能是当务之急。但对于大多数网站来说,你最好花时间在内容和链接上。
- 许多影响最大的技术项目都围绕索引或链接。
参考 #
- “Googlebot 是否忽略了抓取延迟规则?”。Google 搜索中心。2017年 12 月 21 日
- “更改 Googlebot 抓取速度”。谷歌。检索日期:2022 年 9 月 9 日
- “30 次重定向不会再丢失 PageRank ”。Gary Illyes。2016年 7 月 26 日
原文:https://ahrefs.com/blog/technical-seo/