我们如何在 Google 中打击搜索垃圾内容（2020）

星期四，四月 29，2021

Google 搜索是一款强大的工具，可帮助你在开放的网络上找到实用信息。遗憾的是，并非所有网页都是出于善意而创建的。许多网页就是为了欺骗人们而专门创建的，而这是我们每天都在努力打击的问题。为了确保你的安全，并保护你的搜索体验免受干扰性内容和恶意行为的影响，Search 在 2020 年投入了许多创新。

更智能地打击垃圾内容

尽管从 Search 早期开始，我们就一直在打击垃圾内容，但近期人工智能（AI）的进展为彻底改变我们的应对方式带来了前所未有的潜力。

通过将我们对垃圾内容的深入了解与 AI 相结合，去年我们得以打造自己的垃圾内容打击 AI，它能够极其有效地识别已知和新出现的垃圾内容趋势。例如，与几年前相比，我们已将自动生成内容和抓取内容的网站数量减少了百分之 80 以上。

2020 年，遭黑客入侵网站上的垃圾内容仍然十分猖獗，因为存在漏洞的网站数量依然相当庞大，不过我们的检测能力已提升了百分之 50 以上，并从搜索结果中移除了大部分遭黑客入侵网站上的垃圾内容。

这是一个我们无法独自解决的问题。即使我们能够检测并防范所有垃圾信息，黑客也不会停止利用漏洞，直到所有漏洞都被堵上。网站所有者可以通过养成良好的安全习惯来保护网站：预防网站遭到黑客攻击，比遭到攻击后再恢复要容易。Google 提供了一些资源，帮助你了解网站遭到黑客攻击的最常见方式，以及如何使用 Search Console 检查你的网站是否遭到黑客攻击。请务必查看这些资源，让我们携手共建更安全的网络！

去年发生了包括全球疫情在内的重大事件，我们投入了大量精力，为我们在这些重要主题上收到的数十亿次搜索提供保护。如果你想找附近的 COVID 检测点，就不应该担心会进入语无伦次的垃圾信息页面，进而被重定向到钓鱼网站。除了清除垃圾内容之外，我们还与其他几个搜索团队合作，确保在最重要的时间和地点，为你提供最新、质量最高的信息。

防止垃圾信息触达你

在 Google 向你呈现一组搜索结果之前，幕后会发生许多事情。我们每天都在发现、抓取并编入索引数十亿个网页。在这些网页中，有许多是垃圾信息——我们每天都会发现 40 十亿个垃圾网页。以下是我们防止这些垃圾信息妨碍你搜索有用信息的方式。

这张图示意了我们如何防范垃圾信息。

首先，我们有一些系统能够在抓取网页或其他内容时检测垃圾信息。抓取是指我们的自动化系统访问内容，并判断是否将其纳入用于提供搜索结果的索引。检测为垃圾信息的部分内容不会被加入索引。

这些系统也适用于我们通过站点地图和 Search Console 发现的内容。例如，Search Console 提供了“请求编入索引”功能，创作者可以借此告知我们有新的网页需要尽快添加。我们发现，垃圾信息发布者会入侵存在漏洞的网站，冒充网站所有者，在 Search Console 中验证身份，并使用该工具请求 Google 抓取并编入索引他们创建的大量垃圾网页。借助 AI，我们能够精准识别可疑的验证操作，并以此防止垃圾网址进入我们的索引。

接下来，我们有一些系统用于分析已纳入我们索引的内容。当你发起搜索时，这些系统会进一步核查与搜索匹配的内容是否可能是垃圾信息。如果是，这些内容就不会出现在搜索结果的前列。我们也会利用这些信息进一步改进系统，从源头上防止此类垃圾信息被纳入索引。

得益于 AI 辅助的自动化系统，实际进入用户搜索结果前列的垃圾信息非常少。我们估计，这些自动化系统帮助确保超过 99% 的 Google 搜索访问完全不受垃圾信息影响。对于剩余的极小比例，我们的团队会采取人工措施，并利用从中获得的经验进一步改进自动化系统。

在垃圾信息之外保护你

除了垃圾信息之外，我们还在 2020 扩大了相关工作，以保护你免受其他类型的滥用。这些滥用行为中，有许多可能造成严重的经济和个人伤害。

在 2020，我们在提升覆盖范围、保护更多用户免受网络诈骗和欺诈方面取得了重大进展。网络诈骗形式多样，造成的负面影响可能比传统网络垃圾内容更为严重。例如，许多诈骗者冒充热门服务和产品的客户支持服务，声称提供客服电话号码，诱骗拨打电话的用户通过银行转账或礼品卡向他们付款。这类骗局通常被称为“客户支持诈骗”或“技术支持诈骗”，已有数十万用户报告遭遇此类骗局，每起案件中用户都可能损失数百美元。

自 2018 以来，我们的系统每年能够通过检测疑似诈骗网站，保护数亿次搜索。网络诈骗者试图创建许多低质量网站，堆砌关键词，使用他们仿冒的品牌标志，并放上一个希望你拨打的电话号码。我们的算法解决方案确保诈骗和欺诈内容极不可能出现在你的搜索结果中。这只是我们去年推出的几种保护措施之一，旨在确保搜索结果的质量和你的安全。我们的使命是预先应对各种挑战，为你提供最值得信赖的结果。同时，你也可以通过了解相关信息和学习识别骗局，更好地保护自己。

人工智能的进步极大助益于我们理解网站内容，这是另一个方面。例如，我们帮助改进了产品评论类、信息类和购物类网站的排名方式。Google 搜索是购买前研究和查找产品的好方法，我们希望通过优先展示经过更深入研究且包含实用信息的内容，确保你能为下一次购买获得最有用的信息。

尽管我们在打击垃圾内容方面取得了重大进展，垃圾内容发送者仍有很强的动机开发能够逃过我们检测的新技术。我们一直在努力改进，保护人们免受新型滥用行为的侵害，外部报告也能提供帮助。你最近使用 Search 时，是否有过感到被误导、被骗或遭遇垃圾内容的经历，并认为我们可以做得更好，避免这类情况？如果有，请通过垃圾内容举报表单提交反馈，并附上搜索查询以及其他可能有用的信息。

作者：首席工程师 Cody Kwok