21, Апр 2022
Как мы боролись с поисковым спамом в Google в 2021 году | Центральный блог поиска Google | Разработчики Google


Четверг, 21 апреля 2022 г.

В 2021 году мир искал как вылечиться и как вернуться сильнее. Чтобы помочь людям находить полезную информацию по большим и малым вопросам, мы старались не допускать спама и вредоносного контента в Поиск.

SpamBrain: наше самое эффективное решение против спама

В 2021 году мы обнаружили в 200 раз больше сайтов со спамом по сравнению с тем, когда мы впервые начали почти два десятилетия назад, отчасти благодаря нашей системе предотвращения спама на основе искусственного интеллекта под названием SpamBrain.

мультяшное изображение SpamBrain, на котором робот Googlebot просматривает страницу

SpamBrain был запущен в 2018 году, и мы постоянно улучшаем его производительность. В 2021 году SpamBrain обнаружил почти в шесть раз больше спам-сайтов, чем в 2020 году. Это привело к значительному сокращению взломанного спама (70%), который был типом спама, обычно наблюдаемого в 2020 году, и тарабарского спама на хостинговых платформах (75%). Еще одна примечательная особенность SpamBrain заключается в том, что она создавалась как надежная и развивающаяся платформа для борьбы со всеми типами злоупотреблений.

В связи с растущим объемом изощренного спама, производимого каждый день, способность SpamBrain выявлять разрушительное и злонамеренное поведение среди миллиардов веб-страниц позволила нам обеспечить отсутствие спама в более чем 99% поисковых запросов.

Защита качества поиска и безопасности пользователей

В 2021 году мы добились значительного прогресса в нескольких областях помимо традиционного веб-спама: в первую очередь в борьбе со спамом со ссылками, мошенничеством и онлайн-домогательствами.

Ссылки по-прежнему помогают нам находить и ранжировать результаты, и в 2021 году мы добились значительного прогресса в защите этого основного сигнала. Мы запустили обновление для защиты от ссылочного спама, чтобы выявить неестественные ссылки и предотвратить их влияние на качество поиска.

Мошенничество – это большая угроза безопасности онлайн-пользователей. Расширяя нашу работу в 2020 году, мы запустили несколько обновлений алгоритма, что привело к сокращению результатов мошенничества на 40%. Улучшение охвата позволило нам защитить людей от многих других видов мошенничества, помимо запросов в службу поддержки, с которыми мы боролись в течение последних нескольких лет.

Чтобы обеспечить безопасность пользователей, мы расширили SpamBrain до бороться с домогательствами в Интернете и, для запросов имени, уменьшить известность сайтов с эксплуататорскими методами удаления.

Уменьшение последствий манипулирования рейтингом

Помимо спама, мы также прилагаем все усилия, чтобы сократить низкокачественный контент и манипуляции с ранжированием, борясь с поведением, которое пытается избежать нарушения наших рекомендаций по качеству, но по-прежнему носит манипулятивный характер и ухудшает взаимодействие с пользователем.

Например, одним из аспектов этой инициативы было улучшение ранжирования запросов на обзоры продуктов, где контент часто состоял из переписанных описаний продуктов, а не из реальных практических обзоров. В 2021 году мы внесли два существенных обновления в то, как мы оцениваем отзывы о продуктах, что привело к значительному сокращению некачественных отзывов и продвижению отзывов с лучшим содержанием и опытом.

Мы хотим, чтобы ничто не мешало людям находить наиболее полезный контент через Поиск. Если вы видите манипулятивное поведение в результатах поиска, вы можете отправить нам отзыв прямо на странице результатов поиска.



Source link

29, Апр 2021
Как мы боролись с поисковым спамом в Google в 2020 году | Центральный блог поиска Google | Разработчики Google


Четверг, 29 апреля 2021 г.

Поиск Google — это мощный инструмент, который поможет вам найти полезную информацию в открытом Интернете. К сожалению, не все веб-страницы создаются с благими намерениями. Многие из них специально созданы для того, чтобы обманывать людей, и с этим мы боремся каждый день. Чтобы обеспечить вашу безопасность и защитить ваш поиск от вредоносного контента и злонамеренного поведения, в 2020 году Поиск внедрил множество инноваций.

Борьба со спамом умнее

Пока мы были борьба со спамом с первых дней поиска, последние достижения в области искусственного интеллекта (ИИ) предлагают беспрецедентный потенциал для революционного изменения нашего подхода.

Объединив наши глубокие знания о спаме с ИИ, в прошлом году мы смогли создать собственный ИИ для борьбы со спамом, который невероятно эффективно улавливает как известные, так и новые спам-тенденции. Например, мы сократили количество сайтов с автоматически сгенерированным и извлеченным контентом более чем на 80% по сравнению с парой лет назад.

В 2020 году взломанный спам по-прежнему процветал, поскольку количество уязвимых веб-сайтов оставалось довольно большим, хотя мы улучшили наши возможности обнаружения более чем на 50% и удалена большая часть взломанного спама из результатов поиска.

Это проблема, которую мы не можем решить в одиночку. Даже если бы мы могли обнаружить и защитить от всего спама, хакеры не перестанут использовать лазейки, пока они все не будут закрыты. Владельцы веб-сайтов могут защитить свои сайты, соблюдая правила безопасности: легче предотвратить взлом сайта, чем восстановиться после взлома. Google предлагает ресурсы, которые помогут вам понять наиболее распространенные способы взлома веб-сайтов и узнать, как использовать консоль поиска, чтобы проверить, был ли взломан ваш сайт. Пожалуйста, взгляните, и давайте сделаем Интернет безопаснее вместе!

В связи с крупными событиями прошлого года, включая глобальную пандемию, мы приложили значительные усилия для расширения защиты миллиардов поисковых запросов, которые мы получили по таким важным темам. Если вы ищете ближайший к вам сайт тестирования на COVID, вам не нужно беспокоиться о том, что вы попадете на тарабарщину со спамом, который может перенаправить вас на фишинговые сайты. Помимо устранения спама, мы работали с несколькими другими поисковыми командами, чтобы убедиться, что вы получаете самую актуальную и высококачественную информацию, когда и где это наиболее важно.

Предотвращение попадания спама к вам

Прежде чем мы предоставим набор результатов поиска в Google, много чего происходит за кулисами. Каждый день мы обнаруживаем, сканируем и индексируем миллиарды веб-страниц. Среди этих страниц много спама — каждый день мы обнаруживаем 40 миллиардов страниц со спамом. Вот как мы работаем, чтобы этот спам не мешал вам искать полезную и полезную информацию.

как мы защищаемся от спама на каждом этапе
На этой диаграмме показано, как мы защищаемся от спама.

Во-первых, у нас есть системы, которые могут обнаруживать спам при сканировании страниц или другого контента. Сканирование — это когда наши автоматические системы посещают контент и рассматривают его для включения в индекс, который мы используем для предоставления результатов поиска. Некоторый контент, определенный как спам, не добавляется в индекс.

Эти системы также работают с контентом, который мы обнаруживаем с помощью карт сайта и Консоль поиска. Например, в Search Console есть функция запроса индексации, поэтому создатели могут сообщать нам о новых страницах, которые следует быстро добавлять. Мы наблюдали, как спамеры взламывали уязвимые сайты, выдавали себя за владельцев этих сайтов, подтверждали себя в Search Console и использовали этот инструмент, чтобы просить Google просканировать и проиндексировать множество спам-страниц, которые они создали. Используя искусственный интеллект, мы смогли точно определить подозрительные проверки и таким образом предотвратили попадание спам-адресов в наш индекс.

Далее у нас есть системы, которые анализируют контент, включенный в наш индекс. Когда вы выполняете поиск, они дважды проверяют, не является ли совпадающий контент спамом. Если это так, этот контент не будет отображаться в первых результатах поиска. Мы также используем эту информацию для улучшения наших систем, чтобы вообще предотвратить включение такого спама в индекс.

В результате очень мало спама фактически попадает в топ результатов поиска, которые кто-либо видит, благодаря нашим автоматизированным системам, которым помогает искусственный интеллект. По нашим оценкам, эти автоматизированные системы помогают исключить спам более чем из 99 % посещений из Поиска. Что касается оставшегося крошечного процента, наши команды берут ручное действие и использовать полученные знания для дальнейшего улучшения наших автоматизированных систем.

Ваша защита помимо спама

Робот Google и друг защищают вас не только от спама

Помимо спама, в 2020 году мы расширили наши усилия, чтобы защитить вас от других видов злоупотреблений. Многие из них могут нанести значительный финансовый и личный ущерб.

В 2020 году мы добились значительного прогресса в улучшении покрытия и защите большего числа пользователей от онлайн-мошенничества и мошенничества. Интернет-мошенничество имеет множество форм и может негативно повлиять на вас больше, чем традиционный веб-спам. Например, многие мошенники притворяются, что предлагают номера телефонов службы поддержки популярных услуг и продуктов только для того, чтобы обмануть пользователей, которые звонят, и заставляют их платить с помощью банковских переводов или подарочных карт. Об этом типе мошенничества, широко известном как «мошенничество со службой поддержки клиентов» или «мошенничество с технической поддержкой», сообщается сотни тысяч пользователей где пользователи могут потерять сотни долларов мошенникам в каждом случае.

пример мошенничества со службой поддержки в результатах поиска

С 2018 года наши системы смогли защитить сотни миллионов поисковых запросов в год, выявляя потенциально мошеннические сайты. В Интернете мошенники пытались создать много низкокачественных веб-сайтов с нагромождением ключевых слов, логотипами брендов, которые они имитируют, и номером телефона, по которому они хотели бы, чтобы вы позвонили. Наши алгоритмические решения гарантируют, что мошенничество и мошенничество вряд ли появятся в результатах поиска. Это лишь один из нескольких типов защиты, которые мы запустили в прошлом году для обеспечения качества результатов поиска и вашей безопасности. Наша миссия состоит в том, чтобы опередить вызовы, чтобы предоставить вам наиболее надежные результаты. В то же время вы также можете лучше защитить себя, оставаясь в курсе и узнать о мошенничестве.

Еще одним аспектом, в котором достижения в области искусственного интеллекта чрезвычайно помогли, было понимание содержания сайтов. Пример этого можно найти в том, как мы помогли улучшить способ ранжирования обзоров продуктов, информационных и торговых сайтов. Поиск Google — это отличный способ изучить и найти продукты перед покупкой, и мы хотели убедиться, что вы получаете наиболее полезную информацию для вашей следующей покупки, вознаграждая контент, содержащий более глубокие исследования и полезную информацию.

Несмотря на значительные успехи, достигнутые нами в борьбе со спамом, спамеры очень заинтересованы в разработке новых методов, которые могут ускользнуть от нашего обнаружения. Мы всегда работаем над тем, чтобы стать лучше и защитить людей от новых видов злоупотреблений, и внешние отчеты могут помочь. Были ли у вас какие-либо недавние случаи с Поиском, когда вы чувствовали себя введенными в заблуждение, мошенническими или рассылаемыми спамом, и вы думаете, что мы можем сделать лучше, чтобы предотвратить такие случаи? Если это так, пожалуйста, поделитесь отзывом, используя отчет о спаме, вместе с запросом и любой другой информацией, которая может быть полезной.

Робот Google сотрудничает с вами в борьбе со спамом



Source link