Как работает Google Поиск

Если отправить в Google поисковый запрос, почти мгновенно появляются результаты, найденные по всему Интернету. Как Google находит веб-страницы, соответствующие введенному запросу, и определяет порядок расположения результатов поиска?

Попросту говоря, веб-поиск можно сравнить с просмотром огромной книги, имеющей очень длинное оглавление, в котором подробно указано, где что находится. Когда вы выполняете поиск с помощью Google, наши программы ищут в индексе наиболее релевантные результаты. За предоставление результатов поиска отвечают три основных процесса:

Сканирование
Сканирование – это процесс, в ходе которого робот Googlebot обнаруживает новые и обновленные страницы для добавления в индекс Google.
Мы используем огромную сеть компьютеров, чтобы просканировать содержание миллиардов веб-страниц. Программа, выполняющая сканирование, называется роботом Google (или пауком). Робот Googlebot использует алгоритмический процесс: программы определяют, какие сайты нужно сканировать, как часто это нужно делать, а также какое количество страниц следует выбрать на каждом сайте.
Процесс сканирования Google начинает со списка URL веб-страниц, созданного в ходе предыдущих сеансов сканирования. Его дополняют данные из файлов Sitemap, предоставленных веб-мастерами. Просматривая каждый из этих сайтов, поисковый робот Googlebot находит на каждой странице ссылки и добавляет их в список страниц, подлежащих сканированию. Робот Googlebot отмечает все новые и обновленные сайты, а также неработающие ссылки.
Google не взимает плату за более частое сканирование сайта. Поисковая система представляет собой отдельную часть нашего бизнеса, не связанную с платной службой Google AdWords.

Индексирование
Робот Googlebot обрабатывает каждую сканируемую страницу, чтобы составить полный индекс всех найденных слов, а также отметить, в какой части страницы они находятся. Кроме того, мы обрабатываем данные из основных тегов и атрибутов, например тегов title и атрибутов alt. Робот Googlebot способен обрабатывать многие (но не все) типы содержания. К примеру, обработке не поддается содержание некоторых файлов мультимедиа и динамически создаваемых страниц.

Предоставление результатов
Когда пользователь вводит поисковый запрос, наша система находит в индексе подходящие страницы и выдает наиболее релевантные, по нашему мнению, результаты. Релевантность определяется различными факторами, которых насчитывается более 200. Один из них – это рейтинг PageRank для конкретной страницы. PageRank является показателем "важности" страницы и определяется на основе входящих ссылок с других страниц. Проще говоря, каждая ссылка на вашу страницу с другого сайта увеличивает PageRank вашего ресурса. Не все ссылки равноценны. Мы непрерывно совершенствуем алгоритмы оценки ссылок, чтобы отсеивать спам и другие данные, негативно влияющие на качество результатов поиска. Наибольший вес имеют ссылки, размещение которых связано с качеством содержания вашего сайта.
Для обеспечения адекватного рейтинга сайта на страницах результатов поиска важно, чтобы робот Google мог корректно сканировать и индексировать сайт. В нашем руководстве для веб-мастеров описывается ряд оптимальных методов, позволяющих избежать появления распространенных ошибок и повысить рейтинг сайта.
Функции Google Возможно, вы имели в виду и автозаполнение позволяют вам экономить время, завершая неполный запрос, исправляя ошибки и предлагая варианты популярных запросов. Как и в результатах Google Поиска, ключевые слова, используемые этими функциями, поступают от наших веб-сканеров и автоматических систем поиска. Такие подсказки отображаются только в том случае, если, по мнению Google, они могут помочь пользователю. Если сайт имеет высокий рейтинг в результатах поиска по ключевому слову, значит алгоритмы Google определили, что его содержание хорошо соответствует запросу.

Google Search Console Источник