Google не может сканировать динамические URL: MYTH BUSTED

Марджори Мичан - сентябрь 2008 г.

В рамках своей программы Pop Picks, отвечающей на вопросы веб-мастеров, Google предоставил веб-мастерам разъяснение популярного мифа о SEO о том, что Google не может сканировать динамические URL , На самом деле, они даже зашли так далеко, что предположили, что динамические URL не должны быть переписаны вообще потому что Google «может использовать информацию, предоставленную через параметры, чтобы лучше понять, что ваш сайт делает с этими параметрами» и «возможно, позволит нам использовать другие ключевые слова, которые могут привести нас к контенту, который мы не видели для вашего сайта». Оценивая и даже поддерживая Усилия Google по сканированию «глубокой сети» Есть некоторые опасения, что их совет противоречит тому, что мы слышали от Google в прошлом делая это новое разъяснение несколько темным.

Конечно, любой, кто просматривал результаты поисковых систем в любое время в течение последних двух лет, знает, что поисковые системы способны сканировать и индексировать страницы с более чем тремя параметрами. Эти два списка с сайта Службы сельскохозяйственного маркетинга Министерства сельского хозяйства США иллюстрируют это:

Эти два списка с сайта Службы сельскохозяйственного маркетинга Министерства сельского хозяйства США иллюстрируют это:

Полные URL-адреса сокращены на странице результатов поисковой системы. Это полные URL для этих списков, каждый знак «=» указывает на новый параметр:
http://www.ams.usda.gov/AMSv1.0/ams.fetchTemplateData.do?template=TemplateN&navID=ANSIReportNOPCertifiers&rightNav1=ANSIReportNOPCertifiers&topNav=&leftNav=NationalOrganicProgram&page=NOPANSI&resultType=&acct=nopgeninfo

http://www.ams.usda.gov/AMSv1.0/ams.fetchTemplateData.do?template=TemplateA&navID=NationalMarketNewsAssociation&rightNav1=NationalMarketNewsAssociation&topNav=&leftNav=&page=NMNAMain&resultType=&acct=nmna

Кроме того, у Google есть мнение о трудностях реализации перезаписи URL на динамических веб-сайтах. Модули автоматического перезаписи URL для этих сайтов нередко создают больше проблем, чем решают. Это связано с тем, что они могут быть неправильно реализованы, а не потому, что с представлением удобных для пользователя URL-адресов, насыщенных ключевыми словами, посетителям и поисковым системам что-то не так. Некоторые примеры проблем, которые могут возникнуть:

1. Ссылки в навигации содержат URL с такими параметрами: www.example.com/id=4&id=5 , которые затем перенаправляют на SEO дружественные URL-адреса, такие как www.example.com/stuff , Проблема с этим не в формате URL. Дело в том, что в навигацию сайта встроен редирект. Чтобы решить эту проблему, убедитесь, что любая программа перезаписи URL не включает перенаправления на сайт. Ссылка в главной навигации должна вести прямо к www.example.com/stuff - нет перенаправлений.

2. Ссылки в основной навигации ведут непосредственно к SEO-дружественным статическим URL-адресам, таким как www.example.com/stuff , но динамические URL-адреса все еще доступны для поисковых систем. Если кто-то ссылается на динамический URL-адрес, то оба доступны для поисковых систем, и оба содержат одинаковое содержание. Это мешает поисковым системам выяснить, какие из этих страниц они должны индексировать. Как отмечалось выше, в случае с Google они отфильтровывают дублирующийся контент, и если они отфильтровывают не ту страницу, это может оказать негативное влияние на ваш рейтинг в поисковых системах.

3. Наконец, даже сайты, на которых есть ссылки, ведущие непосредственно к главной навигации, с сопровождающими перенаправлениями для динамических страниц, могут запутываться поисковыми системами, если перенаправления не заставляют сервер выдавать правильный ответ заголовка. Все перенаправления, предназначенные для реализации SEO-дружественных URL-адресов, должны выдавать ответ заголовка 301 (постоянный). Это говорит поисковым системам, что истинный URL является SEO-дружественным, а не динамическим - если они должны встречаться через него. Многие программы перезаписи URL используют перенаправления, которые выдают ответ заголовка 302 (временный). Это приводит к тому, что оба URL-адреса будут перечислены, что не решает проблему вообще.

Хотя Google утверждает, что они могут отфильтровывать дублирующийся контент, который могут быть созданы на вашем сайте несколькими параметрами (и на самом деле они достигают гораздо большего успеха сегодня, чем даже год назад), слишком много страниц, нацеленных на подобный контент, в результате Динамическая природа страниц может создавать проблемы. Небольшие различия в продуктах могут привести к созданию десяти и более страниц, которые в основном содержат одно и то же содержимое. В этих случаях индексируется только одна из этих страниц и без каких-либо ограничений для поисковых систем, какая страница в списке полностью зависит от Google.

Кроме того, эти динамические URL-адреса не содержат ключевых слов, относящихся к странице, они очень длинные и не удобны для пользователя, и если параметры обрабатываются неправильно, они могут привести к тому, что один и тот же контент на сайте будет представлен под более чем одним именем файла URL - печально известный проблема дублирования контента ,

Одним из распространенных примеров этого в отношении динамических URL-адресов является страница, которая получает другой URL-адрес в зависимости от того, как и где страница генерируется. Например, эти две ссылки на данные переписи населения Австралии 2006 года отображают один и тот же основной контент:

http://www.censusdata.abs.gov.au/ABSNavigation/prenav/PopularAreas?&collection=Census&period=2006&[globalparams ]

http://www.censusdata.abs.gov.au/ABSNavigation/prenav/PopularAreas?collection=census&period=2006

Это не большая проблема, потому что Google отфильтрует дублированный контент. Однако для других поисковых систем это может вызвать больше трудностей, и даже для Google неясно, какую из этих страниц они будут индексировать. Если владелец сайта имеет четкие предпочтения относительно того, какую страницу следует индексировать, разрешение Google сделать выбор может быть не предпочтительным. Кроме того, хотя новая информация Google предполагает, что они могут справиться с дублированием страниц с разными URL-адресами, веб-мастера, которые получили предупреждения о дублировании содержания Google в своей учетной записи Инструментов для веб-мастеров, скептически относятся к ,

Наконец, даже у Google есть ограничения на количество страниц сайта, которые он может сканировать за один сеанс. Естественно, владелец сайта предпочел бы, чтобы Google входил, находил новые или обновленные страницы и уходил, а не сканировал сайт на неопределенный срок в поисках всех возможных перестановок доступного контента. Если поддержание этого в динамических URL-адресах поможет свести к минимуму количество параметров, то в интересах владельца сайта и Google создать сайт с этой целью.

Хотя мы продолжаем рекомендовать, исключительно с точки зрения пользовательского опыта, владельцы сайтов контролируют контент, который они представляют поисковым системам и посетителям, создавая короткие URL-адреса с большим количеством ключевых слов, ограничивающие количество параметров, мы можем оценить трудности, связанные с неправильным переписыванием URL-адресов. создали для поисковых систем. Возможно, лучшим решением от Google было бы больше партнерства с владельцами сайтов, позволяющего им лучше контролировать то, как сайт индексируется с учетом параметров сайта. Это шаг, который был сделан Yahoo. Yahoo Site Explorer позволит вам указать, какие параметры можно игнорировать для определения уникального содержимого , Несмотря на это, приятно видеть, что Google так чутко реагирует на потребности своих контент-провайдеров и продолжает предлагать новшества в своей технологии сканирования и индексации.

Похожие

Google проигрывает Amazon
Было время, когда Google был конечной точкой всего Интернета. Если вы занимались поиском, покупкой и т. Д., Вы переходили в Google. По некоторым оценкам, у Google было почти 80% от общей доли рынка поиска. С тех пор доля Google, похоже, упала, и есть несколько важных причин, почему. Google никогда не был самым легким местом для покупок. Это было
Инструменты Google для SEO
Наше агентство предлагает вам несколько инструментов, которые помогут вам понять естественные ссылки и лучше понять оптимизацию вашего сайта. Функции Google Поиск " site: yoursite.com ": позволяет просматривать страницы вашего сайта, проиндексированные поисковой системой. Поиск " site: ключевое слово yoursite.com ": позволяет увидеть страницу вашего
Google Sitemaps не гарантирует индексацию и рейтинг
Это, вероятно, очевидно для большинства читателей, но это просто, отправка XML-карты сайта в Google не означает, что страницы в этой карте сайта будут полностью проиндексированы.
SEO для изображений Google
Мы знаем, что оптимизация изображений для Google является одной из самых избитых тем, которые можно найти в блоге о цифровом маркетинге . Тем не менее, мы считаем необходимым настаивать на этом, поскольку каждый день мы находим новые случаи, которые забывают применить это на практике, и это необходимо либо для SEO-оптимизации изображений, либо просто для того, чтобы ваш сайт был хорошо оптимизирован. По нашим знаниям и опыту, это 11 ключей,
Скорость индексации Google Sitemap
Эта новость появилась в одной из многочисленных тем для обсуждения в центре веб-мастеров Google : поисковая система все чаще проверяет и интегрирует содержимое карты сайта, если оно регулярно обновляется.
Ленивая загрузка изображений, вероятно, не будет проиндексирована Google
Если вы используете ленивую
Быть или не быть, быть или не быть.
Быть или не быть, быть или не быть. Глаголы ser и estar необходимы для понимания онлайн-маркетинга. Смысл бытия в том, чтобы быть видимым в сети, и быть в том, чтобы иметь преобразования, то есть придать смысл бытию, чтобы компания, проводящая маркетинговую кампанию, успешно монетизировала поставленную им цель. Чтобы быть видимым, важно провести хорошую кампанию
Google Ads - Ориентация на положительный доход! Этаж 18 АБ
Рекламная сеть Google ежедневно обслуживает миллионы людей, и это экономически эффективный рынок, если вы правильно настроите рекламные кампании Google. С помощью объявлений Google вы получаете сообщение для нужной группы
Для чего нужен Google Plus? Google My Business Management
Google Plus? Гугл что? Да, да, все еще есть много людей, которые не знают об этой платформе Google и ее потенциале, чтобы получить видимость онлайн благодаря ее ежедневным обновлениям. Ты тоже? Ну, ноль драм. Никогда не поздно начать. И лучше, если мы сделаем это с хорошей основой. Итак, далее мы объясним, для чего нужен Google Plus, и дадим вам некоторые подсказки, которые помогут вам ускорить этот 2018 год и радикально изменить ваше
Google SEO сертификаты не существуют: не попадают в · Письмо вопросы
Видите ли вы их мимо, интернет-маркетинговые агентства, которые утверждают, что сертифицированы Google? Или специалисты по SEO с сертификатом Google? Странно на самом деле, потому что Google не выдает сертификацию для SEO. Вы можете получить сертификат в этой области только у «обычных» тренеров. Что правильно и что не так с этими утверждениями? Я перенесу вас в мир SEO, Google и сертификатов, чтобы
SEO дизайн сайта Хэмпшир
Найти в Google! Поисковая оптимизация! Теперь это фраза на устах многих людей в минуту. В мире «поиска» мы все знаем, что «чтобы быть найденным» нам нужно проанализировать это до смерти, чтобы убедиться, что мы появляемся в поисковых системах, чтобы гарантировать, что мы привлекаем веб-пользователей

Комментарии

Может быть, электронная почта может помочь: «Эй, ты не против, если я не знаю, что ты делаешь?'>Может быть, электронная почта может помочь: «Эй, ты не против, если я не знаю, что ты делаешь?
Может быть, электронная почта может помочь: «Эй, ты не против, если я не знаю, что ты делаешь?» Если это не работает, то мы поднимаемся на более высокий уровень. Если ваш враг не говорит с вами, тогда говорите о своем враге миру. Выскажите свое беспокойство и проблему в социальных сетях. Если вы можете создать достаточно шума и шума вокруг человека, ответственного за негативную SEO-атаку, это может стать защитой, в которой вы нуждаетесь. # 8 наносить ответный удар при
Как я могу узнать, какие страницы не были проиндексированы Google, и сделать это так, чтобы не нарушать правила Google?'>Как я могу узнать, какие страницы не были проиндексированы Google, и сделать это так, чтобы не нарушать правила Google?
Как я могу узнать, какие страницы не были проиндексированы Google, и сделать это так, чтобы не нарушать правила Google? Google не указывает, была ли страница проиндексирована в консоли поиска Google, не позволяет нам просматривать результаты поиска, чтобы получить ответ, и не заинтересована в косвенном получении ответа от недокументированного API. (Это было умное решение Шона Малсида и обходной путь.) Давайте рассмотрим некоторые решения. Аналитическое решение
В 2002 году Google приехал в Германию, и я задал себе (и Google) вопрос: как работает Google?
В 2002 году Google приехал в Германию, и я задал себе (и Google) вопрос: как работает Google? С inteSEO я начал здесь (в 2014 году) страницу, которая в основном служила тестовым доменом. Моя первая работа в InHouse SEO менеджер Я начал в марте 2012 года в Берлине. После успешного года перешел в агентство веб-дизайна с 5000 клиентов. Эй, много вариантов для тестирования и Учиться SEO , Там
С некоторой частотой они спрашивают меня: как моя компания может отображаться в списке результатов в Google карте (Google Local), которая появляется для определенных поисков?
С некоторой частотой они спрашивают меня: как моя компания может отображаться в списке результатов в Google карте (Google Local), которая появляется для определенных поисков? Самое смешное, что они задают
Как получить входящие ссылки, не продавая свою душу дьяволу и не будучи забаненным Google?
Как получить входящие ссылки, не продавая свою душу дьяволу и не будучи забаненным Google? Как определить отличные возможности построения ссылок за 60 секунд?
Тем не менее, как вы можете узнать, является ли ваш сайт оптимизированным для SEO или как вы можете сделать это, чтобы получить одобрение Google и не только?
Тем не менее, как вы можете узнать, является ли ваш сайт оптимизированным для SEO или как вы можете сделать это, чтобы получить одобрение Google и не только? Вот некоторые ключевые элементы: Индексирование сайта в поисковых системах - если сайт не проиндексирован в поисковых системах, то вы не можете захватывать трафик. Однако, если сайт проиндексирован в Google, это означает, что он оптимизирован для SEO. По мере того как сайт индексируется, роботы Google будут посещать
Кто не будет чувствовать, что пошевеление уйдет и больше не вернется ко мне 🙁 И это не главное, верно?
Кто не будет чувствовать, что пошевеление уйдет и больше не вернется ко мне 🙁 И это не главное, верно? Этот мини-гид на самом деле представляет собой введение в секретные знания. Но я хотел показать вам (Ола, Марта, вы тоже), что это не такой дьявол. И что, когда вы приручите «монстра из гардероба», это поможет вам улучшить и развить блог. Желаю вам успехов! 🙂 Ты знаешь SEO? Вы хотите оптимизировать свой блог? Сколько времени вы уделяете этому? Как вы
Например, знаете ли вы, что, несмотря на то, что YouTube принадлежит Google, первые три видео в Google не всегда совпадают с тремя самыми популярными на YouTube?
Например, знаете ли вы, что, несмотря на то, что YouTube принадлежит Google, первые три видео в Google не всегда совпадают с тремя самыми популярными на YouTube? И даже видео с результатами Google в Интернете будут отличаться от их результатов! Попробуйте поискать «как починить сушилку» во всех трех поисках и посмотрите, что вы придумали: Это не точная наука, но есть
Если вы не знакомы с историей Google или не читали мою «SEO часть 1: что такое SEO?
Например, знаете ли вы, что, несмотря на то, что YouTube принадлежит Google, первые три видео в Google не всегда совпадают с тремя самыми популярными на YouTube? И даже видео с результатами Google в Интернете будут отличаться от их результатов! Попробуйте поискать «как починить сушилку» во всех трех поисках и посмотрите, что вы придумали: Это не точная наука, но есть
Почему бы кому-то не поделиться вашим URL или блогом, если они не имеют права участвовать?
Почему бы кому-то не поделиться вашим URL или блогом, если они не имеют права участвовать? Теперь давайте подробно поговорим о каждом из факторов на странице SEO: 1. Получить ссылки или ссылки обратные ссылки Процесс получения ссылок раньше сильно отличался от того, что происходит сейчас. Это было просто,
Если вы еще не можете ничего сделать с термином Google AdWords, я рекомендую вам мою статью " Что такое Google AdWords?
Почему бы кому-то не поделиться вашим URL или блогом, если они не имеют права участвовать? Теперь давайте подробно поговорим о каждом из факторов на странице SEO: 1. Получить ссылки или ссылки обратные ссылки Процесс получения ссылок раньше сильно отличался от того, что происходит сейчас. Это было просто,

Do?
Do?
Au/ABSNavigation/prenav/PopularAreas?
Au/ABSNavigation/prenav/PopularAreas?
Гугл что?
Ты тоже?
Или специалисты по SEO с сертификатом Google?
Что правильно и что не так с этими утверждениями?
Может быть, электронная почта может помочь: «Эй, ты не против, если я не знаю, что ты делаешь?
Как я могу узнать, какие страницы не были проиндексированы Google, и сделать это так, чтобы не нарушать правила Google?