Что такое скрытые страницы (Deep Web) и как добавить их в Sitemap?


Deep Web («невидимая паутина» - рус.) – веб-страницы, неиндексируемые поисковыми системами по причине отсутствия на них гиперссылок с доступных страниц. Например – это страницы, генерируемые через интерфейсы HTML-форм или содержимое фреймов.
Если Вы хотите обнаружить и включить такие страницы в Sitemap, отметьте нужные опции:
  • «Индексировать формы» (сабмит происходит без заполнения);
  • «Индексировать фреймы» (содержимое <frameset> и <iframe>).