Индексирование сайта

Индексирование сайта

Индексирование сайта:  Загрузить все вэб-страницы из указанного домена или по ссылке.

Запуск индексирования сайта
Начальная ссылка (должна начинаться с
http:// https:// ftp:// smb:// file://)
empty
Список URL-адресов
Ссылка на карту сайта

загрузить все файлы в этом домене
загрузить файлы только по ссылкам указанным в URL-адресе
не больше чем документов

Подсказки

  • Ограничение скорости индексирования

    Не более чем две страницы с одного хоста в секунду (не более чем 120 документов в минуту), для ограничения загруженности удалённого сервера.

  • Цель балансировки

    Второе индексирование по другому хосту увеличивает пропускную способность индексирования до 240 документов в минуту с балансировкой нагрузки по всем хостам.

  • Высокая скорость индексирования

    'Медленное индексирование' не ограничено по одному хосту (или сайту) скорость индексирования которого может быть увеличена на неограниченное, когда число удалённых хостов высока. Это можно сделать с помощью запуска расширенного индексирования.

  • Управление планировщиком

    Расписание индексирования может быть изменено или удалено, используя управление API.