Индексирование сайта

Индексирование сайта:  Загрузить все вэб-страницы из указанного домена или по ссылке.

Запуск индексирования сайта

Сайт

Начальная ссылка (должна начинаться с http:// https:// ftp:// smb:// file://)
Список URL-адресов
Ссылка на карту сайта

Путь

загрузить все файлы в этом домене
загрузить файлы только по ссылкам указанным в URL-адресе

Ограничения

не больше чем

документов

Хранилище

Запуск

Подсказки

• Ограничение скорости индексирования

  No more that four pages are loaded from the same host in one second (not more that 120 document per minute) to limit the load on the target server.

• Цель балансировки

  Второе индексирование по другому хосту увеличивает пропускную способность индексирования до 240 документов в минуту с балансировкой нагрузки по всем хостам.

• Высокая скорость индексирования

  'Медленное индексирование' не ограничено по одному хосту (или сайту) скорость индексирования которого может быть увеличена на неограниченное, когда число удалённых хостов высока. Это можно сделать с помощью запуска расширенного индексирования.

• Управление планировщиком

  The scheduler on crawls can be changed or removed using Automation.