П
Поисковый робот
П
Поисковый робот
показать все
Поисковый робот автоматически запрашивает страницы и ресурсы, чтобы обнаруживать и обновлять сведения о них.
Подробное описание
Он может находить адреса по ссылкам и картам сайта. Получение страницы не означает, что она будет включена в индекс или получит высокую позицию. При диагностике учитывают ответы сервера, доступность ресурсов и правила обхода.
Примеры
Условный пример: робот открывает статью, обнаруживает ссылку на новый термин и добавляет его URL в очередь обработки.
Связанные термины
Содержание