Поиск внешних ссылок на домен
Введите домен — сервис покажет внешние ссылки, найденные краулером на публичных сайтах из базы обхода.
Найденные обратные ссылки
| Донор | Страница донора | Анкор | Ссылка | Дата обнаружения |
|---|
Как работает база обратных ссылок
Краулер PRLab последовательно обходит домены из загруженного списка, находит внутренние страницы и сохраняет исходящие ссылки на внешние сайты. Поиск на этой странице работает по уже накопленной базе и не запускает сканирование заново.
Доноры и страницы
Для каждой найденной ссылки сохраняются домен донора и точный адрес страницы, где она размещена. Это помогает быстро проверить контекст и доступность ссылки.
Анкоры
Если у ссылки есть текст, он выводится как анкор. Пустой анкор означает, что ссылка может быть изображением, иконкой или URL без текстового описания.
Продолжаемый обход
Очередь страниц и позиция в списке доменов сохраняются на сервере. После перезапуска или ошибки обработка продолжается с последней контрольной точки.
Учитываем правила сайтов
Краулер запрашивает только публичные HTTP(S)-страницы, соблюдает robots.txt и делает паузу между запросами. Закрытые адреса и медиафайлы не обходятся.