Блог Краснодарского Программиста

О чём этот сайт: на сайте я собираю рабочие рецепты и способы решения возникающих задач, записываю выжимки из учебных материалов, чтобы потом к ним возвращаться и пользоваться в рабочем процессе. Пользуйтесь и вы. Удачи!

SEO скрипт для проверки «битых ссылок»

[bash]

Скрипт проверяет URL`s из списка list.txt на предмет доступности:

wget -nv --spider -i list.txt

КОД ответа 200 — страница ОК, иначе Удалённый файл не существует — недопустимая ссылка! Далее это можно использовать для сортировки через grep и для выявления «битых ссылок» на сайте. Чуть позднее создам специальный скрипт для работы с ссылками и структурой сайта.