Я использую приложение под названием Ксену Линк Сыщик чтобы попытаться найти неработающие ссылки на сайте, который мы размещаем. Когда я захожу на сайт через браузер, он сразу открывается.
Когда я пытаюсь запустить его через Xenu, он сразу выдает ошибку 404 not found. Я проверил файл Robots.txt, думая, что, возможно, Xenu использовал его как основу, но решил, что причина не в этом.
Кто-нибудь знает что-нибудь, что могло бы это сделать? Может быть, где-то есть настройка безопасности, о которой я не знаю, которая выдает 404 для сканеров?
Любая помощь приветствуется, я в тупике.
Кроме того, это сайт интрасети. Не уверен, что это имеет значение.
Ошибка 404 выдается, когда страница веб-сайта не найдена. Убедитесь, что вы установили документ по умолчанию для сайта.
Я бы проверил пару вещей ... Сначала убедитесь, что URL-адрес не нарушает его. Ранее на этой неделе было много статей о хэшбэнге. #! ломать вещи. Кроме того, я бы посмотрел, как ваш запрос выглядит в журналах, и как этот запрос программного обеспечения выглядит в журналах.