Многие люди, особенно верстальщики шаблонов, часто ленятся делать страницу 404. Зачем она нужна? Типа пользователь попадёт на плохую страницу и его внутри шаблона редиректнет на то, что предлагает любой хостер. Зачем мне ещё время тратить. Но не всё так просто.

По факту не все хостинги и не все системы управления сайтами такие крутые. А что происходит, когда страница 404 не возвращается? Выскакивает страничка 404, зашитая у вас в браузере. Так вот, к чему это я. Как человек, занимающийся парсингом, хочу сказать, что, чтобы узнать, какие файлы есть на сайте не заходя на него, нужно просто узнать размер файла. И, когда файла нет, и сделан редирект на 404 страницу, не опытный человек, который парсит, не поймёт, что на сайте такой страницы нет. И вам будет лишний трафик. Не на долго, на раз-два, но чем плохо?

Мораль сей басни такова. Только полный лодырь не сделает у себя на сайте страницу 404.