Покажите историю сайта: прошлое любого домена за минуту

В прошлый вторник клиент написал мне в панике. Его магазин на WooCommerce уничтожило неудачное обновление плагина, резервные копии хостинга были тридцатидневной давности, а страницы товаров ему нужны были к пятнице. Первое, что я сделал, не полез на сервер. Я открыл Wayback Machine и вытащил на экран четыре года истории его сайта секунд за сорок. Именно об этом эта статья: как за минуту показать историю любого домена и что делать с тем, что вы увидите.

Никаких установок, аккаунтов и командной строки. Всё, что нужно, браузер и URL. Я использую этот приём для проверки доменов, восстановления утерянного контента, анализа конкурентов и изредка для разбирательств по товарным знакам. Сами инструменты просты. Умение их читать, вот настоящий навык, и именно он отличает двухминутный поиск от целого дня, потраченного на битые снимки.

Как посмотреть историю сайта меньше чем за минуту

В Wayback Machine на web.archive.org хранятся сотни миллиардов сохранённых страниц, причём снимки датируются аж 1996 годом. Для большинства доменов, которые существуют давно, найдётся хотя бы один снимок. Вот вся процедура:

1. Откройте web.archive.org в любом браузере. Поле Save Page Now пока не трогайте, оно сохраняет настоящее, а вам нужно прошлое.
2. Вставьте в строку поиска «голый» URL сайта: example.com, а не поисковый запрос.
3. Нажмите Enter. Вы попадёте на календарный вид со столбчатой диаграммой лет вверху.
4. Кликните по году на диаграмме, чтобы перейти к нему в календаре.
5. Наведите курсор на день, отмеченный цветным кружком. Во всплывающем окне появится время сохранения, выберите нужное.
6. Снимок загрузится на месте. Большинство внутренних ссылок, которые были просканированы, по-прежнему работают, пройдитесь по ним и оцените, насколько глубоким получился снимок.

Есть одна тонкость, которая сбивает людей с толку: версии домена с http и https хранятся отдельно, как и версии с www и без неё. Если результатов мало, попробуйте другие варианты. У старого сайта, который в 2009 году жил по адресу http://www.example.com, история лежит именно по этому адресу, и при поиске по современному URL с https вы почти ничего не увидите.

Сорок секунд, как и обещал. Дальше начинается самое медленное, решить, что делать с находками, и вся остальная часть статьи именно об этом.

Как читать временную шкалу Wayback Machine

Столбчатая диаграмма сверху, это количество снимков за каждый год. Высокие столбики означают, что архив часто заходил на сайт. Высота ничего не говорит о трафике или качестве, только о том, насколько легко сайт сканировался и как много на него ссылались. Цветные кружки, рассыпанные по дням календаря, показывают, что именно представляет собой каждый отдельный снимок:

• Синий: успешный снимок, HTTP 200. То, что нужно.
• Зелёный: редирект. Снимок, лишь указатель на другой URL, чаще всего старый переход с http на https.
• Оранжевый: клиентская ошибка, обычно 404. Открывать почти всегда бессмысленно.
• Красный: серверная ошибка. Пропускайте.
• Несколько кружков в один день означают несколько снимков. Более поздний обычно содержит больше картинок и CSS-файлов страницы.

Пустой год посреди насыщенной хронологии, это уже отдельная история: сайт лежал, блокировал краулеры или потерял все ведущие на него ссылки. Три разные проблемы, один и тот же симптом.

Чем заменить Wayback Machine, если он пуст

Wayback Machine, самый большой архив, но не единственный. Сайты, которые заблокировали его краулер или закрылись правилами robots.txt, всё равно всплывают в других местах. Мой рабочий короткий список:

• archive.today (он же archive.ph): независимый архив по запросу. Календарного интерфейса нет, поиск идёт по URL. Там часто есть страницы, которые Wayback Machine пропустил, и он частично игнорирует блокировки краулеров.
• Common Crawl: некоммерческий проект, который каждый месяц сканирует миллиарды страниц и отдаёт сырые данные бесплатно. Заточен под массовые исследования, для обычного просмотра неудобен, но незаменим, когда нужны масштабы.
• Memento Time Travel (timetravel.mementoweb.org): отправляет запросы сразу в десятки веб-архивов и выводит совпадения на общую временную шкалу. Самый быстрый способ увидеть, кто ещё сохранил страницу.
• oldweb.today: воспроизводит снимки в эмулированных браузерах, характерных для той эпохи. В основном ностальгия, но иногда единственный способ запустить страницу эпохи Flash.

От одной привычки стоит избавиться: старого приёма с поиском через cache:. Google отключил функцию кэшированных страниц в 2024 году, а Bing, аналогичную. Любое руководство, где до сих пор советуют вводить cache: в поисковик, было написано до этого и с тех пор не обновлялось.

Что делать с тем, что нашли

Большинство людей ищут историю сайта по одной из четырёх причин. Каждая законна, и для каждой есть свой подход.

Восстановить потерянный контент

Описания товаров, записи в блоге, таблицы с ценами, если страница хоть раз открывалась в браузере, её текст почти наверняка лежит где-то в архиве. Пару страниц можно скопировать вручную. Для целого сайта нужны сами файлы, а это уже другая задача; наше руководство по восстановлению сайта из Wayback Machine рассказывает об этом.

Проверить домен перед покупкой

Домены с истёкшим сроком регистрации хранят своё прошлое. В прошлом году я проверял один, выглядел идеально: чистый профиль обратных ссылок, адекватная цена, пока снимки 2014 года не показали три года фармацевтического спама и редирект на казино. Такая история на годы отравляет доверие поисковиков. А вот чистый архив, наоборот, стоит переплатить.

Урегулирование споров

Снимки с метками времени регулярно используют, чтобы показать, когда именно появился тот или иной контент, брендинг или цены. Это не юридическая консультация, и суды сами оценивают доказательства, но как подтверждение того, что что-то существовало раньше, архивный снимок на голову выше скриншота в Word-файле.

Исследование конкурентов

Страницы с ценами, настоящий клад. Пройдитесь по двум годам снимков конкурента, и вы увидите, как они тестируют повышение цены, отступают и откатывают решение. Запуски функций, смена позиционирования, снятые с производства товары, всё с метками времени и бесплатно.

Частые ошибки при просмотре истории сайта для исследования

• Проверяют только главную страницу. Углублённые страницы, /pricing, /about, старые URL блога, имеют собственную историю, и зачастую она покрыта лучше, чем главная.
• Принимают зелёный кружок редиректа за контент. За ним нет страницы, только указатель. Перейдите по нему к целевому URL и смотрите уже тот снимок.
• Считают, что в снимке со статусом 200 есть картинки и CSS. Ресурсы сканируются отдельно и часто отсутствуют. Снимок без стилей обычно всё равно содержит весь текст в HTML.
• Воспринимают «нет в архиве» как «никогда не существовало». Сайты скрывались правилами robots.txt, метатегами noindex и тяжёлым JavaScript. Отсутствие доказательств, не доказательство отсутствия.
• Путают дату снимка с датой публикации. Она фиксирует визит краулера, который может отставать от реальной публикации на месяцы.
• Забывают про четыре варианта URL. У http, https, www и голого домена своя хронология. Проверьте все, прежде чем говорить, что есть пробел.

Превращаем снимок в рабочий сайт

Смотреть, бесплатно. Уйти с файлами, уже работа. Картинки лежат под другими метками времени, чем страницы, таблицы стилей пропадают, а все ссылки в сырой выгрузке ведут обратно на web.archive.org. Разгребать это вручную на сайте из 400 страниц, неделя нудной работы, которую я бы не пожелал никому.

Именно эту работу автоматизирует этот инструмент. Вставьте URL, и бесплатная оценка покажет точное число файлов в архиве, общий размер и зафиксированную цену ещё до оплаты. Платите за каждый восстановленный файл, первый бесплатно, разовым пополнением баланса, без подписок. Опции восстановления включают выбор диапазона дат, вырезание аналитики, рекламы и iframe, минификацию JS и CSS, относительные внутренние ссылки и переход на HTTPS. Готовые сайты разворачиваются в один клик на SSH/SFTP, FTP/FTPS или S3, а для последующего редактирования в комплекте бесплатная CMS для одного файла. Если восстановление или развёртывание не удастся, деньги автоматически вернутся на баланс, никаких тикетов в поддержку.

В руководстве разобран полный цикл восстановления от начала до конца. Сначала запустите бесплатную оценку: она ничего не стоит и сразу покажет, стоит ли вообще восстанавливать найденные снимки.