История сайта: снимки, WHOIS, DNS и инструменты для каждого

Спросите трёх человек, что означает «история сайта», и вы получите три разных ответа. Один представит старые скриншоты в Wayback Machine. Другой вспомнит бумажный след владельцев домена. Третий захочет узнать, по каким запросам сайт ранжировался в 2015 году. Все трое правы, и каждый ответ живёт в отдельном инструменте.

Это руководство разделяет четыре вида истории сайта, показывает, какой инструмент отвечает на какой вопрос, и отмечает ограничения каждого. Я использовал их все на реальных задачах, от восстановления магазина клиента на WooCommerce до проверки домена за несколько часов до аукциона. Большинство инструментов бесплатны. Настоящее мастерство, знать, какой открыть первым.

Что на самом деле означает «история сайта»

Фраза охватывает четыре отдельных вида записей, которые ведутся разными организациями по разным правилам. Ни один из них не общается с остальными, именно поэтому люди в итоге разочаровываются: они задают одному инструменту вопрос, на который может ответить только другой.

• История снимков, как сайт выглядел и что говорил в определённую дату. Хранится веб-архивами.
• История владения, кто зарегистрировал домен, когда и через какого регистратора. Хранится в записях WHOIS.
• История инфраструктуры, на какие серверы и name-серверы указывал домен. Хранится пассивными коллекторами DNS.
• История показателей, по каким запросам сайт ранжировался и какие страницы собирали ссылки. Хранится в SEO-индексах.

Путаница между ними стоит часов. Нельзя доказать владение скриншотом, и нельзя увидеть старую главную страницу внутри записи WHOIS. Сначала выберите вопрос, потом, инструмент.

История снимков: как сайт выглядел и что говорил

Wayback Machine на web.archive.org, гигант здесь: более 900 миллиардов страниц, сохранённых с 1996 года. Вставьте URL и получите календарь. Кружки отмечают сохранения; кликните на один, и вы увидите страницу такой, какой она была в тот день, с изображениями и стилями, если краулер смог их достать. Для всего, что было до примерно 2001 года, ожидайте скудного покрытия, ранний веб архивировался нерегулярно.

Три привычки делают инструмент гораздо полезнее. Ищите по точному URL, а не только по домену, архив индексирует каждую страницу отдельно, и у глубокой страницы часто другие даты сохранения, чем у главной. Используйте ссылки «раньше» и «позже» на таймлайне, чтобы ограничить событие, вместо прокрутки календаря. А если страница отсутствует, попробуйте archive.today, независимый архив, который часто хранит страницы, до которых Wayback Machine никогда не добирался.

Два трюка с URL, которые стоит запомнить. Добавление звёздочки к URL, web.archive.org/web/*/example.com/pricing, выводит все сохранения всех подходящих страниц: так вы находите глубинные URL, о существовании которых не подозревали. А временная метка внутри любого URL сохранения редактируется: замените web/20140615082211 на web/2014, и архив перенаправит к ближайшему сохранению того года. Исследователи перепрыгивают через десятилетия, вместо того чтобы кликать по кружкам календаря по одному.

Ограничения важны не меньше, чем возможности. Краулеры не умеют входить в систему, поэтому всё, что за логином или платным доступом, отсутствует. Сайты, перегруженные JavaScript, иногда сохранялись как пустые оболочки. Исключения robots.txt, соблюдавшиеся большую часть жизни архива, оставляют постоянные пробелы. Отсутствие сохранения означает «нет сохранения». Это никогда не означает «нет сайта».

История владения: записи WHOIS во времени

Каждая регистрация домена создаёт запись WHOIS: имя регистратора или организация, контактный email, регистратор, даты создания и истечения. После ужесточения применения GDPR в 2018 году большинство реестров по умолчанию скрывают персональные данные, поэтому текущий поиск часто показывает стену из «REDACTED FOR PRIVACY». Исторический WHOIS, вот где становится интересно: сервисы вроде DomainTools, WhoisRequest и SecurityTrails годами хранили снимки этих записей, со всеми скрытиями.

Что вы ищете:

• Дата создания против заявленного возраста. Сайт, заявляющий «основан в 2005 году» на домене, созданном в 2019-м, должен кое-что объяснить.
• Смена владельца. Изменение регистратора обычно означает продажу, полезно для датировки, когда проект сменил руки.
• Падения. Когда домен истекает и кто-то перерегистрирует его, некоторые инструменты считают новую регистрацию началом с нуля. Архив, нет.
• Изменения приватности. Переход за щит приватности прямо перед спорным периодом, классический признак.

История инфраструктуры: DNS и хостинг

Пассивные коллекторы DNS записывают, что говорили DNS-записи домена во времени: A-записи, указывающие на IP-адреса серверов, NS-записи, называющие DNS-хост, MX-записи, называющие почтового провайдера. SecurityTrails, DNSlytics и ViewDNS.info предоставляют бесплатные срезы этих данных. NS-записи, рабочая лошадка. Переход от пары name-серверов небольшого хостинга к паре Cloudflare примерно указывает, когда сайт переехал на Cloudflare, часто в ту же неделю, когда изменился сам сайт.

Реальный пример, детали изменены: клиент настаивал, что их магазин «никогда не покидал наш хостинг». История NS показала шестимесячный обход через пару name-серверов хостинговой платформы в 2021 году, это точно совпало с провалом в их аналитике и объяснило, почему в восстановленном экспорте заказов была дыра. DNS не лжёт. Память, лжёт.

История MX отвечает на другой вопрос, кто обрабатывал почту. Это полезно для датировки миграции или чтобы понять, какой провайдер всё ещё может хранить старые почтовые ящики.

История показателей: рейтинги, ссылки и трафик

Четвёртый вид записей, чего сайт достиг. Ahrefs и Semrush хранят годы данных о бэклинках и ключевых словах: какие страницы собирали ссылки, по каким запросам ранжировались, примерно сколько органического трафика поступало. Их site explorers работают и с мёртвыми доменами, потому что индексы переживают сами сайты.

Именно эти записи нужно изучить до любого восстановления. Отсортируйте старый домен по страницам с наибольшим числом ссылок, и у вас есть список приоритетов восстановления: URL, которые всё ещё несут авторитет и заслуживают нового существования, воссозданные близко к контенту, который заработал эти ссылки. Сопоставьте с историей снимков, и вы можете реконструировать карту сайта, исчезнувшего годы назад. Полный метод описан в нашем руководстве по поиску всех страниц старого сайта.

Какой инструмент отвечает на какой вопрос из истории сайта

Заметьте закономерность. Пять из этих инструментов показывают прошлое через окно. Только последний выдаёт то, что можно развернуть.

Превращение истории сайта в рабочий сайт снова

Архивы доступны только для чтения. Wayback Machine с радостью покажет вашу главную страницу 2013 года и вежливо откажется вернуть файлы. Этот пробел заполняет сервис восстановления сайтов: он восстанавливает сайты из архивных снимков в реальные, развёртываемые файлы. Вставьте домен, и бесплатная оценка покажет точное количество архивных файлов, общий размер и зафиксированную цену до оплаты. Оплата, за каждый восстановленный файл (первый, бесплатно) плюс небольшая фиксированная плата за каждое восстановление, пополняемая одноразовыми платежами баланса. Никакой подписки, никаких регулярных списаний.

Контроль, полезная часть: выберите диапазон дат, удалите старые скрипты аналитики и рекламы, переведите всё на HTTPS, перепишите внутренние ссылки как относительные, сохраните старые 301-редиректы, затем разверните в один клик на VPS через SSH, на shared-хостинг через FTP или в S3-бакет. Restorix CMS добавляется бесплатно при развёртывании, CMS на одном PHP-файле со сгенерированным для каждого сайта паролем администратора, чтобы восстановленный сайт оставался редактируемым, а не замороженным. Если восстановление или развёртывание не удаётся, возврат автоматически зачисляется на ваш баланс. Руководство проходит весь процесс.