формат WARC, используемый для хранения резервных копий веб-сайтов (к примеру, его использует Wayback Machine) и про софт для «записи» и «воспроизведения» веб-сайта. Для «воспроизведения» нашёл PyWB (ставится через pip), он поднимает локальный веб-сервер, на котором можно посмотреть сайты из WARC-файлов, входящих в коллекцию (коллекция собирается перед запуском сервера).

- Сайт «Webrecorder». Можно указать ссылку, дождаться загрузки содержимого, и скачать файл.
- Warcprox. Прокси-сервер, сохраняющий все посещённые страницы. Проблема в том, что HTTPS страницы сохраняются через MITM с сгенерированным сертификатом. Да и можно просто забыть посетить некоторые страницы. Годится для сохранения нескольких страниц.
- wget. Умеет сохранять в WARC. Удобно, а в Tails его можно даже через Tor пустить, чтобы иметь возможность сохранить заблокированный сайт. Но возникла проблема на сайте TV Tropes – на сохранённой странице не показывался контент «под катом», хотя при просмотре той же страницы на Wayback Machine всё работало (то есть дело, скорее всего, не в WARC). Можно ли как-то исправить эту проблему? Или поискать другой краулер?

‘--warc-file=file’
    Use file as the destination WARC file.

‘--warc-header=string’
    Use string into as the warcinfo record.

‘--warc-max-size=size’
    Set the maximum size of the WARC files to size.

‘--warc-cdx’
    Write CDX index files.

‘--warc-dedup=file’
    Do not store records listed in this CDX file.

‘--no-warc-compression’
    Do not compress WARC files with GZIP.

‘--no-warc-digests’
    Do not calculate SHA1 digests.

‘--no-warc-keep-log’
    Do not store the log file in a WARC record.

‘--warc-tempdir=dir’
    Specify the location for temporary files created by the WARC writer.