stringtranslate.com

WARC (формат файла)

Формат архива WARC (Web ARChive) определяет метод объединения нескольких цифровых ресурсов в совокупный архивный файл вместе с соответствующей информацией. Эти объединенные ресурсы сохраняются как файл WARC , который может быть воспроизведен на соответствующем программном обеспечении или использован веб-сайтами архивов, такими как Wayback Machine .

Формат WARC представляет собой пересмотренный вариант формата файла ARC_IA Архива Интернета [4] , который традиционно использовался для хранения « веб-сканеров » как последовательностей блоков контента, собранных из Всемирной паутины . Формат WARC обобщает старый формат для лучшей поддержки сбора, доступа и обмена потребностями архивных организаций. Помимо основного контента, записанного в настоящее время, пересмотренный вариант вмещает связанный вторичный контент, такой как назначенные метаданные , сокращенные события обнаружения дубликатов (см. §7.6 «повторный просмотр») и более поздние преобразования. [5] Формат WARC вдохновлен потоками HTTP/1.0 с похожим заголовком и использованием CRLF в качестве разделителей, что делает его очень подходящим для реализаций сканеров.

Впервые указанный в 2008 году [6] , WARC в настоящее время признан большинством национальных библиотечных систем в качестве стандарта, которому необходимо следовать при веб-архивировании. [7]

Программное обеспечение

Смотрите также

Ссылки

  1. ^ "application/warc" . Получено 17 марта 2018 г. .
  2. ^ "Введение". SourceForge . Получено 5 марта 2015 г. .
  3. ^ "Информация и документация -- Формат файла WARC" . Получено 16 марта 2018 г.
  4. ^ "ARC_IA, Формат файла ARC Интернет-архива". www.digitalpreservation.gov . 14 февраля 2008 г. Получено 09.05.2015 г.
  5. ^ "WARC, формат файла Web ARChive". www.digitalpreservation.gov . 31 августа 2009 . Получено 2015-05-09 .
  6. ^ Арвидсон, Аллан; Кунце, Джон; Мор, Гордон; Стэк, Майкл (5 июля 2008 г.). «Формат файла WARC». IETF . Получено 29.04.2021 .
  7. Аллегрецца, Стефано (21 апреля 2016 г.). «Новые перспективы для веб-архивирования: стандарт ISO 28500 (формат WARC) и ISO/TR 14873 для качества веб-архивирования». Дигилия . 2015 : 49–61.
  8. ^ Scrivano, Giuseppe (6 августа 2012 г.). "GNU wget 1.14 выпущен". GNU wget 1.14 выпущен . Free Software Foundation, Inc . Получено 25 февраля 2016 г. .
  9. ^ "Введение в хвойные". Rhizome . 2020-06-11 . Получено 2024-10-16 .

Внешние ссылки