WARC (ファイルフォーマット)

Web ARChive
拡張子 warc
MIMEタイプ application/warc
派生元 ARC[1]
国際標準 ISO 28500:2017[2]
ウェブサイト iipc.github.io/warc-specifications/specifications/warc-format/warc-1.1-annotated/
テンプレートを表示

WARC(Web ARChive)とは、複数のデジタル資源を関連情報と共に1つの集合アーカイブファイルに統合する方法を規定するアーカイブフォーマットである。これらの統合された資源はWARCファイルとして保存され、ReplayWeb.pageなどの適切なソフトウェアを使用して再生できたり、ウェイバックマシンなどのアーカイブウェブサイトで使用できる。

WARCフォーマットは従来World Wide Webから収集された「ウェブクロール」をコンテンツブロックのシーケンスとして保存するために使用されていたインターネットアーカイブARC_IAファイルフォーマット[3]の改訂版である。WARCフォーマットはアーカイビング団体の収集、アクセス、交換の需要をより適切にサポートするために古いフォーマットを一般化したものである。現在記録されている主なコンテンツに加えて、この改訂版では指定されたメタデータ、省略された重複検知イベント[注釈 1]、後日の変換記録など関連する二次コンテンツも収容できる[4]。WARCフォーマットはHTTP/1.0ストリームに触発されており、同様のヘッダーとCRLFを区切り文字として使用するので、クローラの実装に非常に適している。

2008年に最初に仕様が規定されたWARCは[5]、現在ではほとんどの国立図書館システムでウェブアーカイビングの標準として認められており[6]、一部の国立図書館システムではWACZも許容できるフォーマットとして挙げられ始めている[7][8]

ソフトウェア

脚注

注釈

  1. ^ §7.6「revisit」を参照。

出典

  1. ^ Introduction”. SourceForge. 2015年3月5日閲覧。
  2. ^ Information and documentation -- WARC file format”. 2018年3月16日閲覧。
  3. ^ ARC_IA, Internet Archive ARC file format”. www.digitalpreservation.gov (2008年2月14日). 2015年5月9日閲覧。
  4. ^ WARC, Web ARChive file format”. www.digitalpreservation.gov (2009年8月31日). 2015年5月9日閲覧。
  5. ^ Arvidson, Allan; Kunze, John; Mohr, Gordon; Stack, Michael (5 July 2008). The WARC File Format. https://tools.ietf.org/html/draft-kunze-warc-00 2021年4月29日閲覧。. 
  6. ^ Allegrezza, Stefano (21 April 2016). “Nuove prospettive per il Web archiving: Gli standard ISO 28500 (Formato WARC) e ISO/TR 14873 sulla qualità del Web archiving”. Digitalia 2015: 49–61. http://digitalia.sbn.it/article/view/1473. 
  7. ^ Web Archive Collection Zipped”. www.loc.gov (2023年5月19日). 2025年3月28日閲覧。
  8. ^ Preferred file formats” (英語). digitalpreservation.no (2024年12月5日). 2025年3月28日閲覧。
  9. ^ ArchiveBox” (英語). ArchiveBox. 2025年3月6日閲覧。
  10. ^ ArchiveWeb.page • Webrecorder” (英語). Webrecorder (2025年1月10日). 2025年3月28日閲覧。
  11. ^ Frequently Asked Questions” (英語). Conifer User Guide. 2025年3月27日閲覧。
  12. ^ webrecorder/har2warc, Webrecorder, (2025-01-25), https://github.com/webrecorder/har2warc 2025年3月28日閲覧。 
  13. ^ User Guide - Replay Webpage Docs”. replayweb.page. 2025年3月28日閲覧。
  14. ^ harvard-lil/scoop, Harvard Library Innovation Laboratory, (2025-03-26), https://github.com/harvard-lil/scoop 2025年3月28日閲覧。 
  15. ^ Scrivano, Giuseppe (2012年8月6日). “GNU wget 1.14 released”. GNU wget 1.14 released. Free Software Foundation, Inc.. 2016年2月25日閲覧。

関連項目

外部リンク

Prefix: a b c d e f g h i j k l m n o p q r s t u v w x y z 0 1 2 3 4 5 6 7 8 9

Portal di Ensiklopedia Dunia

Kembali kehalaman sebelumnya