ZIP
ZIP — формат архивации файлов и сжатия данных без потерь. Архив ZIP может содержать один или несколько файлов и каталогов, которые могут быть сжаты разными алгоритмами. Наиболее часто в ZIP используется алгоритм сжатия Deflate. Формат был создан в 1989 году Филом Кацем и реализован в программе PKZIP компании PKWARE[2] в качестве замены формату архивов ARC Тома Хендерсона. Формат ZIP поддерживается множеством программ, в том числе операционными системами Microsoft Windows (с 1998 года) и Apple Mac OS X (с версии 10.3). Многие свободные операционные системы также имеют встроенную поддержку ZIP-архивов.
ZIP | |
---|---|
Расширение |
.zip |
MIME-тип | application/zip[1] |
Сигнатура |
нет, хотя обычно PK\003\004 , PK\005\006 (empty archive) или PK\007\008 (архив, разделённый на части). |
Разработчик | Фил Кац, PKWARE |
Опубликован | 1989 |
Последний выпуск | 6.3.2 (28 сентября 2007 ) |
Тип формата | Сжатие данных |
Расширен из | Deflate |
Развит в |
JAR (EAR, RAR (Java), WAR) Office Open XML (Microsoft) Open Packaging Conventions OpenDocument (ODF) XPI (расширения Mozilla) |
Стандарт(ы) | APPNOTE от PKWARE |
Архивы ZIP обычно хранятся в виде файлов с расширением «.zip» или «.ZIP» и используют MIME-типapplication/zip
.[1]. Для создания ZIP-архивов и извлечения (распаковки) содержащихся в них файлов могут использоваться специальные утилиты, например терминальные PKZIP и PKUNZIP[3] или графические WinZip, WinRAR, Info-ZIP, 7-Zip, PeaZip и многие другие. При необходимости ZIP-архив может быть объединён с модулем-распаковщиком в единый исполняемый файл (так называемый SFX-архив).
История
В начале 1980-х годов развивались BBS и FidoNet, и компания Software Enhancement Associates (SEA) придумала формат сжатия ARC, основанный на кодах Хаффмана. Программа распространялась по модели shareware, при этом зарегистрировавшемуся поставлялись исходные тексты.
Программист Фил Кац написал свои программы для работы с такими архивами — PKARC и PKXARC. Работали они вдесятеро быстрее ARC (движок был написан на ассемблере), стоили дешевле, последняя была распаковщиком и распространялась бесплатно. Программы получили такой успех, что Кац бросил работу и основал компанию PKWARE[4].
SEA засудили Каца за плагиат[5][6], при этом онлайн-общественность была против — казалось, что они задним числом делают формат ARC проприетарным и «Голиаф» судит «Давида» (на поверку обе компании состояли из нескольких человек). Оказалось, что в исходном тексте Каца были те же орфографические ошибки, что у SEA. В результате пришли к такому соглашению: Кац платит более 60 тыс. долларов, отчисляет процент от всех будущих продаж ПО для ARC, делает окончательную программу PKPAK и переходит на новый формат.
Так и появился формат ZIP. Название «zip» (со значением «быстро двигаться») было предложено другом Каца, Робертом Махони (Robert Mahoney). Таким названием они подразумевали, что их приложение быстрее ARC и других архиваторов того времени. Наиболее ранняя известная версия спецификации формата ZIP — .ZIP File Format Specification — была опубликована как часть поставки PKZIP 0.9 в файле APPNOTE.TXT в 1989 году. При этом Кац пообещал, что любой может свободно писать свои реализации[7][8][9][10][11].
Репутация Каца как «хорошего парня» быстро сделала ZIP основным форматом архивов на BBS. А SEA не оправилась от плохого пиара и была свёрнута в 1992 году.
История версий
У каждой спецификации формата ZIP есть свой собственный номер, который может не совпадать с номерами версий PKZIP (особенно это справедливо для PKZIP 6 и более новых версий). PKWARE постоянно добавляет возможности в свой формат, но новая версия формата становится доступной только при выходе следующего старшего выпуска программы PKZIP.
Версия спецификации | Год | Новые возможности |
2.0 | 1993 | Файлы могут сжиматься методом Deflate[1] |
2.1 | 1996 | Сжатие Deflate64 |
4.5 | 2001 | Описан 64-битный формат ZIP[12] |
4.6 | 2001 | Сжатие bzip2 (опубликовано позднее с APPNOTE 5.2) |
5.0 | 2002 | Поддержка шифрования DES, 3DES, RC2, RC4 (опубликовано позднее с APPNOTE 5.2) |
5.2 | 2003 | Поддержка шифрования AES[13][14], исправление спецификации шифрования RC2-64 |
6.1 | 2004 | Описано хранение сертификатов[15] |
6.2.0 | 2004 | Описано шифрование центрального каталога[16] |
6.3.0 | 2006 | Описано хранение имен файлов в формате Юникод (UTF-8)[17]; расширен список поддерживаемых алгоритмов шифрования, сжатия (добавлены такие современные методы, как LZMA и PPMd+) и хеширования |
6.3.1 | 2007 | Исправлены стандартные значения хеш-функций SHA-256/384/512[18] |
6.3.2 | 2007 | Описан метод сжатия 97 (WavPack)[19] |
6.3.3[20] | 2012 | Изменения форматирования документов для облегчения ссылки на PKWARE Application Note от других стандартов, используя такие методы, как JTC 1 REFERENCING пояснительный доклад (RER) в соответствии с указаниями JTC 1 / SC 34 N 1621. |
6.3.4[21] | 2014 | Обновление адреса офиса PKWARE, Inc. |
6.3.5 | 2018 | Документированны методы сжатия 16, 96 и 99. DOS метки времени/эпохи и точности. Добавлены дополнительные поля для ключей и расшифровки, а также опечатки и пояснения. |
Утилита WinZip (начиная с версии 12.1) использует файловое расширение .zipx
для ZIP-архивов с современными методами сжатия. В ZIPX в дополнение к классическому Deflate могут применяться методы BZip, LZMA, PPMd, JPEG и WavPack.[22][23] По этой причине файлы ZIPX могут не распознаваться классическими утилитами распаковки ZIP, в которых реализован лишь метод Deflate.
Структура
ZIP-файлы представляют собой архивы, хранящие несколько файлов. Составляющие архив файлы могут быть сжаты различными способами, в том числе, сохранены без сжатия. Сжатие файлов внутри архива независимо, что позволяет легко извлекать их или добавить новые, без необходимости распаковки или перепаковки всего архива. Такая возможность является явным преимуществом по сравнению с форматом сжатых tar-файлов, которые не допускают простой обработки содержимого с произвольным доступом.
В конце ZIP-файла располагается специальная секция, называемая каталогом. В нем хранится список файлов, находящихся в ZIP архиве, и данные о местонахождении каждого сжатого файла внутри архива. С использованием данных каталога приложения могут быстро получить полный список файлов из архива, не читая весь ZIP-архив. Файл ZIP-архива также может включать дополнительные данные, не связанные с хранением сжатых данных. В частности, эта возможность позволяет создавать самораспаковывающиеся архивы (SFX), состоящие из приложения-распаковщика и сжатых данных. Такие архивы начинаются с программного кода и распознаются операционной системой в качестве исполняемого файла. При запуске приложение находит ZIP-архив и его каталог и распаковывает файлы, что может быть удобным для передачи архивов пользователям, не имеющим установленных приложений для работы с форматом ZIP. Так как многие приложения распознают формат ZIP по наличию каталога в конце файла, становится также возможным применить простейший стеганографический прием для скрытия архива, добавив архив вслед за каким-либо безобидным файлом, например изображением формата GIF и поменяв расширение файла (по аналогии с так называемым методом «RARJPG»). Большинство приложений отобразит изображение, проигнорировав архив как незначимые мусорные данные, тогда как получатель файла сможет открыть архив после восстановления расширения «.ZIP».
Формат .ZIP использует 32-битный алгоритм CRC для контроля целостности. Также файлы архивов включают в себя две копии каталога архива в целях повышения защиты файлов от порчи данных в процессе передачи или хранения.
ZIP сегодня
В настоящее время формат ZIP считается общепризнанным форматом для многих приложений[5], включающих функции сжатия, резервного копирования и обмена данными. Наряду с большим количеством утилит, работающих с ZIP-файлами из командной строки, в середине 1990-х годов появились и графические программы для работы с ними. Поддержка формата ZIP включена во множество современных операционных систем.
На текущий момент существует ряд алгоритмов сжатия данных, выигрывающих у ZIP и в скорости, и в степени упаковки, и в дополнительных возможностях. Тем не менее, ZIP по-прежнему остаётся популярным методом сжатия данных.
Множество конкурирующих архиваторов, помимо своего собственного формата, также поддерживает формат ZIP.
Этот способ сжатия также широко используется в других программах и даже в некоторых форматах файлов. Например, файлы *.odt и *.docx — это в действительности ZIP-архивы, содержащие в себе XML-файлы разметки страницы и дополнительные ресурсы (например, изображения). Также ZIP-алгоритм может использоваться в распространённом файловом формате изображений − TIFF.
Существуют сторонние архиваторы, создающие ZIP-архивы с методом сжатия Deflate, но с большей степенью сжатия, чем у оригинальных утилит. Среди них — 7-Zip и модифицированный Кеном Сильверманом архиватор kzip.
Восстановление ZIP-архивов
Поскольку формат ZIP не поддерживает специальных данных для восстановления (в отличие от, например, RAR), следует помнить, что при повреждении ZIP-архива можно восстановить только его структуру (то есть сделать вновь доступным оглавление архива), но восстановить данные, пострадавшие из-за повреждения, не удастся. Для восстановления повреждённых ZIP-архивов существуют специализированные утилиты, например, бесплатные:
Примечания
- Registration of a new MIME Content-Type/Subtype - application/zip, IANA, 1993-07-20, <http://www.iana.org/assignments/media-types/application/zip>. Проверено 5 января 2012. Архивная копия от 23 мая 2012 на Wayback Machine
- Phillip Katz, Computer Software Pioneer, 37, The New York Times (1 May 2000). Дата обращения 14 июня 2009.
- Microcomputer Applications for Public Administration (PADM 5530) Instructions on Using PKZIP and PKUNZIP (DOS)
- The Rise and Fall of a Software Star; Phil Katz Loved Code - and Liquor (англ.), wsj (15 August 1997).
- Mark Stamp, Richard M. Low. 3.5 PKZIP // Applied Cryptanalysis: Breaking Ciphers in the Real World. — John Wiley & Sons, 2007. — С. 110—111. — 424 с. — ISBN 9780470148761.
- Phil Katz (PKARC author) sued by SEA (ARC author), 14 Jun 1988, comp.sys.ibm.pc; «Shareware Developers Fight Court Battle Over Copyright Infringement», Daniel J. Lyons, PCWEEK (May 31, 1988) (англ.)
- Brian Livingston (8 September 2003), PKZip Must Open Up, <http://brianlivingston.com/eweek/article2/0,4149,1257562,00.html>. Проверено 5 января 2012.
- Where Did Zip Files Come From Anyway?, Infinity Design Concepts, Inc., <http://www.idcnet.us/ziphistory.html>. Проверено 5 января 2012. Архивная копия от 20 ноября 2012 на Wayback Machine
- Press Release, 1989, <http://cd.textfiles.com/pcmedic9310/MAIN/MISC/COMPRESS/ZIP.PRS>. Проверено 5 января 2012.
- Our Founder - Phil Katz, PKWARE, <http://www.pkware.com/about-us/phil-katz>. Проверено 5 января 2012. Архивная копия от 14 января 2012 на Wayback Machine
- Gareth Horton; Rob Weir & Alex Brown (2 November 2010), sc34-wg1, <http://mailman.vse.cz/pipermail/sc34wg1study/2010-November/000082.html>. Проверено 5 января 2012. Архивная копия от 3 марта 2016 на Wayback Machine
- File: APPNOTE.TXT - .ZIP File Format Specification Version: 4.5 Revised: 11/01/2001, 3 December 2001, <http://www.pkware.com/support/appnote.txt>. Проверено 21 апреля 2012.
- APPNOTE.TXT - .ZIP File Format Specification, Version: 5.2 - NOTIFICATION OF CHANGE, 16 July 2003, <http://www.pkware.com/documents/APPNOTE/APPNOTE-5.2.0.txt>. Проверено 5 января 2012.
- File: APPNOTE.TXT - .ZIP File Format Specification Version: 5.2 - NOTIFICATION OF CHANGE Revised: 06/02/2003, 2 July 2003, <http://pkware.com/products/enterprise/white_papers/appnote.html>. Проверено 21 апреля 2012.
- File: APPNOTE - .ZIP File Format Specification Version: 6.1.0 - NOTIFICATION OF CHANGE Revised: 01/20/2004, 19 August 2004, <http://www.pkware.com/company/standards/appnote/>. Проверено 21 апреля 2012.
- APPNOTE.TXT - .ZIP File Format Specification, Version: 6.2.0 - NOTIFICATION OF CHANGE, 26 April 2004, <http://www.pkware.com/documents/APPNOTE/APPNOTE-6.2.0.txt>. Проверено 5 января 2012.
- APPNOTE.TXT - .ZIP File Format Specification, Version: 6.3.0, 29 September 2006, <http://www.pkware.com/documents/APPNOTE/APPNOTE-6.3.0.TXT>. Проверено 5 января 2012.
- File: APPNOTE.TXT - .ZIP File Format Specification Version: 6.3.1 Revised: April 11, 2007, 14 May 2007, <http://www.pkware.com/documents/casestudies/APPNOTE.TXT>. Проверено 21 апреля 2012.
- File: APPNOTE.TXT - .ZIP File Format Specification Version: 6.3.2 Revised: September 28, 2007, 28 September 2007, <http://www.pkware.com/documents/casestudies/APPNOTE.TXT>. Проверено 21 апреля 2012.
- File: APPNOTE.TXT - .ZIP File Format Specification Version: 6.3.3 Revised: September 01, 2012, September 2012, <http://www.pkware.com/documents/casestudies/APPNOTE.TXT>
- File: APPNOTE.TXT - .ZIP File Format Specification Version: 6.3.4 Revised: October 1, 2014, 1 October 2014, <http://www.pkware.com/documents/casestudies/APPNOTE.TXT>
- Additional Compression Methods Specification . WinZip. Mansfield, CT: WinZip Computing, S.L (19 May 2009). Дата обращения: 24 мая 2009.
- What is a Zipx File? . Winzip: Knowledgebase. Mansfield, CT: WinZip Computing, S.L (13 August 2010). Дата обращения: 17 августа 2010.
- Программа Object Fix Zip 1.7 // UPgrade : журнал. — 2010. — № 8 (460). — С. 32. — ISSN 1680-4694.
- Восстанавливаем любые данные // Chip : журнал. — 2011. — № 8 (149). — С. 125. — ISSN 1609-4212. Архивировано 23 сентября 2015 года.
Ссылки
- Компания PKWARE
- Info-Zip.Org, программы zip и unzip с открытым исходным кодом для множества ОС и аппаратных платформ.