» Архиваторы. Сравнение сжатия

Добавлено:
Monstrous PPMII compressor based on PPMd var.J, Feb 16 2006
DURILCA - dirty useless really illusory compressor/archiver, v.0.5(non-public) (C) 1 Apr 2006
for: п6,п7,п8,п13.

Viewgg

Цитата:

Кстати, "UNARC" - это они остроумно написали, молодцы
Похоже, авторы этой статьи - очередные неграмотные люди, вот и всё

Это всего лишь опечатка, как и: минимум 1.5 гГц для процессора, т.е. г-гекто 102 и имеем 150Гц .

Добавлено:
Fast PPMII compressor for textual data, variant J, Feb 16 2006
и для фанатов WinZip, добавлен WinZip 10.0(6685)
for: п1,п2,п3,п4,п5,п6,п7,п8,п10,п11,п13

При упаковки в п4 папки wilsoft, выяснилось, что теперь поиск файлов идёт быстрее, поэтому для UHARC была сделана упаковка, поиск действительно стал быстрее, а вот скорость упаковки упала, из-за CPU use ~ 30%; в первом случае, если память не изменяет CPU use был ~ 60-80%, с чем связано падение загрузки процессора мне непонятно.
На скорости распаковки это ни как не отражается.

egor23
Не могли бы вы строить таблицу с помощью тегов таблицы, плюс подводить итоги в конце, указывая призера например по формуле maximumcompression? Сейчас очень тяжело читать таблицу.

TCPIP
У меня не хватает времени заняться наведением красоты, и т.п.

egor23
02:23 11-04-2006
Цитата:

У меня не хватает времени заняться наведением красоты, и т.п

Ясно. Но там, вроде, не так уж и долго --- одну кнопку щелкнуть. (Нет, пардон, две, ведь еще ОК есть...). Так что попробуйте все же, если минута лишняя появится.

TCPIP

Цитата:

казывая призера например по формуле maximumcompression?

Распишите этк формулу по подробней, а то не соображу сходу.

Цитата:

Ясно. Но там, вроде, не так уж и долго --- одну кнопку щелкнуть. (Нет, пардон, две, ведь еще ОК есть...). Так что попробуйте все же, если минута лишняя появится.

Это Вы о чём?

Добавлено:
Viewgg

Цитата:

Похоже, на http://www.maximumcompression.com/ его и тестировать не стали, как очередной клон PAQ6

Опа, в списке архиваторов нету, а тесте суммарном присутствует, хе.
добавлен с 28-February-2006

egor23
02:47 11-04-2006
Цитата:

Распишите этк формулу по подробней, а то не соображу сходу

Вот она:

Цитата:

Scoring system: The program yielding the lowest compressed size is considered the best program. The most efficient (read:use full) program is calculated by multiplying the compression time (in seconds) it took to produce the archive with the power of the archive size divided by the lowest measured archive size. The lower score the better. The basic idea is a compressor X has the same efficiency as compressor Y if X can compress twice as fast as Y and resulting archive size of X is 10% larger than size of Y. (Special thanks to Uwe Herklotz to get this formula right)


score_X = POWER(2; ((size_X / size_TOP) - 1) / 0,1) * time_X

with score_X efficiency score for a certain compressor X
time_X time elapsed by compressor X (may include decompression too)
size_X archive size achieved with compressor X
size_TOP archive size by top archiver (smallest benchmark result)

"0,1" represents 10% and power of 2 ensures that for each 10% worse results (compared
with top) the time is doubled, so any archiver (except top compressor) will get a
penalty on time. The score of top compressor is always equal to its time value.

Цитата:

Это Вы о чём?

Это я про возможность редактирования с помощью плагина R2.

Забавный новый "архиватор": Infima
Вот, что [more=пишут о нем]
Цитата:

Moderator-Comment: In addition to that, it contains numerous bugs and cannot be installed correctly on WinXP systems... BTW I did edit this post to remove most of the spam.

Цитата:

What a hell!! 12mb's of file without plugins (17 with all plugins) and CAN'T install in Windows xp!!
This is a joke? a joke to take emails? a joke to examine? (paranoic mode ON)
This is not serious.

If you make a "new mega-hyper-fantastic-compressor" try to make the install work in ALL Os's!!

If the installer don't work (not well, simply give me ERROR!!) imagine the compressor. mpffff...

Цитата:

Infima = PAQ8G+WRT+DURILCA+PPMontr+PPMd+UHARC+BMF+LA+MonkeyAudio+............
Moderator-Comment: I think you are right. It at least includes a sort of Paq clone.

Цитата:

Preliminary tests indicate that Infima is an UHARC clone.
-Compressed size for GIMP Sources in maximum mode is almost exactly the same as UHARC (PPM)
-Gui is a wrapper for this:
PackArc.exe x -o+ -y+ -pw"Infima_convlan_Compression_Plugin" Dataconvlan.pack
This file can not be found with traditional methods, trying some other methods
Moderator-Comment: It's too good to be just a UHARC clone. Like dwing said it probably combines several programs...

Цитата:

I agree with that (uharc) have a look a this snapshots, and i can't install.

http://img143.imageshack.us/img143/2702/image11av.png
http://img143.imageshack.us/img143/7471/image28ol.png

I and repeat the same, why they dont' use a own format for installers?

The original installer lzma, the patch/fix uharc with password.

somebody can install this **** and test it?
"......." emailed about this error?, looks vaporware.

Sorry, but i don't believe too much in a compressor, who uses a differents compressors and the installer don't works.

Классное содержимое!..



Цитата:

Bad news !!

Bitmap, sounds(wav,mp3..), Videos are LOSSY compression

Moderator-Comment: This program is a big joke, and the joke is getting even better

И в правду, как сказал модератор:

Цитата:

Moderator-Comment: What a joke, it should have been released on April 1st.

Цитата:

Infima....
It's a huge download (17MB), so I became curious as to
why it was so large. I found a subfolder called Data full of files [~13MB] that appear to be password protected
UHARC archives with the extension renamed to ".pack".

This seemed a bit odd, so I started looking around some more and found a subfolder called Pack that contains two files:-
one called "data1.ln" and the other "data2.ln" that are respectively 109KB and 16KB, however, if you look in this subdirectory when Infima is running there are two different files there - ARC.exe and sproc.exe, and these are of the same size as data1.ln and data2.ln respectively. When I saw these files, I copied them before they disappeared and then had a look at them.

ARC.exe is actually UHARC 0.6a byte-for-byte. And proc.exe is an outdated and renamed copy of KillProcess from SoftTree Technologies.

Now, I'm hoping that Infima is actually a commercial spin-off by Uwe Herklotz to capitalise on his excellent UHARC, but otherwise, he is being ripped off (and yes I have
written to him to say so...)

Получил море удовольствия. Неплохая шутка, этот Infima. Видимо, в названии ошибка и архиватор должен был носить имя infimo. А дальше, видимо, нецензурное, поэтому было вырезано менеджерами и потерялось.

Разумеется, после этого и автор UHARC подтянулся:

Цитата:

I'm NOT related in any way with Infima. The authors of Infima make illegal use of UHARC (and seemingly other archivers too) if they distribute it as part of a commercial package and/or modified it. I only can hope that nobody is fooled by this Infima crap. Dropping more words on it is just a waste of time for me...

[/more] в гостевой книге maximumcompression.

Хит недели, однозначно!

TCPIP

Цитата:

Вот она:

Так это .... распишите, если несложно, по-русски, например, что такое POWER, а то я давно ничего не считал, если встречал .... запамятовал.

egor23
06:53 11-04-2006
Цитата:

что такое POWER

Степень, а 2 ее основание, если я правильно понимаю в арифметике.


Код: сlc; clear all;
size_TOP = 64217766
%
time_winrk_comp = 30603
time_winrk_decomp = 0
size_winrk = 64217766
%
size_X = size_winrk
%
time_X = time_winrk_comp + time_winrk_decomp
eff = ((size_X / size_TOP) - 1) / 0.1
score_X = power(2, eff) * time_X

>>score_X = 30603

Иногда приходилось встречать CD-диски с жатыми дистрибутивами программ причем они были в формате SFX (самораскрывающимися) и были сжаты горазды мощнее (большой степенью сжатия). Ну например, Corel Draw 11 в сжатом виде занимает 130 мбайт ну как после распакуется занимает 550 мбайт. Хотелось сравнить. И я зархивировал этот дистрибутив (550 мбайт) WinRAR'ром (причем в формате *.rar, а не формате sfx) получился размер дистрибутив в сжатом виде 450 мбайт. Были и другие похожие ситуации. Форумчане не подскажите ли вы что это за проги сжимающие так мощно и компактно (и причем в формате sfx) чем наши "бытовые" архиваторы

Yusup

Цитата:

они были в формате SFX (самораскрывающимися) и были сжаты горазды мощнее

Чем что? С чем сравниваем-то? Видимо, имеется в виду WinRAR? И какой формат SFX-архивов? Я догадываюсь, какой, но надо проверить. Это во-первых. Во-вторых, с какими натройками запускали WinRAR? Необходим формат RAR, максимальная степень сжатия, словарь 4096 Кб, непрерывный архив. В-третьих, надо внимательно читать шапку, там много полезных ссылок, щёлкая по которым, можно легко узнать ответы на многие вопросы. Так вот, берём этот дистрибутив, сжимаем его WinRAR с "моими" настройками, затем берём 7-Zip, например (опять же с максимальными настройками), сравниваем, что получилось.

Yusup
Скорее всего дистрибутив Corel'a был многоязычный. В таком случае в нем лежит очень много одинаковых файлов. Для одинаковых, естественно, можно сжимать только один файл, а остальные просто ссылаются на него в архиве. Например, такой метод, без всякого сжатия, применяется в при записи CD-дисков (в CDFS). Можно придумать и упаковщик, который поступает аналогично. А WinRAR, как архиватор общего применения, такого не умеет. Одинаковые файлы он может обнаружить лишь за счет объема словаря (макс. 4 МБ), который ограничен. А если файлы в него (в словарь) не умещаются, то WinRAR и не узнает, что они одинаковые. Значительно лучший результат в таком случае могут дать архиваторы с бОльшим допустимым словарем.

arsvrn
Цитата:

записи CD-дисков (в CDFS)

МОжешь дать ссылочку, как, чего там делать надо...

RussianNeuroMancer

Цитата:

МОжешь дать ссылочку, как, чего там делать надо...

К сожалению, не могу. Помню, что встречал, когда искал информацию по всяческим ISO-creator'ам (типа UltraISO и т.д.).

- сжал *.mpg архиватором WinRAR (3.50). Размер исходных файлов: 500 метров. После архивации: 437 метров.

- сжал *.mpg архиватором WinUHA (2.0 RC1). Размер исходных файлов: 500 метров. После архивации: 433 метра.

Вопрос: чем ещё можно вес сбросить? Ну, хотя бы ещё пару-тройку метров
Файлы на чужой сервер нужно выкинуть, буквально каждый байт на счету.

7z
Slim
Durilka

arsvrn
08:43 14-04-2006
Цитата:

Одинаковые файлы он может обнаружить лишь за счет объема словаря (макс. 4 МБ), который ограничен.

Хм, то есть он просто всю последовательность символов чешет, не сравнивая суммы? Странно. Плохо.
reenoip
12:56 14-04-2006
Цитата:

Вопрос: чем ещё можно вес сбросить?

MPEG. Тяжеловато будет. Нужно смотреть в сторону архиваторов, использующих PAQ, как мне кажется. Но вот стоит ли овчинка выделки?

reenoip
Перекодировать в avi c потерей качества. Важно ведь восприятие на глаз?

Panzer
16:40 14-04-2006
Цитата:

Перекодировать в avi c потерей качества. Важно ведь восприятие на глаз?

Нет, конвертировать лосси в лосси не стоит. Только в самом крайнем случае.

Не, ребята, конверт видео исключён - качество превыше всего )))
Да и файлы уже сжаты/пережаты (в смысле качества картинки/звука) на сто рядов, так что копать в эту сторону даже не стоит )))

Просто, думаю, уж если какое-то там "ухо" оказалось круче самого rar'а, то, быть может, есть ещё что-то, о чём я не знаю

Видео впервые решил архивом слить. Никак не предполагал, что 60 с лишним метров экономии накапает. Скромно надеялся на 5-10 метров )))


Цитата:

7z
Slim
Durilka

..., а какой из этих максимально заточен под сжатие avi/mpg/mp3?

reenoip
Уже сжатые файлы типа mp3 жать бесполезно. Что касается несжатых, то хороший аудио-кодер есть в Slim, можно попробовать WinRK, только осторожно: "продвинутые" методы тормознуты, но на ассиметричных словарных (ROLZ *) тоже есть аудио-кодер. Неудивительно, что UHARC показал хороший результат, он тоже оптимизирован под мультимедиа. Что касается 7-zip и Durilca, то здесь они вряд ли помогут, они плохо заточены под мультимедиа, поэтому тот же 7z может даже проиграть WinRAR-у, хотя чем чёрт не шутит... Но вообще они не лидеры на мультимедиа. Я бы рекомендовал попробовать ещё Slim и WinRK. Если же нужно ультрасжатие любой ценой, можно включить "зубодробительные" методы WinRK типа PWCM или FPW (этот полегче). Можно поискать специфических архиваторов, я вот не помню, WinMPQ жмёт с потерей качества или нет?

Добавлено:
Да, про видео чуть не забыл: тут рецепты те же, но такого хорошего кодера в Slim уже не найдёте.

reenoip

Цитата:

а какой из этих максимально заточен под сжатие avi/mpg/mp3?

Можно попробовать StuffIt 9.0. По данным maximumcompression.com он жмет JPEG (все-таки есть что-то общее с mpg, да и сами они так пишут, хотя тестов нет) на 25%, тогда как WinRK, Slim и др. на 2-3%. Только PAQ8 приближается - 17%. Но т.к. StuffIt все-таки коммерческий продукт, то по скорости он по идее должен быть лучше PAQ.
Сам не пробовал - нету. Хочется скачать и попробовать, хотя, конечно, 14 МБ

arsvrn
23:20 14-04-2006
Цитата:

Можно попробовать StuffIt 9.0. По данным maximumcompression.com он жмет JPEG (все-таки есть что-то общее с mpg, да и сами они так пишут, хотя тестов нет)

Хм. Интересная идея. Хотя в MPEG в отличие от JPEG по-моему не DCT, а CWT использутся. Попробовать непременно стоит. Хотя я остаюсь на мнении, что стоит начать с PAQ.

Цитата:

Можно попробовать StuffIt 9.0

Есть сомнения что будет толк, т.к. он заточен под JPEG, причем сделано весьма однозначно: если к JPEG файлу в начале приписать один байтик, то никаких до 30% не будет.

Вот немного MPEG поплющил:

Alizee_Lolita_Totp.mpg 31,6 МБ (33 185 796 байт)
[no]Video: MPEG1 Video 352x288 (4:3) 25.00fps
Audio: MPEG Audio 44100Hz stereo 128Kbps[/no]
[no]
Архиватор Результат Время: Упаковка Распаковка
WinUHA(ALZ-3,32Мбсловарь) - 29,3Мб (30 731 176) 1мин 27сек - 19сек
WinUHA(PPM,32Мбсловарь) - 29,3Мб (30 821 339) 2мин 12сек - 1мин 58сек
7z(макс,LZMA,32Мбсловарь,273слово) - 29,4Мб (30 863 442) 44сек - 4сек
7z(макс,PPMd,384Мбсловарь,32слово) - 28,5Мб (29 962 637) 1мин 8 сек - 1мин 15сек
Winrar(макс, solid, 4Мбсловарь) - 29,7Мб (31 145 476) 26сек - 2.5сек
WinRK303(ROLZ3) - 27,9Мб (29 270 926) 7мин 36сек - 7мин 57сек
StuffIt(StuffIt X,Metod6,Memory:25) - 29,3Мб (30 782 177) 2мин 3сек - 24сек
PPMd_J(PPMd.exe e -m256 -o16) - 28.5Мб (29 939 155) 57сек - 1мин 4сек[/no]

Cranberries - Salvation.mpg 25,2 МБ (26 495 728 байт)
[no]Video: MPEG1 Video 352x240 (107:80) 29.97fps
Audio: MPEG Audio 44100Hz stereo 224Kbps[/no]
[no]
Архиватор Результат Время: Упаковка Распаковка
WinUHA(ALZ-3,32Мбсловарь) - 24,4Мб (25 623 991) 1мин 8сек - 16сек
WinUHA(PPM,32Мбсловарь) - 24,4Мб (25 626 878) 1мин 46сек - 1мин 35сек
7z(макс,LZMA,32Мбсловарь,273слово) - 24,5Мб (25 696 747) 32сек - 3 сек
7z(макс,PPMd,384Мбсловарь,32слово) - 23,9Мб (25 077 259) 54сек - 1мин 1сек
Winrar(макс, solid, 4Мбсловарь) - 24,6Мб (25 847 540) 21сек - 2сек
WinRK303(ROLZ3) - 23,3Мб (24 477 961) 6мин 6сек - 6мин 25сек
StuffIt(StuffIt X,Metod6,Memory:25) - 24,2Мб (25 478 108) 1мин 42сек - 19сек
PPMd_J(PPMd.exe e -m256 -o16) - 23.8Мб (25 039 496) 48сек - 54сек[/no]

egor23
04:52 15-04-2006
Цитата:

Вот немного MPEG поплющил

Дык, самое-то интересное не поплющили!

Цитата:

к JPEG файлу в начале приписать один байтик, то никаких до 30% не будет

Здорово!

egor23

Цитата:

Есть сомнения что будет толк, т.к. он заточен под JPEG, причем сделано весьма однозначно: если к JPEG файлу в начале приписать один байтик, то никаких до 30% не будет.

У меня тоже сомнения есть, и большие. Но все-таки на maximumcompression есть упоминание о неплохом сжатии MPEG. Если есть StuffIt, может стоит попробовать? А нельзя метод сжатия JPEG указать принудительно?

Тэк-с, хочу
Цитата:

PPMd_J(PPMd.exe e -m256 -o16)

)))


Где его можно забрать?

Архиваторы - сравнение скорости
отдельный топик заводить или как поступим?

TCPIP

Цитата:

Дык, самое-то интересное не поплющили!

Добавлено
StuffIt Deluxe 9.0.1.27 - Engine 9.0.0.27
Настройки:
StuffIt X - Metod6, Memory:25,
StuffIt X (more) - Optimizers - on, Block Mode - on, Redundancy - off, Text Encoding - None
JPEG - Compress JPEG images creating smaller archives.

Также добавлено время потаченое на упаковку и распаковку.
http://forum.ru-board.com/topic.cgi?forum=5&topic=8076&start=560#6

И опять WinRK меня удивил, я не мог понять чё так долго 30Мб пакуется, профиль ROLZ3_0 ни как на время упаковки не отражается , а после того как начал распаковывать... "здрасти, я Ваша тётя" времени ушло на распаковку столько же.
То ли, включается какая-то предустановка (типа оптимизация) для этих данных, то ли это нехорошая особенность ROLZ.

arsvrn

Цитата:

У меня тоже сомнения есть, и большие. Но все-таки на maximumcompression есть упоминание о неплохом сжатии MPEG. Если есть StuffIt, может стоит попробовать? А нельзя метод сжатия JPEG указать принудительно?

Принудительно: это приделывем расширение jpg, эффект, как и с "битыми" картинками jpg, нулевой, даже немного отрицательный.

reenoip

Цитата:

Где его можно забрать?

http://www.compression.ru/ds/ppmdj.rar

TCPIP

Цитата:

Не могли бы вы строить таблицу с помощью тегов таблицы

Выкроил время, посмотрите на оформление результатов: 1. папка rus
Есть ещё пожелания по оформлению?