» FreeArc (часть 4)

Часть 1 | Часть 2 | Часть 3

---

Скачать последний релиз - FreeArc 0.666 от 20 мая 2010 г. Что нового: ускорение работы в 1.5-2 раза благодаря новой технологии многопоточного сжатия, распаковка архивов многих форматов используя технологии 7-zip, запуск файлов из архива, исправлены все проблемы интеграции с Explоrer (подробнее)
Текущая альфа версия: 0.67 - загрузка | список исправлений | блог

---

Подробное описание используемых алгоритмов
Почему он сжимает лучше и быстрее, чем 7-zip/rar...
Результаты тестов, подтверждающие его крутизну...
Почему для использования 2+ гб памяти желательно установить 64-битную версию Windows
Планы дальнейшего развития
Что подразумевается под "интеграцией с Explorer"
Старая FreeArc wiki (включая описание формата архива)
Логотип и иконки FreeArc - обсуждение того, как облагородить внешний вид программы

---

Сторонние оболочки для работы с FreeArc:
• wArc - простая и понятная программа управления архивами (требует .NET Framework 2.0)
• PeaZip - менеджер архивов с поддержкой большого количества форматов, для Windows и Linux
• WinArc - абсолютно бесплатная программа для создания и редактирования архивов

---

Родственные темы:
• Inno Setup плюс внешние упаковщики - использование архивов FreeArc в инсталяторах
• ISDone.dll - библиотека распаковки архивов в инсталяторах
• REP & SREP
• Пережатиe/Pекомпрессия/Oптимизация файлов для лучшего сжатия - "а как сжать ещё лучше?"
• FreeArc и Unix - для альтернативно одарённых
• Форум Krinkels Inc - PrecompInside, SrepInside, ISDone, ISFreeArcExtract

Другие архиваторы:
• WinRAR
• 7-zip
• PowerArchiver
• HaoZip


Все альфа-версии с осени 2009 года[/more]

2
[more=FAQ по FreeArc]Q: (консольная версия) Как мне распаковать архив не в текущий каталог, а в заданный?
A: Воспользуйтесь параметром -dp=каталог.

Q: (консольная версия) Как использовать параметр -ag для автогенерации имени архива?
A: Пример: arc a -ag%Y%m%d MyArc_.arc *.txt --> MyArc_20091020.arc
а для батника будет так: arc a -ag%%Y-%%m-%%d MyArc_.arc *.txt --> MyArc_20091020.arc
Полный список опций можно посмотреть тут - Автоматическая генерация имени архива

Q: Есть ли поддержка многотомности (разбиение архива на части)?
A: Будет в 0.75

Q: Я пользуюсь precomp прямо в FreeArc (кто не понял FreeArc сразу сжимает с подключением к сжатию precomp) Так вот чтобы потом архив распаковать надо какието параметры писать и файлики лополнительные.
A: Файлы - каталог max из freearc power pack. эти файлы должны быть во время упаковки в текущем каталоге или каталоге, доступном по PATH, за исключением arc.ini, который должен лежать в c:\
Если это сделать, то обычный скрипт распаковки freearc архивов всё как надо сделает. Но при этом у тебя будет кривой прогресс-бар и окошко precomp будет светиться на экране

Q: Хочу распаковать архивы в подкаталоги перед упаковкой в arc чтобы добиться максимального сжатия
A: Готовый батник для этого здесь

Q: Поддерживает ли зашифрованные архивы SFX/unarc.exe/unarc.dll?
A: Да, в альфа версии 0.67

Q: Возможно ли в arc реализовать запуск файла из архива после распаковки этого архива?
A: freearc-installer.sfx извлекает архив во временный каталог, запускает setup.exe и после его выполнения стирает все временные файлы. freearc-installer-nodelete.sfx делает то же самое кроме стирания

Q: Как сделать InnsoSetup инсталятор с распаковкой SREP без промежуточного файла?
A: Взять SREP 3.0+, сжать файл с srep или srep:mem200mb и добавить/заменить в arc.ini секцию srep на такую:
[External compressor:srep]
packcmd = srep {options} $$arcdatafile$$.tmp $$arcpackedfile$$.tmp
unpackcmd = srep -d - - <stdin> <stdout>

Q: Что делать если мой антивирус ругается на инсталлятор FreeArc или sfx-архивы, созданные им?
A: Напишите об этом в тему, не забыв указать точную версию FreeArc. Кроме того, можете написать в техподдержку антивируса: Касперский - https://my.kaspersky.com/ru/support/viruslab или http://support.kaspersky.ru/virlab/helpdesk.html . Текст запроса может быть такой: "Приложенные sfx-модули архиватора FreeArc 0.67 March 18 ошибочно детектятся как вирусы"

Q: Как передать файлы разработчику программы?
A: http://freearc.no-ip.org:8080/Upload/~upload

Q: Как настроить TotalCommander MultiArc plugin?
A: См. http://forum.ru-board.com/topic.cgi?forum=5&topic=35164&start=2100#7

Q: TotalCommander MultiArc plugin не распаковывает архив если в его пути есть русские имена
A: См. http://forum.ru-board.com/topic.cgi?forum=5&topic=35164&start=1140#4

Q: Что насчёт поддержки сжатия jpg/mp3/zip?
A: Я рад буду добавить jpeg/mp3/zip рекомпрессию, если мне дадут готовые реализации под либеральной лицензией. пока что это есть только для jpeg, причём не лучшего алгоритма и не лучшей лицензии. Zip рекомпрессию я мог бы реализовать сам, jpeg/mp3 для меня слишком далёкая область. В то же время freearc поддерживает внешние упаковщики, начиная с 0.67 в нём очень простой и удобный интерфейс для работы с precomp (в диалоге настройки метода сжатия ставишь нужные галочки внизу)

Q: How much memory used by LZMA?
A: LZMA memory usage depends on the match finder used, with BT4 it's 9.5*dictsize+hashsize, with HT4 it's dictsize+hashsize. hashsize is set by -h option, by default hashsize=2*dictsize for BT4 with dictionary up to 32 MB, and hashsize=dictsize otherwise. hashsize is rounded down to the nearest power of 2 for BT4, and otherwise to power(2)*match_chain where match_chain is :mc parameter[/more]

3
[more=Почему он сжимает лучше и быстрее, чем 7-zip/rar...] Почему он сжимает лучше, чем 7-zip/rar: поддерживаются алгоритмы lzma, ppmd и multimedia-сжатие с автоматическим выбором подходящего алгоритма по расширению файла
• для улучшения сжатия используются фильтры dict (словарная замена), rep (находит повторы на расстоянии до 1Гб), delta (улучшает сжатие таблиц в бинарных файлах), bcj (EXE-фильтр), lzp (устраняет повторы в текстовых файлах)
• в режиме максимального сжатия алгоритмы сжатия работают не параллельно, а последовательно, выгружая промежуточные данные на диск, что позволяет каждому из них использовать весь объём ОЗУ компьютера
• если вам мало встроенных алгоритмов - вы можете использовать внешние: от препроцессора сжатых данных precomp до алгоритмов максимального сжатия ccmx/lpaq/durilca/uda/paq
• плюс к этому производится интеллектуальная сортировка файлов, группирующая вместе одинаковые/похожие файлы и различные версии одного и того же файла
Почему быстрее упаковывает: для текстовых файлов используется ppmd, который работает куда быстрее чем lzma
использование фильтров уменьшает размер фактически сжимаемых данных
в быстрых режимах сжатия (-m1/-m2) используются специально разработанные быстрые алгоритмы - tornado и grzip
чтение сжимаемых данных идёт параллельно сжатию в специальный большой буфер, поэтому задержки дисковых операций не сказываются на процессе упаковки[/more]

4
[more=Результаты тестов, подтверждающие его крутизну...]

обсуждение на форуме www.compression.ru

Тестирование maximumcompression.com на 46 типах файлов (510 файлов, 301 Мб). FreeARC 0.51 занял первые 4 места по эффективности из 246 тестировавшихся архиваторов+режимов!
SqueezeChart 2009
Monster of compression 2009 (MOC 2009)
Squxe Archivers Chart (2007)[/more]

5
[more=Что подразумевается под "интеграцией с Explorer"]родные виндовые диалоги выбора файлов/каталогов (реализовано в 0.51)
контекстное меню на архивах .arc и других файлах, а также каталогах, с возможностью сделать его каскадным и выбором из большого набора команд (реализовано в 0.52)
колонка "тип файла", отображающая описание типа, полученное от Windows (реализовано в 0.67)
кнопка "фоном" должна минимизировать диалог прогресса в system tray
отображение иконки файла в списке файлов и диалоге перезаписи файла
отображение стандартного контекстного меню эксплорера в самом FreeArc
drag&drop между freearc и explorer, а также между двумя экземплярами FreeArc
поддержка новых возможностей Windows 7: индикатор прогресса, фавориты и операции в таскбаре, а также Task Dialogs[/more]

6
[more=download]Downloads for alpha versions:

installer
installer (update)
portable version
portable version (update)
archive arc.arc - extract over installed FreeArc 0.666/0.67
console version
program sources

Previous alpha versions of FreeArc[/more]
===== конец СПИСКА МОРЕЙ =====[/#]

Ура

Цитата:

спасибо правда возникла маленькая проблема, связана она с размером файла, она указывается в мб, если извлекаемый файл весит меньше мегабайта, то соответственно размер равен = 0 при отображении, как получить размер в килобайтах или байтах?

никак разве что dll самому откомпилять. считается что такие файлы слишком быстро распаковываются для того, чтобы пользователь успел что-либо увидеть

Просто роскошный был бы архиватор, если бы:

- была многотомность (но только не так, как в 7-zip=)
- SFX (с многотомностью) и с пользовательскими картинками, как в RAR
- (???)

Верю, так оно и будет когда-нибудь)) К тому моменту будут дополнительно пофиксены всякие основные неприятности, и я, наконец, совершу страшный, подлый и богомерзкий акт предательства в отношении WinRARа. Возможно, и не я один. Даже если FreeArc будет вовсе уже и не Free, а PaidArc.

CTAPuK2010

Цитата:

Просто роскошный был бы архиватор, если бы:

- была реализована поддержка архивации силами GPGPU (AMD FireStream\CUDA\DirectCompute\OpenCL)

Цитата:

Даже если FreeArc будет вовсе уже и не Free, а PaidArc.

Вероятность этого близка к нулю.

Цитата:

была реализована поддержка архивации силами GPGPU

Опять... ну обсуждалось это уже. Непонятно, как это делать (если вообще возможно).

Какой самый мощный алгоритм сжатия во фриарке

skitonline
mx9 если быстро/просто
srep + max9
tordado самый мощный по скорости

Подскажите пожалуйста!
Сжимаю папку FreeArc ом закидываю её в папку с скомпилированным setup.exe скрипт использую Need for Speed Undercover, и процесс распаковки начинается только после установки дополнительных компонентов, тоесть после напр: DirectX а потом только подхватываются архивы.
Как сделать чтоб установщик в ночале подхватывал и распаковывал архивы а потом только в конце как обычно ставил доп. компоненты?
Подскажите пожалуйста, что нужно дописать в скрипте?
Стоит всё без изменения
#define ArcLocation "{src}\*.arc"
Вставил только свои данные другой игры.

MrDenisxXx
Не туда пишешь!
---------
В скрипте фриарка изменить с ssPostInstall на ssInstall

ndch
нет мне надо не быстро, а лучшие соотношение скорость/размер
я про вот эту строку во фриарке "Сжатие:"

skitonline

Цитата:

лучшие соотношение скорость/размер

Это одно.
торнадо. Параметры надо подстраивать под процессор.
Мне нравится arc a -m=tor:3:1m:h512k

Цитата:

я про вот эту строку во фриарке "Сжатие:"

Это другое.
про скорость в этой фразе речи нет.
m9 если просто, mx9 почти тоже самое, но быстрое "разжатие".
srep + max9 если сжать по максимуму.

Захочется чего-то большего - читайте версию для печати. Там многое оговаривалось.

Есть такой параметр как время "разжатия" и место под временный файл. srep + max9 здесь в аутсайдерах.

Цитата:

Опять... ну обсуждалось это уже. Непонятно, как это делать (если вообще возможно).

Есть кодировщик FLAC на КУДЕ, с недавних пор поддерживается OpenCL в том числе и ATI Stream.

PAQer
http://www.cuetools.net/doku.php/flacuda

Код: Supported hardware
NVIDIA GeForce 2XX/4XX/5XX
ATI Radeon HD 5XXX

Здравствуйте!

Обнаружил некую странность в поведении программы. Есть каталог с бэкапами в формате bkf, есть батник, запускающий упаковку этих файлов, например:
arc m -m1 -ep -tl v:\folder\test_file_1.arc v:\folder\test_file_1.bkf
arc m -m1 -ep -tl v:\folder\test_file_2.arc v:\folder\test_file_2.bkf
arc m -m1 -ep -tl v:\folder\test_file_3.arc v:\folder\test_file_3.bkf
...

Запускается батник, все файлы упаковываются, исходные удаляются. Однако, если в каталоге находятся несколько уже пожатых файлов (arc), то при повторном запуске батника происходит обновление (!) архивов. Из чего? Файлов-то с расширением bkf больше нет!

Если нужны какие-нибудь логи программы, готов предоставить.

Что-то не понял:
arc a -tzip -r e.zip

FreeArc 0.67 (August 4 2010) creating archive: e.zip
Compressing 584 files, 53,369,912 bytes. Processed 0%arc.EXE: szCheckedTABI: error

FreeArc 0.67 (November 17 2010) creating archive: e.zip
Compressing 584 files, 53,369,912 bytes. Processed 0%
c_szCompress: unsupported archive type
arc.EXE: szCheckedTABI: error

ndch
И причем тут кракер паролей?

Цитата:

Количество поддерживаемого железа весьма ограничено.

8-я и 9-я серия GeForce поддерживается энкодером, лично проверено.

freearc не использует 7z пр открытии rar файлов ?
просто не пойму что он использует чтобы открыть архив
в исходных кодах упоминания unrar нет

Добавлено:
я что то не нашел упоминания 4x4 в документации, а также фильтра disPack (я так понял это подобие exe котоырй BCJ )
кстати документация версии 0.4
а мануаля 0.666 версии нет ?

Не теряю надежды запустить freearc из-под winpe...
Выдаётся ошибка: "user error getAppUserDataDirectory".
Может, не хватает какой-нть переменной окружения :-?

Цитата:

- была многотомность (но только не так, как в 7-zip=)
- SFX (с многотомностью) и с пользовательскими картинками, как в RAR

ну это в планах на след. версию после того как выпущу 0.70


Цитата:

- была реализована поддержка архивации силами GPGPU

это невозможно. GPGPU способен дать ускорение далеко не для всякого алгоритма. так же, как белаз не годится для f1


Цитата:

лучшие соотношение скорость/размер

используй режим по умолчанию (-m4)


Цитата:

я что то не нашел упоминания 4x4 в документации, а также фильтра disPack (я так понял это подобие exe котоырй BCJ )

дока старая, читай этот форум


Цитата:

freearc не использует 7z пр открытии rar файлов ?

использует 7z.dll


Цитата:

Однако, если в каталоге находятся несколько уже пожатых файлов (arc), то при повторном запуске батника происходит обновление (!) архивов. Из чего? Файлов-то с расширением bkf больше нет!

команда m, как и команда a, обновляет архив. с нуля - "create -d"


Цитата:

arc a -tzip -r e.zip

я сейчас над этим работаю, проверишь в след. версии

Цитата:

Просто роскошный был бы архиватор, если бы:
- была многотомность (но только не так, как в 7-zip=)
- SFX (с многотомностью) и с пользовательскими картинками, как в RAR

круто будет

да, чего я спросить-то хотел. я собираюсь наконец-таки добавить в hfcb какую-нить игрушку побольше. что взять? da-origins, starwars, mass-effect? думаю, видео просто обрежу. хорошо бы если бы она показывала преимущество srep и precomp, и при этом была широко известна. и очень неплохо было бы чтоб она была доступна на free torrent'ах, причём англоязычных. чтоб любой мог скачать, распаковать, стереть лишнее и перепроверить результаты тестов

Bulat_Ziganshin
думаю Da Origins
там объем большой
нетипично для остальных (вроде gta4 тоже моного)

Цитата:

я собираюсь наконец-таки добавить в hfcb какую-нить игрушку побольше. что взять?

мона тот же lost planet 2, чуть более 20гб после прекомпа и 6-7 гб после srep'a. Видео там по минимуму. Масс эффект тут не конкурент.

Кстати, тут очередной раз оптимизировал иконку с почти не заметными потерями для минимального размера. Скрин прилагается.

http://rghost.ru/3499950

Подскажите, а архиватор развивается? Не засох проект? Посмотрел на сайте архиватора раздел "Планы на будущее" - судя по нему, уже должна быть на подходе версия 0.9...

Хочется "archive recovery, чтоб было не хуже чем в rar".

Добавлено:
Подскажите, а архиватор развивается? Не засох проект? Посмотрел на сайте архиватора раздел "Планы на будущее" - судя по нему, уже должна быть на подходе версия 0.9...

Хочется "archive recovery, чтоб было не хуже чем в rar".

Добавлено:
Подскажите, а проект жив, не засох еще?
Зашел на сайт, судя по разделу "FreeArc — планы на будущее" уже должна быть на подходе версия 0.9..

хочется реализации "archive recovery, чтоб было не хуже чем в rar"

Да и хрен с ними, с планами. Это дело, конечно, хорошее, но не гоните Булата, чих-пых тяп-ляп лишь бы скорее- никому, я полагаю, здесь не нужно. Пусть запиливает себе помаленьку.

Вот говорят, что один крупный сетевой мегасупермаркет убивает в городе весь малый торговый бизнес в радиусе нескольких километров. Товарищ Зиганшин производит подобный эффект в своей нише. Причём делает он это в мировом масштабе. Если он реализует всё то, что задумал сам, и что просили юзвери - он рискует стать первым и если не убить, то сильно подубасить всех остальных.

Потому что:

WinRK - вечная многолетняя глючная сырость, да и тормозной - соотношение скорость/сжатие лучше у FA. Гуй коряв и неудобен и непонятен. SFX модуль просто никакущий. Платный. Закрытый. Многотомит глючно. Развивается в час по чайной ложке, а теперь с недавних пор и вовсе сайт проекта испарился (может и временно).

WinRAR - закрытый и платный. Но уж больно хорош по дружественности, здорово уже вылизан, NTFS аттриб. понимает. Многотомит хорошо, SFX устраивает. Но на форумах, в т.ч. импортных - можно встретить мнения о его стагнации и чрезмерной консервативности. В офис скорее поставят бесплатный и открытый арх. софт. К тому же, на некотором сжимаемом материале он проигрывает другим. Порой много, к сож. Не предлагает того разнообразия методов криптования архивов, как другие. Фильтров меньше. В лине только распаковка (?). Но для меня RAR- пока ещё лучший универсальный выбор.

WinZip - анахронизм, к которому я до сих пор испытываю тёплые чувства. Масса врождённых ограничений. Да и не оптимизируют его что-то. На многоядерность процессоров ему плевать, поэтому медлителен и жмёт совсем уж неприлично плохо. Понятно, что не это решает, но тут уж из рук вон просто.

7-Zip - И открыт, и жмёт хорошо, Им не брезгуют M$, Adobe и кто-то там ещё. Много чего в нём есть. Но реализация многотомности это уж ну просто швах. Такое впечатление что "на отгребись" делалось. Многотомники я им создавать не буду просто никогда. Если из РАРа в случае чего ещё можно будет ну хоть что-то достать, то тут лишь помахать платочком и смахнуть скупую слезу. С автоподбором алг.сжатия совсем беда- приходится людям городить какие-то костыли в виде спецутилит. Создаётся впечатление, что за всё время его существования, он развивается медленнее, чем ФриАрк.

FreeArc - крайне рискует стать просто конфеткой, открыт, бесплатен, криптование на выбор, скорость/сжатие - просто великолепно, полно фильтров.. Важный фактор - он самый поздний из всех (?) и это даёт ему возможность, вобрать всё лучшее от других и избежать тех граблей, на которые уже наступали более древние проекты (свои алгоритмы шифрования, свои эл. подписи и проч). Его лидерство уже доказано в известной тестовой таблице, и он, похоже, уже достиг потолка разумного соотношения скорость/сжатие. Или очень у нему близок по кр.мере. Не знаю почему, но я верю в него.

Остальные - все другие скорее уж для гиков и энтузиастов, часто не дружественны, не продуманы, и даже гуй отсутствует. Чтобы получить преимущество в неск. процентов - готовы жать сутками напролёт.

есессно всё моё личное имхо, обычного ламера и юзера, простого человека из толпы, как он это видит. Булату - успеха

Цитата:

мона тот же lost planet 2, чуть более 20гб после прекомпа и 6-7 гб после srep'a

посмотрел я сегодня. для демонстрации precomp+srep он прекрасно подойдёт, а для общего теста нет - после srep там вообще ничего уже не жмётся

CTAPuK2010
в исходниках 7-zip видно, что Игорь работает над новой реализацией томов, но только когда она будет готова... кстати, есть ещё PowerArchiver - удобный front-end (с рюшечками а-ля WinZip) с автовыбором алгоритма в 7-zip, многопоточным сжатием в zip

Цитата:

PowerArchiver

а он у меня почему-то не прижился, не знаю, к тому же вызывал ощущение перегруженности интерфейса, хотя, возможно, это и добротная вещь. О том, что там был многопоток и автовыбор узнал только здесь и сейчас. Но вобщем хватает пока и рара, а уж с многотомным фа я и думать забуду обо всём остальном, в том числе наверное и о самом раре ;o)

Цитата:

WinRK - вечная многолетняя глючная сырость, да и тормозной - соотношение скорость/сжатие лучше у FA. Гуй коряв и неудобен и непонятен. SFX модуль просто никакущий. Платный. Закрытый. Многотомит глючно. Развивается в час по чайной ложке, а теперь с недавних пор и вовсе сайт проекта испарился (может и временно).

WinRK 3.4.2 от 2 декабря 2010
http://www.winrk.co.uk/downloads.htm

А версия 3.1.2 любимая всеми, там даже не упоминается.
Почему-то новые версии на http://www.maximumcompression.com/index.html
не протестированы.

По вашей ссылке там написано:


Цитата:

WinRK is a trademark of ChuSan Services

wtf??

На офиц. странице (таки воскресла) разработчика msoftware.biz ещё только версия 3.1.2