» FreeArc (часть 4)

Shuld
1. неточности есть в tor, я их пока не правлю поскольку с ним обычно память не добивают под завязку
2. в данном случае дело наверно не в этом, поскольку freearc решение принимает о создании временного файла ориентируясь на ту же информацию от tor

сделал многопоточную дедупликацию. к сожалению, 5 ГБ/с (пока?) не получилось, всё упёрлось в скорость чтения из дискового кеша (!!!):

Код: SREP 3.91 (multi-threaded)> for %a in (1 2) do @srep64g.exe -m%a -v -nomd5 -l4k i:\4g nul
3,600,625,251: 79.47%. Cpu 667 mb/s ( 6.474 sec), real 2878 mb/s ( 1.502 sec) = 431%
3,520,842,851: 77.70%. Cpu 359 mb/s (12.028 sec), real 2153 mb/s ( 2.007 sec) = 599%

SREP 3.9 (single-threaded)> for %a in (1 2 3) do @srep64g.exe -m%a -v -nomd5 -l4k i:\4g nul
3,600,352,085: 79.46%. Cpu 1135 mb/s ( 3.806 sec), real 1095 mb/s ( 3.946 sec) = 96%
3,531,948,453: 77.95%. Cpu 576 mb/s ( 7.504 sec), real 549 mb/s ( 7.875 sec) = 95%
3,419,303,639: 75.46%. Cpu 135 mb/s (31.933 sec), real 206 mb/s (21.010 sec) = 152%

Не смог найти информацию, подскажите плиз:

С какими максимальными размерами файлов работает этот архиватор? До 2 Гб или больше?
А если 5 Гб - чем архивировать?
Какое максимальное число файлов в архиве при архивации (сжатии)?

с большими файлами проблем нет, на каждый файл тратится порядка 1 кб озу при упаковке и распаковке (это помимо памяти для собственно сжатия), кроме того не поддерживаются имена файлов на диске длиннее 256 симолов

Bulat_Ziganshin

А можно заархивировать, например, 200 000 файлов по 3 Кб формата html?

да, конечно

SREP 3.91 beta released:English release notes
Russian release notes
Download

готов предоставить свой ПК для теста FreeArc 0.70 или какая планируется бета-версия...

[more=подробнее тут]
готов предоставить свой ПК для теста FreeArc 0.70 или какая планируется бета-версия...

Win 7 Ultimate 64bit Rus,
AMD Phenom X4 945 3,0@3,37 GHz (overclock +20%),
ASUS M5A78LM L-X,
DDR3 1600 8Gb (2х4GB)
Nvidia GeForce 440GT 1024/128/DDR5,
Realtek HD Audio 5.1,
500+1000GB HDD's

аська 77054620 или vitalikvolod@gmail.com[/more]

Bulat_Ziganshin
а в именах папок wildcards не поддерживаются что ли?

есть у меня несколько папок abc1, abc2, abc3, ...
а в них файлы вида file.2013-01-01, file.2013-01-02, и т.д.

хотел я сделать архив с файлами за январь со всех папок:

> arc a files_2013-01.arc abc*\file.2013-01*
WARNING: can't read directory "abc*"
WARNING: no files, erasing empty archive

> arc a files_2013-01.arc -n*2013-01* abc*
WARNING: no files, erasing empty archive

> arc a all_files.arc abc*
WARNING: no files, erasing empty archive

я что-то делаю не так?
FreeArc 0.666

Булат, в версии SREP 3.9.1. с параметром m1, m2, m1f, m2f, m1o, m2o вылетает ошибка (http://i5.pixs.ru/storage/1/6/1/faPNG_8447939_8377161.png). WinXPx86
на версии 3.9 полёт нормальный.
С остальным m3-5(o/f) всё нормально

Цитата:

а в именах папок wildcards не поддерживаются что ли?

нет

Edison007007
а у меня успешно работает. попробуй

srep32s.exe -m1 srep64i.exe

Bulat_Ziganshin
точно, если взять экзeшник (любой 32i, 32s, 32m) из папки "exe", то всё нормально.
Но со srep.exe такая ошибка

Edison007007
процессор какой? ты там descript.ion читал?

and finally, SREP breaks 1GB/s barrier for the LZ77-based deduplication:

C:\>srep64g.exe -b64m -mmap -nomd5 -v -s- -l64k-a64/32 z:\4g nul
100%: 4,531,060,447 -> 3,760,453,399: 82.99%.
Cpu 834 mb/s (5.179 sec), real 1028 mb/s (4.202 sec) = 123%

SREP 3.92 beta released:English release notes
Russian release notes
Download

Подскажите, плз, как настроить FA для упаковки каждого файла в папке по отдельности и удаления исходных файлов после окончания архивирования?

tigrr
неужто так трудно запустить программу без параметров и почитать справку?

для удаление файлов после архивирования нужно указать параметр -d (или -df, если удалять надо только файлы, но не папки)
или же вместо команды a (add = добавить) использовать команду m (move = переместить)

а упаковка каждого файла отдельно, как я писал уже в теме 7-zip, делается командой FOR:
for %F in (*.*) do arc a -d "%F.arc" "%F"
(в батнике все проценты надо удвоить - %%F)

sabio

Цитата:

неужто так трудно запустить программу без параметров и почитать справку?

Не трудно, а может и трудно (без параметров?). Но не начинал я ни с DOS, ни со "Спектрума" ни с 3.1.
Моя первая система Win 98. Поэтому привык к GUI и командную строку недолюбливаю, если не сказать больше...
Да и неудобно это при частом применении

tigrr
так а с графической версией программы проблем-то ещё меньше должно быть - все настройки ведь на виду

вот вам чекбокс для удаления файлов после архивирования (третий снизу):
http://freearc.org/ru/screenshots/freearc-add.png

как (и можно ли) отправить каждый файл в отдельный архив через GUI, я не знаю - никогда не пользовался графической версией

sabio

Цитата:

так а с графической версией программы проблем-то ещё меньше должно быть - все настройки ведь на виду

И точно, просто я, открыв главное окно FreeArc, сразу пошёл в "Опции" -- "Редактировать настройки программы", а там ничего такого и в помине нет. Оказуется, доп. опции настроек появляются только при ПКМ на файле/лах и выборе подменю "Добавить в архив". Но вот сохранить эти настройки в профиль и выбирать его по ПКМ на файле/лах, как в WinRAR'е, нельзя.
А каждый файл в отдельный архив можно, отметив на второй закладке этих доп. настроек 1-й чекбокс:

Возникли проблемы с ФА! Апгрейдил систему и теперь ФА не хочет ни паковать ни открывать свои архивы. При упаковке скорость резко уменьшается до 0, а при открывании архива прога зависает намертво. У меня портативный ФА 64 bit последней версии
win 7 64bit sp1
i5 4670 + Turbo Boost
16 Gb ОП, файл подкачки 1-2 Гб

vasulpr

Цитата:

Возникли проблемы с ФА! Апгрейдил систему и теперь ФА не хочет ни паковать ни открывать свои архивы

Во дела! А как апгрейдили? Это только FA начал глючить, всё остальное нормально?

Цитата:

А как апгрейдили?

Заменил мамку, проц и оперативку. + Переустановка windows

vasulpr

Цитата:

Заменил мамку, проц и оперативку. + Переустановка windows

Так это абсолютно новая система! И, теоретически, никакой её связи с FA Portable быть не может.
Та же версия FA Portable должна работать, так же, как и на старой системе. А может в дистрибутиве
FA Portable что-то "побилось"?

Bulat_Ziganshin
Не планируете ли поддержать Евгения Рошала, в плане популяризации поддержки BLAKE2, в архивах FreeArc?

SurferNet
Не помню где, кажется в этом топике, Булат писал, что хочет замутить другой алго (сейчас название не помню), который быстрее МД5 и секурнее.

Bulat_Ziganshin
Помогите разобраться с моим багом! Такая проблема появляется только при подключении FreeArc-LZMA-x64 ,без него все работает нормально!

А что, работа над FreeArc прикращена? А то "FreeArc — планы на будущее" такие планы, что уже не поверишь, что такой архиватор могли забросить.

ozerothik, идёт, просто неторопливо.

Здравствуйте, то ли я что-то не понимаю то ли это какой-то реальный баг:

В результате выполнения команды:
arc create snd.arc snd -m9 -m$wav=tta:s:m3+rep:512mb:128:a99+lzma:ultra:mc10000:512m

Выдается следующий результат:
FreeArc 0.666 creating archive: snd4.arc
Compressed 1,870 files, 51,210,240 => 14,740,340 bytes. Ratio 28.7%
Compression time: cpu 21.01 secs, real 22.82 secs. Speed 2,244 kB/s
All OK

Т.е. следуя этому файлы должны ужаться до примерно до 14мб, но создаваемый архив весит 42 мб !!! В папке snd только *.wav файлы раскиданные по разным каталогам.

Как это понимать? ))

И еще можно ли как-то сжимать файлы упакованный в *.zip контейнер с 0-вым сжатием, т.е. применять особые настройки для файлов находящихся внутри этого контейнера а не к самому контейнеру?