Разврат, или новый писк моды. (SFX-архив на РНР)

Итак, наконец-то я завершил с тестами Ниже - два скрипта, создающие sfx срипты. Первый - по методу Владсона, т.е. ресурс инлайн. Второй - по методу размещения ресурса в комментах. Русурсы представляют из себя 100 файлов размером около 50 кил каждый. Каждый пакет весит почти 50 метров. Загрузка каждого из скриптов занимала на моей машине около 15 секунд. Приблизительно столько же времени заняло извлечение. Но, это, собсно, скорее говорит о характиристиках моего винта )))) Как и следовало ожидать, выполнение этих скриптов не сильно отличается по времени. Намного интереснее дела обстояли с памятью. Первый вариант, как уже заметил Владсон, действительно был прожорлив на память. По мере загрузки скрипта было съедено около 60 метров. Второй тоже оказался ресурсоемким, но не таким жадным: им было откушено около 10 метров, и вся эта память была использована на протяжении всей загрузки скрипта, и незначительные всплески наблюдались во время извлечения. Так что, делаю вывод, что хранить ресурсы в комментариях намного более эффективно с точки зрения загрузки памяти.

Но! Я-то поставил ограничение - 2 метра! Видимо, в консольном режиме ему абсолютно все равно, какие у меня там ограничения Поэтому я запустил их еще и из под апача. Второй вроде как послушно отработал в пределах своих двух метров. А первый вывалился. Из-за чего бы вы думали? А вот и нет. Из-за того, что "Maximum execution time of 30 seconds exceeded". И на set_time_limit он внимания не обратил - видимо потому, что даже загрузиться не успел Но из памяти он свои 60 метров все равно пытался откусить, и дошел метров до 40-ка. Почему он не обломился - я не знаю. У меня в пхп.ини стоит "memory_limit = 2M". Что ему еще надо? Просто теряюсь в догадках Народ, потестите пожалуйста кто-нибудь у себя. Уж очень интересно, что с ними будет, когда ограничение памяти работает.

Еще интересная вещь произошла. Сначала во втором варианте я все данные запихнул в один большой коммент. ПХП висел несколько минут. Память росла оооочень медленно. Что он там делал - остается только догадываться. Наверное, зачитался.... В общем, мне стало скучно, и я его убил и переписал с однострочными комментариями

А вот, собственно, код.

Ресурс инлайн

PHP:

1.  
2. <?php
3. set_time_limit(0);
4. $sContent = str_repeat('qwertyuiopasdfghjklzxcvbnmqwertyuiopasdfghjklzxcvb', 1000);
5.  
6. $sSfx = dirname(__FILE__).'/sfx1.php';
7. if (file_exists($sSfx)) unlink($sSfx);
8. $rSfx = fopen($sSfx, 'w');
9.  
10. fwrite($rSfx, "<?php\n");
11. fwrite($rSfx, "set_time_limit(0);\n");
12. fwrite($rSfx, '$sFilesDir = dirname(__FILE__).\'/files1\';'."\n");
13. fwrite($rSfx, 'if (!file_exists($sFilesDir)) mkdir($sFilesDir);'."\n");
14.  
15. for ($i = 0; $i < 1000; $i++) {
16.     $sFilename = "file$i.txt";
17.     fwrite($rSfx, "$"."rFile = fopen($"."sFilesDir.'/$sFilename', 'w');\n");
18.     fwrite($rSfx, "fwrite($"."rFile, '$sContent');\n");
19.     fwrite($rSfx, "fclose($"."rFile);\n\n");
20. }
21.  
22. fwrite($rSfx, "\n?>");
23. fclose($rSfx);
24. ?>
25.  

Ресурс в комментах

PHP:

1.  
2. <?php
3. set_time_limit(0);
4. $sContent = str_repeat('qwertyuiopasdfghjklzxcvbnmqwertyuiopasdfghjklzxcvb', 1000);
5.  
6. $sSfx = dirname(__FILE__).'/sfx2.php';
7. if (file_exists($sSfx)) unlink($sSfx);
8. $rSfx = fopen($sSfx, 'w');
9.  
10. fwrite($rSfx, "<?php\n");
11. fwrite($rSfx, "set_time_limit(0);\n");
12. fwrite($rSfx, <<<SFX
13. \$sFilesDir = dirname(__FILE__).'/files2';
14. if (!file_exists(\$sFilesDir)) mkdir(\$sFilesDir);
15. \$rSelf = fopen(__FILE__, 'r');
16. \$sLine = '';
17. while (!feof(\$rSelf) && \$sLine != "//DATA\\n") {
18.     \$sLine = fgets(\$rSelf, 1048576);
19. }
20. while (!feof(\$rSelf)) {
21.     \$sLine = trim(fgets(\$rSelf, 1048576));
22.     if (\$sLine == "//END") break;
23.     if (!empty(\$sLine)) {
24.         \$iSep = strpos(\$sLine, ':');
25.         \$sFilename = \$sFilesDir.'/'.substr(\$sLine, 2, \$iSep - 2);
26.         \$sContent = substr(\$sLine, \$iSep + 1);
27.         \$rFile = fopen(\$sFilename, 'w');
28.         fwrite(\$rFile, \$sContent);
29.         fclose(\$rFile);
30.     }
31. }
32. fclose(\$rSelf);
33. SFX
34. );
35. fwrite($rSfx, "\n//DATA\n");
36.  
37. for ($i = 0; $i < 1000; $i++) {
38.     $sFilename = "file$i.txt";
39.     fwrite($rSfx, "//$sFilename:$sContent');\n");
40. }
41.  
42. fwrite($rSfx, '//END');
43. fwrite($rSfx, "\n?>");
44. fclose($rSfx);
45. ?>
46.  

 

ммм... а где сжатие?

 

Эти тесты показывают расход памяти на скрипт, содержащий в себе большой объем ресурсов. Нету здесь никакого сжатия. Так же, как и нет чтения каталогов и записи файлов. И вообще эти скрипты не выполняют никакой полезной работы. Они создают файлы с мусором внутри себя. Зачем там сжатие? Возьми скрипт Владсона - там и чтение файлов, и сжатие. А у меня - только распаковка Если потратить пять минут, то можно соединить и наслаждаться. Если соединишь - поделись скриптом. Авось пригодится

 

Хм... у меня идея побредовее... но знаний не очень хватает, что бы сделать заключение о ее работоспособности сразу (это к самомодифицируемому коду и динамической распаковке)... счас тоже попробую... и если получится что нить толковое, то выложу.

 

Горбунов Олег, ПХП интерпретатор, сначала делает лексемизацию всего содержимого файла, и лишь после этого передаёт получившийся опкод в экзекутор. Поэтому чем больше размер файла, тем больше процессорного времени и памяти уйдёт на бесполезную работу. А если памяти потребуется слишком много, будет фатал еррор...

 

2ONK - а причем тут я?

 

А ни при чем! Под горячую руку попался!!! )))))))))))))

видимо, при том, что "Он интерпритатор - т.е. выполняет по этапам"

 

Ну это понятно, что на момент вызова скрипт должен быть лексически правильным. Я подумал о том, что можно паковать каждый скрипт "самого в себя" и распаковывать только при запросе. Естественно, это сработает только для упаковки php кода )

 

Ничего не понимаю! Расскажи плиз поподробнее, что в кого и зачем запаковывать хотишь.

 

ммм... я бы даже добавил, не факт, что это вообще сработает.

 

А я ничерта не понял. Объясните мне кто-нибудь плиз!!! :-D

 

Это что же, как ув. господин Мюнхаузен?... :-D Самого себя - за волосы, да еще и вместе с конем? :-D

 

Блин, ну объесни же мне наконец!!!! ))) Пожалуйста Я ничего не могу понять Можно какую-то схему, пример кода или псевдокода, перечень компонентов, последовательность этапов?...

 

А возможно как нибуть реализовать, чтобы скрипт архивировал не только каталог где он находится, но еще и подкаталоги.
Например скрипт лежит в /home/user/public_html/dir1/ а надо чтоб он заархивировал /home/user/public_html/ и сохранил в /home/user/public_html/dir1/file.tar

 

на нашем сервере активно используется рар для паковки файлов (800мб дампы в 50мб сокрашает)
но вот хотелось бы распаковку -запаковку этого рара простенькую сделать

или рар -закрытый алгоритм,и проще свой архиватор сделать?
просто неохота заново писать то что делал 8 лет назад.
ЗЫ я программу для собрания группы файлов в 1 и сжатия их делал еще на ZX-spectrume
LIBRARY.B причем умудрился все на бейсике написать,даже не прибегая к машинным кодам
(в машинных кодах только обращение к контроллеру дисковода для записи или чтения данных)
(учитывая что архиваторов там у меня вообще не было,эта прога мне 3 года позволяла дискеты экономить
не распространял,т.к. интернета еще не было тогда,а даже если и был то некуда было его воткнуть)

 

да нет, есть вроде расширения. В пекле глянь, да в пеаре.

а в 5.3 все равно уже поддержка phar будет. Правда, чето глючный он какойто

 

Угу. Только он пока своими интерсепторами роняет весь сервер, при вызове функции is_file...

 

Строки 15 и 16, как минимум поменять местами...