Пошаговое сжатие для больших файлов в Stack Overflow

Создание архивированных данных bzip2 в PHP очень легко благодаря его реализации в bzcompress. В моем настоящем приложении я не могу просто прочитать входной файл в строку и затем вызвать bzcompress или же bzwrite, Документация PHP не дает понять, являются ли последовательные вызовы bzwrite При относительно небольших объемах данных будет получен тот же результат, что и при сжатии всего файла одним махом. Я имею в виду что-то вроде

$data = file_get_contents('/path/to/bigfile');
$cdata = bzcompress($data);

Я попробовал частичную bzcompression, используя процедуры, показанные ниже

function makeBZFile($infile,$outfile)
{
$fp = fopen($infile,'r');
$bz = bzopen($outfile,'w');
while (!feof($fp))
{
$bytes = fread($fp,10240);
bzwrite($bz,$bytes);
}
bzclose($bz);
fclose($fp);
}

function unmakeBZFile($infile,$outfile)
{
$bz = bzopen($infile,'r');
while (!feof($bz))
{
$str = bzread($bz,10240);
file_put_contents($outfile,$str,FILE_APPEND);
}
}

set_time_limit(1200);
makeBZFile('/tmp/test.rnd','/tmp/test.bz');
unmakeBZFile('/tmp/test.bz','/tmp/btest.rnd');

Чтобы проверить этот код, я сделал две вещи

• я использовал makeBZFile а также unmakeBZFile сжать, а затем распаковать базу данных SQLite — это то, что мне нужно сделать в конце концов.
• Я создал 50 МБ, заполненный случайными данными dd if=/dev/urandom of='/tmp.test.rnd bs=50M count=1

В обоих случаях я выполнил diff original.file decompressed.file и обнаружил, что оба были идентичны.

Все очень хорошо, но мне не понятно, почему это работает. Документы PHP утверждают, что bzread(bzpointer,length) читает максимум length байты несжатое данные. Если мой код ниже, это потому, что я заставляю bzwite а также bzread размер до 10240 байт.

То, что я не могу видеть, это просто как bzread умеет доставать lenth байты несжатое данные. Я проверил формат файла bzip2. Я не вижу, что там есть что-то, что помогает легко определить длину несжатых данных для фрагмента файла .bz.

Я подозреваю, что в моем понимании того, как это работает, есть пробел, или тот факт, что приведенный ниже код выполняет правильное частичное сжатие, является чисто случайным.

Я был бы очень признателен за несколько объяснений здесь.