Сжатие и декомпрессия данных с использованием zlib в Nodejs

Может кто-нибудь объяснить мне, как библиотека zlib работает в Nodejs?

Я новичок в Nodejs, и я еще не уверен, как использовать буферы и потоки.

Мой простой сценарий - это строковая переменная, и я хочу либо zip, либо unzip (deflate или inflate, gzip или gunzip и т.д.) строку в другую строку.

т.е. (как я ожидаю, что это сработает)

var zlib = require('zlib');
var str = "this is a test string to be zipped";
var zip = zlib.Deflate(str); // zip = [object Object]
var packed = zip.toString([encoding?]); // packed = "packedstringdata"
var unzipped = zlib.Inflate(packed); // unzipped = [object Object]
var newstr = unzipped.toString([again - encoding?]); // newstr = "this is a test string to be zipped";

Спасибо за помощь:)

Ответ 1

Обновить. Не понял, что в node 0.5 появился новый встроенный модуль "zlib". Мой ответ ниже для стороннего node -zlib module. Обновит ответ для встроенной версии на мгновение.

Обновление 2. Похоже, что может возникнуть проблема со встроенным "zlib". Код образца в документах не работает для меня. Результирующий файл не является gunzip'able (для меня не получается "неожиданный конец файла" ). Кроме того, API этого модуля не особенно подходит для того, что вы пытаетесь сделать. Это больше для работы с потоками, а не с буферами, тогда как модуль node -zlib имеет более простой API, который проще использовать для буферов.

Пример дефляции и раздувания, используя сторонний модуль node -zlib:

$ node

> // Load zlib and create a buffer to compress
> var zlib = require('zlib');
> var input = new Buffer('lorem ipsum dolor sit amet', 'utf8')

> // What 'input'?
> input
<Buffer 6c 6f 72 65 6d 20 69 70 73 75 6d 20 64 6f 6c 6f 72 20 73 69 74 20 61 6d 65 74>

> // Compress it
> zlib.deflate(input)
<SlowBuffer 78 9c cb c9 2f 4a cd 55 c8 2c 28 2e cd 55 48 c9 cf c9 2f 52 28 ce 2c 51 48 cc 4d 2d 01 00 87 15 09 e5>

> // Compress it and convert to utf8 string, just for the heck of it
> zlib.deflate(input).toString('utf8')
'x???/J?U?,(.?UH???/R(?,QH?M-\u0001\u0000?\u0015\t?'

> // Compress, then uncompress (get back what we started with)
> zlib.inflate(zlib.deflate(input))
<SlowBuffer 6c 6f 72 65 6d 20 69 70 73 75 6d 20 64 6f 6c 6f 72 20 73 69 74 20 61 6d 65 74>

> // Again, and convert back to our initial string
> zlib.inflate(zlib.deflate(input)).toString('utf8')
'lorem ipsum dolor sit amet'

Ответ 2

Для всех, кто наткнется на это в 2016 году (а также задается вопрос о том, как сериализовать сжатые данные в строку, а не в файл или буфер) - похоже, что zlib (поскольку node 0.11) теперь предоставляет синхронные версии своих функций, которые не требуют обратных вызовов:

var zlib = require('zlib');
var input = "Hellow world";

var deflated = zlib.deflateSync(input).toString('base64');
var inflated = zlib.inflateSync(new Buffer(deflated, 'base64')).toString();

console.log(inflated);

Ответ 3

Ответ на брофе очень велик, и именно так я хочу, чтобы все работало. Для меня node настаивал на обратных вызовах. Это выглядело так:

var zlib = require('zlib');
var input = new Buffer('lorem ipsum dolor sit amet', 'utf8')


zlib.deflate(input, function(err, buf) {
    console.log("in the deflate callback:", buf);

    zlib.inflate(buf, function(err, buf) {
            console.log("in the inflate callback:", buf);
            console.log("to string:", buf.toString("utf8") );
    });

});

который дает:

in the deflate callback: <Buffer 78 9c cb c9 2f 4a cd 55 c8 2c 28 2e cd 55 48 c9 cf c9 2f 52 28 ce 2c 51 48 cc 4d 2d 01 00 87 15 09 e5>
in the inflate callback: <Buffer 6c 6f 72 65 6d 20 69 70 73 75 6d 20 64 6f 6c 6f 72 20 73 69 74 20 61 6d 65 74>
to string: lorem ipsum dolor sit amet