Обратный вызов для обработки завершения трубы

Я использую следующий node.js код для загрузки документов с некоторого URL-адреса и сохранения его на диске. Я хочу получать информацию о том, когда документ будет загружен. я не видел обратного вызова с pipe.Or, есть ли какое-либо событие "end", которое может быть записано при завершении загрузки?

request(some_url_doc).pipe(fs.createWriteStream('xyz.doc'));

Ответ 1

Потоки EventEmitter, поэтому вы можете прослушивать определенные события. Как вы сказали, есть событие finish для запроса (ранее end).

 var stream = request(...).pipe(...);
 stream.on('finish', function () { ... });

Для получения дополнительной информации о доступных событиях вы можете проверить страницу документации по потоку.

Ответ 2

На основе документа nodejs http://nodejs.org/api/stream.html#stream_event_finish, он должен обрабатывать событие writeableStream finish.

var writable = getWriteable();
var readable = getReadable();
readable.pipe(writable);
writable.on('finish', function(){ ... });

Ответ 3

Фрагмент кода для конвейерного контента из сети через http (s) в файловую систему. Поскольку @starbeamrainbowlabs заметил событие finish делает работу

var tmpFile = "/tmp/somefilename.doc";

var ws = fs.createWriteStream(tmpFile);
ws.on('finish', function() {
  // pipe done here, do something with file
});

var client = url.slice(0, 5) === 'https' ? https : http;
client.get(url, function(response) {
  return response.pipe(ws);
});

Ответ 4

Я нашел немного другое решение моей проблемы в этом контексте. Мысль стоит поделиться.

Большая часть примера создает readStreams из файла. Но в моем случае readStream должен быть создан из строки JSON, поступающей из пула сообщений.

var jsonStream = through2.obj(function(chunk, encoding, callback) {
                    this.push(JSON.stringify(chunk, null, 4) + '\n');
                    callback();
                });
// message.value --> value/text to write in write.txt 
jsonStream.write(JSON.parse(message.value));
var writeStream = sftp.createWriteStream("/path/to/write/write.txt");

//"close" event didn't work for me!
writeStream.on( 'close', function () {
    console.log( "- done!" );
    sftp.end();
    }
);

//"finish" event didn't work for me either!
writeStream.on( 'close', function () {
    console.log( "- done!"
        sftp.end();
        }
);

// finally this worked for me!
jsonStream.on('data', function(data) {
    var toString = Object.prototype.toString.call(data);
    console.log('type of data:', toString);
    console.log( "- file transferred" );
});

jsonStream.pipe( writeStream );

Ответ 5

Здесь решение, которое обрабатывает ошибки в запросах и вызывает обратный вызов после записи файла:

request(opts)
    .on('error', function(err){ return callback(err)})
    .pipe(fs.createWriteStream(filename))
    .on('finish', function (err) {
        return callback(err);
    });