Node.js和Express中的Stream Rest API HTTP响应

Question

我正在Node.js和Express中创建Rest API。 它与远程HANA数据库连接并执行一个查询。 现在，我想流式传输HTTP响应，以便可以将其分块发送到浏览器，而不是完全发送，因为它是非常大的数据。

我尝试了一些没有任何输出的东西。 我不知道原因 如果我使用response.send（数据）将完整的响应发送到浏览器，则工作正常。 但是流媒体现在可以工作了。

我在下面添加了代码段。

const express = require("express");
const APP = express();
const HANA_DB = require('hdb');
const BODY_PARSER = require("body-parser");

start();

function start() {
    startServer();
    initializeExpress();
    APP.get("/data", function(request, response) {
        var connection = HANA_DB.createClient({
            host     : "hostname",
            port     : "port",
            user     : "username",
            password : "password"
        });
        connection.on('error', function (error) {
            console.log("Error in database connection...");
        });
        connection.connect(function (error) {
            if (error) {
                console.log("Error in database connection...");
                return;
            }
            var query = "SELECT * FROM TableName";
            connection.exec(query, function(error, result) {
                if(error) {
                    response.send("Getting error while fetching result...");
                    return;
                }
                //response.send(data);
                var datalength = 0;
                request.on('data', function(chunk) {
                    datalength += chunk.length;
                    console.log("DATA EVENT: " + datalength);
                    response.send(datalength);
                })
                .on('end', function() {
                    console.log("END EVENT: " + datalength);
                    response.send(datalength);
                });
            });
        });     
    });
};

function initializeExpress() {
    APP.all('/*', function(request, response, next) {
        response.header("Access-Control-Allow-Origin", "*");
        response.header("Access-Control-Allow-Headers", "X-Requested-With");
        response.header('Access-Control-Allow-Methods', 'PUT, GET, POST, DELETE, OPTIONS');
        response.header('Access-Control-Allow-Headers', 'Content-Type');
        next();
    });
    APP.use(BODY_PARSER.json());
    APP.use(BODY_PARSER.urlencoded({ extended: true }));
};

function startServer(config) {
    var server = APP.listen("8081", function(error) {
        if(error) {
            console.log("Unable to connect to 127.0.0.1:8081");
            return;
        }
        console.log("Server is listening at - 127.0.0.1:8081");
    });
};

Answer 1

问题出在这里request.on('data', 。 request是指浏览器的请求。

您不能将流与.exec() ，因为exec的回调函数是使用行作为参数来调用的。

要使用流式传输 ，请使用.execute()方法，该方法将结果集传递给回调函数。

我从未使用过hdb ，所以我无法提供使用的代码。

Answer 2

我认为您正在使用的逻辑在传输数据时是错误的。

使用res.write而不是res.send，并且还必须从数据库中读取流数据，而不是一次使用connection.exec。

我给您一个示例代码，您将在其中获得有关Expressjs中流数据的一些想法。

var http = require( 'http' );

http.createServer( function ( req, res ) {
res.writeHead( 200, {
    'Content-Type': 'text/plain; charset=utf-8',
    'Transfer-Encoding': 'chunked',
    'X-Content-Type-Options': 'nosniff'
} );
res.write( 'Beginning\n' );
var count = 10;
var io = setInterval( function () {
    res.write( 'Doing ' + count.toString() + '\n' );
    count--;
    if ( count === 0 ) {
        res.end( 'Finished\n' );
        clearInterval( io );
    }
}, 1000 );
} ).listen( 8000 );