Node.js https.request with keep-alive header

Question

我想从用户 Facebook 墙上拉帖子。

以下代码片段有效，但它永远不会终止：

var https = require('https');

facebookWall = function(user) {
  var options = {
    host: 'graph.facebook.com',
    port: 443,
    path: '/me/home?access_token=' + user.facebook_token + '&since=' + encodeURIComponent(user.facebook_timestamp),
    method: 'GET',
    headers: {
      'Connection':'keep-alive'
    }
  };

  var req = https.request(options)
  .on('response', function(response) {
    var body = '';
    response.on('data', function(data) {
      body += data;
      try {
        var wallPosts = JSON.parse(body);
        console.log("user " + user.id + " has " + wallPosts.data.length + " new items on their wall");
      }
      catch (e) {
        //console.log("waiting for more data chunks...");
      }
    })
  });
  req.end();

  req.on('error', function(e) {
    console.error(e);
  });
}

我认为这是由'Connection':'keep-alive' header 引起的。 当我将其替换为'Connection':'close'时，脚本将在从 facebook 检索到所有数据后终止。

我希望能够使用 keep-alive header 来防止必须为每个请求创建一个新的 SSL 连接。 我有数千个请求，并且使用 keep-alive header，它只需几秒钟即可完成，而没有 keep-alive header 则需要几分钟。

有谁知道如何做到这一点？ 我对 Node.JS 还很陌生，所以如果我遗漏了一些明显的东西，我深表歉意。

Answer 1

这是因为节点 4.x 中的 https/tls/ssl 尚未实现 keep-alive，我相信 6.x 也是如此。 这就是为什么在节点 websocket-server 中它不能正常工作的原因，请参阅https://github.com/nephics/node-websocket-server/commit/3a732bff6aabe694834d87086a7718be7c0ce138

Answer 2

我注意到您使用的是 https。 取决于您使用的节点版本，但现在结束事件存在一个已知问题。

https://github.com/joyent/node/issues/728

Answer 3

您必须执行以下操作：

1) 把 response.on('end', function() {... 做 output... }); 对于 https.request 不要 output 数据在 response.on('data', ...);

2) 使用 Connection:keep-alive，"close" 会导致性能很差的问题。 我已经做了很多测试，我可以确认这一点。

除此之外：

3）在您的选项中，设置代理，如果您需要并发，请将agent.maxSockets设置为更大的数字。 默认只有 5。

4）您应该考虑制定自己的例程来处理 https.request 超时。 （请 go 到 github/joyent 并搜索它。基本上使用 setTimeout 来发出超时错误）。