从勤杂工到请求帖子的管道流

I have multipart/form-data我要发布到快速端点/data/upload，形成以下标记：

form(enctype="multipart/form-data", action="/data/upload", method="post")
  input(type="file", name="data")

我在用着busboy读取文件流，工作正常。从那里，我想再次发送流multipart/form-data到第二个 Java 后端，使用requestnpm 模块。 JS客户端/Java服务器代码如下：

  req.busboy.on('file', function (fieldName, fileStream, fileName, encoding, mimeType) {

    var reqBody = {
      url: server.baseURL + 'api/data',
      headers: {
        'Connection': 'keep-alive',
        'Content-Type': 'multipart/form-data'
      },
      formData: {
        file: fileStream
      }
    };

    request.post(reqBody, function (err, r, body) {
      // Do rendering stuff, handle callback
    });
 });

Java 端点（api/数据）

@POST
@Consumes(MediaType.MULTIPART_FORM_DATA)
public void addData(FormDataMultiPart formDataMultiPart) {
  // Handle multipart data here      
}

我认为我没有正确发送文件multipart/form-data在这里......但我很难弄清楚如何从本质上通过管道传输流busboy直接到request无需从客户端的临时文件中读取/写入。有任何想法吗？

Java 堆栈跟踪：

Apr 27, 2016 5:07:12 PM org.glassfish.jersey.filter.LoggingFilter log
INFO: 3 * Server has received a request on thread qtp1631904921-24
3 > POST http://localhost:8080/api/data
3 > Connection: keep-alive
3 > Content-Length: 199
3 > Content-Type: multipart/form-data; boundary=--------------------------331473417509479560313628
3 > Host: localhost:8080

Apr 27, 2016 5:07:12 PM org.glassfish.jersey.filter.LoggingFilter log
INFO: 3 * Server responded with a response on thread qtp1631904921-24
3 < 400

17:07:13.003 [qtp1631904921-24] WARN  org.eclipse.jetty.http.HttpParser parseNext - bad HTTP parsed: 400 No URI for HttpChannelOverHttp@425137da{r=1,c=false,a=IDLE,uri=null}

拉哈特建议的改变:

 31     var reqBody = {
 32       url: server.baseURL + 'data',
 33       headers: {
 34         'Connection': 'keep-alive',
 35         'Content-Type': 'multipart/form-data'
 36       }
 37     };
 38 
 39     req.pipe(req.busboy.pipe(request.post(reqBody)));

抛出错误：

Error: Cannot pipe. Not readable.
   at Busboy.Writable.pipe (_stream_writable.js:154:22)

这里的问题是您需要手动为分段上传提供“Content-Length”，因为request https://github.com/request/request（以及底层的form-data https://github.com/form-data/form-data）自己无法弄清楚。 因此请求发送无效的 Content-Length: 199 （对于任何传入文件大小都相同），这会破坏 java 多部分解析器。

有多种解决方法：

1) 使用传入请求“Content-Length”

request.post({
  url: server.baseURL + 'api/data',
  formData: {
    file: {
      value: fileStream,
      options: {
        knownLength: req.headers['content-length']
      }
    }
  }
}, function (err, r, body) {
  // Do rendering stuff, handle callback
})

但这会产生一个有点不正确的请求，因为传入的长度包括其他上传字段和边界，但 Busboy 能够解析它而没有任何抱怨

2）等待文件被节点应用程序完全缓冲，然后将其发送到java

var concat = require('concat-stream')
req.busboy.on('file', function (fieldName, fileStream, fileName, encoding, mimeType) {
  fileStream.pipe(concat(function (fileBuffer) {
    request.post({
      url: server.baseURL + 'api/data',
      formData: {
        file: fileBuffer
      }
    }, function (err, r, body) {
      // Do rendering stuff, handle callback
    })
  }))
})

这会增加应用程序的内存消耗，因此您需要小心并考虑使用勤杂工限制 https://github.com/mscdex/busboy#busboy-methods

3）上传前将文件缓冲到磁盘（仅供参考）

• express https://github.com/expressjs/express + multer https://github.com/expressjs/multer- 我建议对网络服务器使用express，它使事情更易于管理，并且multer基于busboy
• 强大 https://github.com/felixge/node-formidable