使用WCF发送大数据而不进行流式传输

Question

我们正在尝试构建一个可以从kb~gb大小发送/接收大型数据文件的Web服务。

我知道我们应该使用流式传输来预先形成，这样就不会破坏内存。

但问题是我们不想改变我们的设计，或者更像是，现在我们将尝试看看当我们在带有WCF的byte []缓冲传输模式中传输大文件时只会说150mb文件时会发生什么。 （我知道是goign将整个文件缓冲到内存中...如果我们传输gb大小的文件会崩溃/异常......）

但即使这样，他们也想看看会发生什么，所以我在WCF配置中有我的wsHttpBinding：

  <system.web>
    <compilation debug="true"/>
      <httpRuntime maxRequestLength="524288"/>
  </system.web>
....

  <wsHttpBinding>
    <binding name="wsHttpBinding1" closeTimeout="00:10:00" openTimeout="00:10:00"
          receiveTimeout="00:30:00" sendTimeout="00:30:00" bypassProxyOnLocal="false"
          hostNameComparisonMode="StrongWildcard"                  
                                    maxBufferPoolSize="52428800" maxReceivedMessageSize="65536000"
          messageEncoding="Mtom" useDefaultWebProxy="true">
      <security mode="None" />
    </binding>
  </wsHttpBinding>

然后我的客户端应用配置：

          <wsHttpBinding>
                <binding name="WSHttpBinding_IPrintService" closeTimeout="00:01:00"
                      openTimeout="00:01:00" receiveTimeout="00:30:00" sendTimeout="00:30:00"
                      bypassProxyOnLocal="false" transactionFlow="false" hostNameComparisonMode="StrongWildcard"
                                    maxBufferPoolSize="52428800" maxReceivedMessageSize="65536000"
                      messageEncoding="Mtom" textEncoding="utf-8" useDefaultWebProxy="true"                           
                      allowCookies="false">
                      <readerQuotas maxDepth="32" maxStringContentLength="8192" maxArrayLength="16384"
                            maxBytesPerRead="4096" maxNameTableCharCount="16384" />
                      <reliableSession ordered="true" inactivityTimeout="00:10:00"
                            enabled="false" />
                  <security mode="None"/>
                </binding>
          </wsHttpBinding>

当我传输小数据时它工作正常，但当我尝试传输150mb文件时，它给了我例外：

InnerException = {“无法将数据写入传输连接：无法执行对套接字的操作，因为系统缺少足够的缓冲区空间或因为队列已满。”}

我试图增加maxReceivedMessage等，但它仍然有同样的问题....

======

编辑：我试图将所有可能的值增加到... 2147483647 ....我可以成功发送一个30mb文件..但仍然不是150mb ....而且我也尝试使用这个CustomBinding：

<customBinding>         
        <binding name="LargeCustomBinding" 
                 receiveTimeout="01:00:00"  
                 openTimeout="01:00:00"  
                 closeTimeout="01:00:00"  
                 sendTimeout="01:00:00"> 
          <binaryMessageEncoding  
            maxReadPoolSize="2147483647"  
            maxSessionSize="2147483647"  
            maxWritePoolSize="2147483647"> 
            <readerQuotas  
              maxArrayLength="2147483647"  
              maxDepth="2147483647"  
              maxBytesPerRead="2147483647"  
              maxNameTableCharCount="2147483647"  
              maxStringContentLength="2147483647" /> 
          </binaryMessageEncoding> 
          <httpTransport  
            maxBufferSize="2147483647"  
            maxReceivedMessageSize="2147483647"  
            maxBufferPoolSize="2147483647"/> 
        </binding> 
      </customBinding>

但我仍然遇到同样的问题......

=========

编辑2：我想我应该关注我如何发送数据，也许我错了，我有一个Object MyData：

    byte[] LargeData = File.ReadAllBytes(this.LargeDataPath.Text);
    MyData.LargeData = new List<KeyValuePair<string, byte[]>>()
    {
        new KeyValuePair<string, byte[]>("DATA", LargeData)
    };

    myServiceClient.SendDataAsync( new SendDataRequest(MyData));

应该没有问题？ 我所做的只是在列表中发送一个大字节[] .....

Answer 1

您应该使用单独的发送方法调用发送较小的数据块。

将要发送的数据放入字节数组中。 然后实现两端的逻辑，知道如何处理大小，并开始逐个发送数据。 当您发送完整个文件后，它将连接到客户端上的数组中，您将能够进行进一步处理。

Answer 2

首先修复此问题：

maxStringContentLength="8192"
maxArrayLength="16384"

并确保你拥有

maxStringContentLength="2147483646"
maxArrayLength="2147483646"

在客户端和服务器上。

我在没有问题的情况下向WCF发送30Mb。

看看这个