使用Java套接字将大文件传输到多个客户端的最佳方法

Question

我进行了很多研究，但找不到适合该主题的任何东西，因此在这里提出问题。

我想使用Java套接字构建一个类似Dropbox的应用程序，并使用一个社交媒体网站，将我们在共享文件夹上上传的文件自动下载或同步到我们在社交媒体网站中添加的所有朋友系统上。

到现在为止，我一直以为我将运行一台服务器，并且每次客户端连接（登录）时，我将启动2个处理程序，其中1个用于上传，1个用于下载。 DOWNLOAD处理程序将每5分钟从我所有的朋友那里检查一个新文件（这意味着他们在共享目录中添加了新文件），并将对其进行同步。 当处理器从客户端接收到文件时，UPLOAD处理程序会将文件上传到服务器上，并以字节数组形式发送。 客户端使用目录监视程序将数据发送到服务器，以跟踪目录中的更改。

现在的问题是每个客户端启动2个线程，是否可行？ 我认为这将严重降低服务器的速度，因为我想像有100个客户这样说，这意味着200个线程。 你们能为我指出应该采取什么方法的正确方向吗？我读到有关NIO和IO的消息后感到困惑。 另外，有没有什么特别的库对您有帮助？ 我看了Netty和Apache Mina，但不了解它们如何对您有所帮助。

提前致谢 ：）

Answer 1

我建议您看一下有关NIO的文章： https : //today.java.net/pub/a/today/2007/02/13/architecture-of-highly-scalable-nio-server.html 。 如果您的服务器发送文件，还尝试考虑可伸缩性...硬盘驱动器的速度是多少？ 我认为，这比线程数更为重要。 但请注意线程锁定。 为什么要实现网络使之变得如此出色的东西？ 如果我是您，我会比其他有关字节处理的东西更好地考虑安全代理。 即使您要传输文件的多个部分，也可以使用多部分zip文件并以编程方式下载每个部分，然后重新生成该文件。 通过这种方法，您可以将基础结构重用于Web和客户端。 您还可以从现代Web服务器的高IO吞吐量中受益。

Answer 2

当您认为您将拥有大量客户端时，使用标准的Socket和ServerSocket将无法正常工作。 正如您已经指出的那样，每个客户端需要2个线程。 最终，这将耗尽您的所有服务器资源。 您需要的是java.nio包。 在此可以找到SocketChannel和ServerSocketChannel。 通过这些，您可以设置无阻塞套接字通信。 这种通信是基于事件的。 意味着您可以有多个客户端使用服务器上相同的2个线程进行读写。

如果您想了解更多信息，请查看我的Socket编程教程 。 第三部分介绍如何设置非阻塞变体，它应该为您提供入门所需的一切。 如果您仍有疑问，请告诉我，我会尽快帮助您。