线程池的限制从何而来？

Question

使用以下代码，我发现multiprocessing.pool.ThreadPool的最大大小为11689（在我的机器上）。 如果我加大它，我得到

RuntimeError：无法启动新线程

有人可以解释它的来历吗？ 11689似乎是一个奇怪的系统常量，所以也许我用光了资源？

请注意：这与如何为线程池选择最佳线程数无关。 这个问题是关于11689的来源？

码

Answer 1

简要了解CPython源代码处理线程，这表明在线程创建失败时，解释器不会过多地研究细节 。 它只会引发您看到的RuntimeError 。

根据pthread_create联机帮助页，线程创建可能由于以下错误代码和原因而失败。

EAGAIN资源不足，无法创建另一个线程。

EAGAIN遇到了系统施加的线程数限制。 有许多限制可能触发此错误：达到了RLIMIT_NPROC软资源限制（通过setrlimit（2）设置），该限制限制了实际用户ID的过程和线程数。 达到了内核在系统范围内对进程和线程数的限制，即/ proc / sys / kernel / threads-max（请参阅proc（5））； 或已达到PID的最大数量/ proc / sys / kernel / pid_max（请参阅proc（5））。

...

我的盲目猜测是，您是在引发第一个问题，而不是第二个问题。 您可能会用尽内存来分配新线程。

在此链接中可以找到有关线程创建失败的更深入的解释。

不过，这是一个盲目的猜测。 解释器进行的更详细的错误处理肯定会有所帮助。