緩存遠程訪問的網站

Question

我有一個經常檢索遠程網站（通過cURL）的應用程序，我想知道關於緩存這些HTTP請求的選擇是什么。 例如：

application -->curl-->www.example.com

問題在於，cURL可能在一小時內被調用數百次，並且每次都需要發出數百個HTTP請求，這些請求基本上是相同的。 那么，我該如何加快速度呢？ 我正在嘗試使用流量服務器，但對結果並不滿意。 我想DNS緩存是必須的，但是我還能在這里做什么？ 應用運行的系統是CentOS。

Answer 1

我不知道為什么Traffic Server無法提供令人滿意的結果，但是總的來說，帶有緩存的正向代理服務器設置是實現此目的的方法。 您當然可以確保通過緩存代理服務器上的配置或直接在源服務器（example.com）上可緩存來自www.example.com的響應。 這可能是代理緩存世界中最大的混亂，對可緩存或不可緩存內容的期望不符合要求。