使用Future在App引擎上异步urlfetch Http发布

Question

我的目标是从appengine（java）快速向服务器发布帖子。 我正在尝试使用UrlFetchService.fetchAsync做到这一点。 在撰写此博客文章之后，我一直基于我的代码。 我已经可以使用下面的代码发出请求，但是出现一些奇怪的行为：

private void futureRequests() {
    URLFetchService fetcher = URLFetchServiceFactory.getURLFetchService();
    URL url = new URL("https://someserver.com");

    FetchOptions fetchOptions = FetchOptions.Builder.withDefaults();
    fetchOptions.doNotValidateCertificate();
    fetchOptions.setDeadline(60D);

    ArrayList<Future<HTTPResponse>> asyncResponses = new ArrayList<Future<HTTPResponse>>();

    for (int i = 0; i < postDatas.size(); i++) {

        HTTPRequest request = new HTTPRequest(url, HTTPMethod.POST, fetchOptions);
        request.setPayload(postDatas.get(i).getBytes(UTF8));
        HTTPHeader header = new HTTPHeader("Content-Type", "application/x-www-form-urlencoded;charset=UTF-8");
        request.setHeader(header);
        header = new HTTPHeader("Content-Length", Integer.toString(postDatas.get(i).getBytes().length));
        request.setHeader(header);
        header = new HTTPHeader("Authorization", "auth=" + authToken);
        request.setHeader(header);
        Future<HTTPResponse> responseFuture = fetcher.fetchAsync(request);
        asyncResponses.add(responseFuture);
    }

    for (Future<HTTPResponse> future : asyncResponses) {
        HTTPResponse response;
        try {
            response = future.get();
            int responseCode = response.getResponseCode();
            resp.getWriter().println("response: " + responseCode);
            logger.warning("Response: " + responseCode);

        } catch (Exception e) {
        }
    }
}

奇怪的行为是我在服务器上收到了重复的帖子，并且根据我的appstats页面，我使用的urlFetches比上面的代码添加的多10到20倍。 以下是我的appstats屏幕：

屏幕上无法容纳更多的urlFetch调用。 似乎请求仍以同步方式完成（圈出的项目），但是似乎同时进行了许多urlFetches。 我的问题是，当我只有14个Future时，如何将所有这些调用传递给urlFetch？ 服务器是否会给出错误消息或503和urlFetch重试直到通过？ 我如何为每个请求获得2个帖子？

我知道可以使用任务队列执行asyc请求，但是我处理的请求数量相对较少（20-100），启动另一个实例的冷启动时间可能对我来说不是一个好选择情况。 任何人都可以解释这种行为或对此有经验吗？

Answer 1

这仅仅是我的代码中的一个错误，导致我的应用程序发出了比我想象的更多的请求。