jsoup不会刮所有元素吗？

Question

so

当从具有200个元素的网站上抓取数据时，“输出”只是200个元素中的前49个或前50个元素，为什么？ -我该如何解决这个问题。 获取所有200个元素数据？''

Document d = Jsoup.connect("https://www.ebay.com/sch/i.html?_from=R40&_trksid=p2047675.m570.l1313.TR0.TRC0.H0.Xsilver.TRS0&_nkw=silver&_sacat=0").timeout(6000).get();
Elements ele = d.select("div#ResultSetItems");

for (Element element : ele.select("li.shic")) {
    String img_url = element.select("li").attr("listingid");
    System.out.println(img_url);
}

Answer 1

其他元素是Javascript按需获取的，这是当今很常见的，因此它们对于JSoup是不可见的。 没有办法让JSoup执行这些提取，因此您将不得不想出一种比抓取来获取数据更好的方法。 我建议您看看EBay提供的API选项 。