繁体   English   中英

使用python在网页上单击“加载更多”

[英]Clicking “Load More” on webpages by using python

我正在尝试加载此链接的全部内容(点击المزيد)

在这里尝试了很多这样的教程,教会如何使用类似的问题(无限滚动页面)。

我的问题是我无法在此页面上指定加载更多类来单击它。 但是,如果我没有弄错的话,它存在于网页源代码的这一部分:

<ng-include src="'loader.html'" class="ng-scope">
    <div class="loading-div ng-scope ng-hide" ng-show="!loadingMoreData">
        <div class="spinner">
            <div class="bounce1"></div>
            <div class="bounce2"></div>
            <div class="bounce3"></div>
        </div>
    </div>
</ng-include>
<div class="block-hed block-link clearfix" data-ng-show="isMoreDisplayed" data-ng-click="getMoreMaterials()">
                    <h4 class="link-border-color"><a href="javascript:void(0)">المزيد </a></h4>
                </div>

我不一定需要实现“click()”或“perform()”之类的任何功能。 任何方式来显示加载下的整个内容更多按钮被考虑。


顺便说一句,这是我的代码到目前为止:

from selenium import webdriver
browser = webdriver.Chrome("/home/aziz/anaconda3/lib/python3.6/site-packages/chromedriver/chromedriver")
am = browser.get("https://sabq.org/%D8%A7%D9%84%D9%85%D9%85%D9%84%D9%83%D8%A9/%D8%A5%D9%82%D8%AA%D8%B5%D8%A7%D8%AF")

更新我在这里使用此链接来解决问题,但没有一个教程工作。

find_element_by_id
find_element_by_name
find_element_by_xpath
find_element_by_link_text
find_element_by_partial_link_text
find_element_by_tag_name
find_element_by_class_name
find_element_by_css_selector

我终于设法解决了这个问题。 我刚刚在我的代码之后添加了这一行

while True:
    browser.find_elements_by_link_text('المزيد')[1].click()

页面开始无限加载所有文章。 我真的不知道المزيد本身是可点击的。 我认为其中包含一个链接。

正确/更好的方法是使用WebDriverWait

from selenium.webdriver.support import expected_conditions as EC

wait = WebDriverWait(driver, 10)
while True:
  element = wait.until(EC.element_to_be_clickable((By.PARTIAL_LINK_TEXT, 'المزيد')))
  element.click()

暂无
暂无

声明:本站的技术帖子网页,遵循CC BY-SA 4.0协议,如果您需要转载,请注明本站网址或者原文地址。任何问题请咨询:yoyou2525@163.com.

 
粤ICP备18138465号  © 2020-2024 STACKOOM.COM