Python：Beautiful湯中的find_all不會返回預期的結果

Question

我有這樣的html：

        <ul class='Whs-nw M-0 items'>
            <li>
                <a href='/news/stocks-hold-slight-gains-amid-140642829.html' class='D-b Fz-s Fw-400' data-ylk='rspns:nav;t3:sub0;elm:hdln;elmt:ct;itc:0;pkgt:15;g:e3b49674-fd8a-3acb-9395-4ac0811af672;ct:1;cpos:2;'>
                <div class='P-0 Whs-n'>
                    <div class='M-0 Pt-2 Ov-h'>


                    <p class='M-0 D-i'>Dow closes down more than 150 as Wal-Mart, Boeing weigh</p>
                    </div>
                </div>
                </a>
            </li>
            ...
        </ul>

我正在嘗試使用Beautifulsoup吸引/news/stocks-hold-slight-gains-amid-140642829.html而我這樣做是：

soup = BeautifulSoup(html)
tmp= soup.find_all('ul', attrs={'class' : 'Whs-nw M-0 items'})

但是當我看着它的時候， tmp是空的。 難道我做錯了什么？

作為參考，我要在此處抓取的頁面是這里 。

Answer 1

確保您使用的是bs4 ，當我在舊版本上使用它時會失敗，但在新版本上可以使用。 因此，您應該這樣做：

from bs4 import BeautifulSoup
...
soup = BeautifulSoup(html)
tmp= soup.find_all('ul', attrs={'class' : 'Whs-nw M-0 items'})

不是from BeautifulSoup import BeautifulSoup 。

Answer 2

嘗試tmp= soup.findAll('ul', {'class' : 'Whs-nw M-0 items'})或tmp= soup.find_all('ul', attrs={'class' : 'Whs-nw M-0 items'})

工作代碼

import urllib2
from bs4 import BeautifulSoup
response = urllib2.urlopen('http://finance.yahoo.com/')
html = response.read()
soup = BeautifulSoup(html, 'html.parser')
tmp= soup.findAll('ul', {'class' : 'Whs-nw M-0 items'})
for i in tmp:
    print i.get_text()

Answer 3

請嘗試以下操作：

temp = soup.find('ul', attrs={'class': 'Whs-nw M-0 items'}).find('a')['href']

或者您可以這樣做：

soup = BeautifulSoup(html)

temp = soup.find('a', {'class': 'D-b Fz-s Fw-400'})['href']

print temp

輸出：/news/stocks-hold-slight-gains-amid-140642829.html