使用Python从Web目录下载多个csv文件并将其存储在磁盘中，并使用锚文本作为文件名

Question

从此URL： http : //vs-web-fs-1.oecd.org/piaac/puf-data/CSV

我想下载所有文件，并将它们与锚标记的文本一起保存。 我想我的主要工作是立即检索锚标记的文本：

from bs4 import BeautifulSoup
import requests
import urllib.request

url_base = "http://vs-web-fs-1.oecd.org"
url_dir = "http://vs-web-fs-1.oecd.org/piaac/puf-data/CSV"

r  = requests.get(url_dir)
data = r.text
soup = BeautifulSoup(data,features="html5lib")

for link in soup.find_all('a'):
    if link.get('href').endswith(".csv"):
        print(link.find("a"))
        urllib.request.urlretrieve(url_base+link.get('href'), "test.csv")

行print(link.find("a"))返回None 。 如何检索文本？

Answer 1

您将获得访问内容的文本，如下所示：

link.contents[0]

要么

link.string