![](/img/trans.png)
[英]AsyncHTMLSession returns responses list disorderly! How to sort or make list ordered?
我發現 async requests-html 比使用 BeautifulSoup 進行解析的簡單請求有用得多。但是當我使用 function asession.run 作為我的異步函數時,結果以無序的方式返回響應,如果我為async function 給我的回應是 url 作為對其進行排序的關鍵 ...
[英]AsyncHTMLSession returns responses list disorderly! How to sort or make list ordered?
我發現 async requests-html 比使用 BeautifulSoup 進行解析的簡單請求有用得多。但是當我使用 function asession.run 作為我的異步函數時,結果以無序的方式返回響應,如果我為async function 給我的回應是 url 作為對其進行排序的關鍵 ...
[英]Having trouble extracting the URL from a website
所以我想為側邊欄上的所有按鈕提取 url,但我似乎無法通過第一個按鈕,而且我不知道為什么或如何修復它。 不幸的是,這是一項任務,所以我無法導入任何其他內容。 這是我試過的代碼 我有 我在期待 ...
[英]How to scrape a table but 'not a table' from a page, using python?
謙虛的問候,歡迎任何願意在這里度過時光的人。 我將自我介紹為數據科學的一個非常新的學生,也是 python。這個線程旨在從更幸運的頭腦中獲得洞察力,能夠更深入地理解 python 的 realm。 如我們所見,在頁面檢查中可以很容易地找到每一行本身的值。 但似乎他們都在使用相同的 class 名 ...
[英]How to use a URL list (.txt) in python correctly?
我需要檢查無限數量的網站的可用性,你能告訴我如何實現一個 URL 列表,以便腳本從 the.txt 讀取 URL 並循環每個 URL 嗎? 我的近似非工作代碼: ...
[英]Python requests doesn't return same result as using browser
我正在嘗試使用請求基本上使用請求和 BeautifulSoup 來抓取某些網站。我遇到的問題是使用請求get不會返回與使用瀏覽器時相同的結果。 我知道請求不支持 Javascript,但我正在努力解決這個問題。 如果我在 Chrome 上禁用 Javascript 並轉到 Instagram 個人資 ...
[英]Scrape website using httpx and requests returns a timeout
我正在嘗試抓取此網站https://www.blibli.com/p/facial-tissue-tisu-wajah-250-s-paseo/is--LO1-70001-00049-00003?seller_id=LO1-70001&sku_id= LO1-70001-00049-0000 ...
[英]Requests-html: searching for the xpath of an element returns an empty list
我正在嘗試從該網站抓取數據: myworkdayjobs 鏈接我要收集的數據是招聘廣告及其各自的數據。 目前有 7 個職位處於活動狀態。 在檢查頁面上,我可以看到 7 個想要的元素都具有相同的元素:li class="css-1q2dra3" 但是 page.html.xpath() 總是返回一個空 ...
[英]AttributeError: 'list' object has no attribute 'absolute_links'
Output 我想獲取每個產品的鏈接,而不是通過 requests-html 庫從該網站抓取一些數據,但我收到屬性錯誤。請幫助我。檢查網站 html ...
[英]Web scrape of forbes website using requests-html
我正在嘗試從https://www.forbes.com/best-states-for-business/list/#tab:overall中抓取列表 這將返回 -1,而不是表內容。 我怎樣才能得到實際的表格內容? ...
[英]How to read a webpage table using requests-html?
我是 python 的新手,正在嘗試將給定網站的表格解析為 PANDAS DATAFRAME。 我正在使用模塊 requests-html、requests 和 beautifulSoup。 這是網站,我想從以下位置收集表格: https://www.aamc.org/data-reports/w ...
[英]PYTHON: no response in html
所以我試圖創建一個簡單的頁面是在單擊“提交”按鈕后我得到了“它有效”的響應。,(為了讓我得到更大的地方,這是非常簡單的事情。習慣這部分編碼) .. 唯一的問題是我沒有在 html 中收到回復。? 有什么建議嗎? **服務器: ** ***客戶: ...
[英]use webscraping to extract Tesla revenue data
AttributeError:'dataframe' object 沒有屬性到'Tesla Revenue' 這是我試過的 output ...
[英]Connection error for requests and BeautifulSoup4. Last night my code worked and I haven't changed anything
我正在編寫執行 web 抓取的代碼。 我試圖從劍橋詞典網站獲取 HTML 代碼,但彈出一條錯誤消息。 如果您能告訴我錯誤的原因和解決此問題的方法,我將不勝感激。 這是我的代碼: 但是,錯誤發生在html = requests.get(url, headers=headers).text 錯誤信息如下 ...
[英]Getting None Value/Error from Selenium execute_script, scraping from ASX.au web
大家好,請幫我解決這個問題,我被困在這里一天了。 我正在嘗試從此處的內容中提取標題。 並且是網站的控制台。 請幫助。!提前致謝。 ...
[英]Web scraping with python/BeautifulSoup - Response 403 (minimal working example)
我正在嘗試學習 web 與 Python 的抓取。我正在嘗試編寫一個腳本來讀取 SNCF(法國 rail.network)網站,並在提交表格后的給定日期返回給定路線的最低價格。 但是我在第一關就倒下了。 我有以下內容: res給出<Response [403]> res.html. ...
[英]How to #document frames in beautifulsoup that has microsoft excel schema?
正如標題所說,我正在抓取一個包含一組學校列表的網站。 單擊它,將您重定向到另一個使用xmlns:urn:schemas-microsoft-com:office:excel的.htm網站。 我想要的只是訪問學校的名稱 email 及其網站,我相信我可以自己完成,稍后我會將其導出到 csv 文件中。 ...
[英]resquest redirection handling : error on getting data while bs4 parsing
更新:這是因為現在 javascript 重定向,所以信息不再在我用來報廢的鏈接上。 如何在循環中獲取重定向鏈接? 我的代碼需要幫助,前段時間創建了一個代碼來通過湯提取並請求解析 html 的一些信息。 現在代碼出錯了,我不知道為什么。 這是錯誤: /Procurement/Modules/RFB ...
[英]How to access a website that gives UnAcceptable error message: 406?
在搜索了 100 多個答案后,我再次來到這里,提出可能對未來某人有所幫助的新問題。 我正在瀏覽這個網站: https://inview.doe.in.gov/state/1088000000/school-list 。 學校名單在一個彈性框中,我相信我可以使用 selenium 獲取數據。 但我只 ...
[英]Python requests from HTML are returning blanks?
編程新手並嘗試使用 ATBS 和 web 學習 Python。我在發送請求時遇到了問題,我得到的回報是空白? 我問了 Reddit,甚至將文件下載為 .txt 文件,我在其中發現了兩次提到我試圖找到的號碼。 但是我正在獲取的 CSS 路徑選擇器正在輸出 []? 我通過 HTML 找到了該號碼的其他 ...
[英]Requests-html not getting all links
我正在嘗試抓取一個網站,但看起來我無法訪問所有鏈接。 該網站是: https://www.carrefour.es/supermercado/bebidas/refrescos/colas/cat650010/c?ic_source=portal-y-corporativo&ic_medi ...