[英]How to get some specific real-time data from several websites continuously using Python (Django)?
[英]How to get some data in real time from a website using python?
我想从网站获取一些数据
https://web.sensibull.com/optionchain?expiry=2020-03-26&tradingsymbol=NIFTY
我正在使用 beautifulsoup 库来获取这些数据,并尝试了以下代码:
import requests
import urllib.request
import time
from bs4 import BeautifulSoup
url = 'https://web.sensibull.com/optionchain?expiry=2020-03-26&tradingsymbol=NIFTY'
response = requests.get(url)
soup = BeautifulSoup(response.text, 'html.parser')
b = soup.find("div", {"class": "style__AtmIVWrapper-idZNMX kUMMRI"})
print(b)
但它显示“无”作为输出。
虽然在完整的 HTML 代码中只有一个这个名字的类,但我也试过这个:
for b in soup.find_all('div', attrs={'class':'style__AtmIVWrapper-idZNMX kUMMRI'}):
print(b.get_text())
print(len(b))
但它不起作用。
也试过soup.find("div") 但它没有在输出中显示所需的div 标签,可能是由于存在嵌套的div。
无法获取此数据并继续我的工作。 请帮忙。
可能是一个语法问题,尝试使用soup.find_all("div", class_="style__AtmIVWrapper-idZNMX kUMMRI")
或者只是soup.find("div", class_="style__AtmIVWrapper-idZNMX kUMMRI")
如果对网页抓取和 bs4 感兴趣,请查看文档https://www.crummy.com/software/BeautifulSoup/bs4/doc/#find
如果您正在寻找代码。 这可能会有所帮助:-
from selenium import webdriver
import time
webpage = 'https://web.sensibull.com/optionchain?expiry=2020-03-26&tradingsymbol=NIFTY'
driver = webdriver.Chrome(executable_path='Your/path/to/chromedriver.exe')
driver.get(webpage)
time.sleep(10)
nifty_fut = driver.find_element_by_xpath('//*[@id="app"]/div/div[4]/div[2]/div[3]/div/div/div[2]/div[1]/div[1]/div/button/span[1]/div[1]')
print(nifty_fut.text)
atm_iv = driver.find_element_by_xpath('//*[@id="app"]/div/div[4]/div[2]/div[3]/div/div/div[2]/div[1]/div[2]')
print(atm_iv.text)
driver.quit()
声明:本站的技术帖子网页,遵循CC BY-SA 4.0协议,如果您需要转载,请注明本站网址或者原文地址。任何问题请咨询:yoyou2525@163.com.