如何使用漂亮的汤获取 window.data 中的内容并将其 jsonify 以便我可以选择要打印的键和值？

Question

标题不知道怎么写，所以有点长。 随意编辑它。

我正在尝试从该站点抓取数据，但我无法弄清楚如何使用漂亮的汤访问“window.data”中的各个键和值。

例如，我想获取 yyuid、生日等的值。

代码是这样的：

import urllib.request
import urllib.error
from bs4 import BeautifulSoup
import re

username = "itsahardday"
url = "https://likee.video/@" + username # profile url - https://likee.video/account_name

def get_profile_html():
    '''
    Get profile data from HTML - https://likee.video/account_name
    :return:
    '''
    response = urllib.request.urlopen(url)
    soup = BeautifulSoup(response.read(), "html.parser")
    results = soup.select_one("script:-soup-contains('userinfo')").string
    print(results)

get_profile_html()

最好我希望它为 JSON，但欢迎任何解决方案。

在此先感谢您的帮助！

Answer 1

调整了你的代码。 从 function 返回。

import urllib.request
import urllib.error
from bs4 import BeautifulSoup
import re

username = "itsahardday"
url = "https://likee.video/@" + username # profile url - https://likee.video/account_name

def get_profile_html():
    '''
    Get profile data from HTML - https://likee.video/account_name
    :return:
    '''
    response = urllib.request.urlopen(url)
    soup = BeautifulSoup(response.read(), "html.parser")
    results = soup.select_one("script:-soup-contains('userinfo')").string
    print(results)
    return results # add return

res=get_profile_html() # save the result

然后，转换为 JSON

import json # import
json.loads(res.split(";")[0].split("window.data =")[1])['userinfo']