python美化组-拉列表/字典

一种可能的解决方案是使用正则表达式提取原始JSON对象,然后可以使用JSON库加载该对象。

from bs4 import BeautifulSoup
from urllib.request import urlopen
import re
import json

html_page = urlopen("https://fantasydata.com/nfl-stats/team-details/CHI")
soup = BeautifulSoup(html_page, "html.parser")
raw_data = re.search(r"vm.Roster = (\[.*\])", soup.text).group(1)
data = json.loads(raw_data)

print(data[0]["Name"])  # Cody Parkey

应该指出的是,以这种方式从特定网站上删除数据很可能违反了他们的服务条款,甚至在某些法域可能是非法的。