代码之家 › 专栏 › 技术社区 › Kamikaze_goldfish

请求html页面与浏览器不同

python-requests python

Kamikaze_goldfish · 技术社区 · 8 年前

page = requests.get('https://www.yellowpages.com/new-orleans-la/mip/upperline-restaurant-526381149?lid=1001797484770')
soup = BeautifulSoup(page.text, 'lxml')
# I am trying to find this class 'sales-info' but it isn't in the html when rendered.
business_name = soup.find('div', class_='sale-info')
print(business_name)

1 回复 | 直到 8 年前

sniperd Ali Ahmed 8 年前

看起来只是个小o型, sale-info 应该是 sales-info (注意第二个 s公司 )试试这个:

import requests
from bs4 import BeautifulSoup

page = requests.get('https://www.yellowpages.com/new-orleans-la/mip/upperline-restaurant-526381149?lid=1001797484770')
soup = BeautifulSoup(page.text, 'html.parser')
# I am trying to find this class 'sales-info' but it isn't in the html when rendered.
business_name = soup.find('div', class_='sales-info')
print(business_name)

结果:

<div class="sales-info"><h1>Upperline Restaurant</h1></div>

推荐文章

and · Python模拟-请求。Session()获取请求断言错误,未接听调用

1 年前

Arbixus · 我正试图为联想司机创建一个司机剪贴簿,我在这一点上遇到了困难

1 年前

Canberra · 从网站上删除纬度和经度

2 年前

Advenn · 如何用python向visa-api发送请求

2 年前

RADIO BUTIK · 在引号中插入变量[重复]

2 年前

Mr. Ivan · 如何在bltindex.com上从折线图中提取数据?

2 年前

Dsp guy sam · 尝试使用Python请求读取NSE上市前网站时请求超时

2 年前

Tomer Fikler · 如何在没有硒的情况下使用Python处理百思买登录页上的国家选择?

2 年前

daeda · 如何处理多部分/混合请求

2 年前

prashanth manohar · 使用Python从URL下载Excel文件

2 年前