代码之家 › 专栏 › 技术社区 › Zack

从网站上删除音乐播放列表信息

screen-scraping beautifulsoup html python

Zack · 技术社区 · 9 年前

我正在尝试从一个我喜欢的每日广播节目的在线播放日志中删除艺术家和歌曲的名字。我想最终使用这些收集到的数据,使用python在Spotify或Youtube上编译播放列表。

为什么我的代码不能检索并打印所有歌曲?

import urllib2
from bs4 import BeautifulSoup # latest version bs4

soup = BeautifulSoup(urllib2.urlopen("http://music.cbc.ca/#!/The-Signal").read(), 'lxml')

song = soup.find_all("span", {'class': 'logTrackTitle'})

print song

My code

1 回复 | 直到 9 年前

Greg Sadetsky 9 年前

使用Chrome DevTools浏览页面,您会发现页面的“广播日志”部分实际上是一个具有不同URL的iframe。这就是歌曲列表的“来源”。

将iframe的URL交换到代码中会正确返回歌曲。

import urllib2
from bs4 import BeautifulSoup # latest version bs4

soup = BeautifulSoup(urllib2.urlopen("http://music.cbc.ca/The-Signal").read(), 'lxml')

song = soup.find_all("span", {'class': 'logTrackTitle'})

print song

推荐文章

Flissi Hamed · 从抓取aliexpress到使用chromedp的无头浏览器

10 月前

NoUsername9 · 使用Apify和Puppeter抓取URL

5 年前

Stphn · 使用Python将多个URL中的不同变量刮到一个CSV文件中

7 年前

Alok Mishra · 如何自动点击“内容”按钮

7 年前

Stphn · 使用BeautifulSoup(在其他两个标记之间)从<a>中删除一系列链接

7 年前

sudonym · 内存泄漏在哪里?如何在python中的多处理过程中超时线程?

7 年前

sudonym · 如何使用仅XPath正则表达式模式刮取无ID的网站元素

7 年前

Ike · Python Selenium错误-当webdriver

7 年前

ilyas · 使用网站查询获取数据[已关闭]

8 年前

David Norway · 使用python在网站上清除所有使用过的Javascript

8 年前