代码之家 › 专栏 › 技术社区 › Zack

从网站上删除音乐播放列表信息

screen-scraping beautifulsoup html python

Zack · 技术社区 · 10 年前

我正在尝试从一个我喜欢的每日广播节目的在线播放日志中删除艺术家和歌曲的名字。我想最终使用这些收集到的数据,使用python在Spotify或Youtube上编译播放列表。

为什么我的代码不能检索并打印所有歌曲?

import urllib2
from bs4 import BeautifulSoup # latest version bs4

soup = BeautifulSoup(urllib2.urlopen("http://music.cbc.ca/#!/The-Signal").read(), 'lxml')

song = soup.find_all("span", {'class': 'logTrackTitle'})

print song

My code

1 回复 | 直到 10 年前

Greg Sadetsky 10 年前

使用Chrome DevTools浏览页面,您会发现页面的“广播日志”部分实际上是一个具有不同URL的iframe。这就是歌曲列表的“来源”。

将iframe的URL交换到代码中会正确返回歌曲。

import urllib2
from bs4 import BeautifulSoup # latest version bs4

soup = BeautifulSoup(urllib2.urlopen("http://music.cbc.ca/The-Signal").read(), 'lxml')

song = soup.find_all("span", {'class': 'logTrackTitle'})

print song

推荐文章

Dinosaur · 使用BeautifulSoup点击div标签后抓取html页面

1 年前

Stackie · 无法使用Selenium访问废料数据的链接

1 年前

Avraham · 如何在JS中将beautifulsoup中的文本设置为.innerText而非.textContent

1 年前