代码之家 › 专栏 › 技术社区 › Chris Barry

YQL刮取整个网站/域

yql html-content-extraction screen-scraping

Chris Barry · 技术社区 · 16 年前

我试图从一个域中替换一组链接和内容。

"site:www.newswebsite.com search_term"

2 回复 | 直到 16 年前

Chris Barry 16 年前

我终于弄清了真相。

select title,abstract,url,date from search.web(0) where query="search_term" and sites="www.website1.com,www.website2.com,www.website3.com" | sort (field='date') | reverse()

Steerpike 16 年前

Christian Heilmann刚刚在YQL上写了一篇相当不错的文章,并从网站上的HTML数据源获取了信息 24ways website .

推荐文章

Flissi Hamed · 从抓取aliexpress到使用chromedp的无头浏览器

1 年前

NoUsername9 · 使用Apify和Puppeter抓取URL

6 年前

Stphn · 使用Python将多个URL中的不同变量刮到一个CSV文件中

8 年前

Alok Mishra · 如何自动点击“内容”按钮

8 年前

Stphn · 使用BeautifulSoup(在其他两个标记之间)从<a>中删除一系列链接

8 年前

sudonym · 内存泄漏在哪里?如何在python中的多处理过程中超时线程?

8 年前

sudonym · 如何使用仅XPath正则表达式模式刮取无ID的网站元素

8 年前

Ike · Python Selenium错误-当webdriver

8 年前

ilyas · 使用网站查询获取数据[已关闭]

8 年前

David Norway · 使用python在网站上清除所有使用过的Javascript

8 年前