代码之家 › 专栏 › 技术社区 › sree

从网站hadoop检索数据

bigdata flume hadoop

0

sree · 技术社区 · 10 年前

过去,我可以使用开发者API从twitter检索数据。

现在我想从网站检索数据。它不是点击流数据,而是网站中更新的实际数据。例如,我想检索每天在cricinfo等板球网站上更新的比赛详情。

有人能帮我怎么做吗。

谢谢斯里

1 回复 | 直到 8 年前

1

Amit 10 年前

看看吧 this 。也许你也可以尝试使用 RSS Feeds 为此,espncricinfo.com提供。

推荐文章

MD10172016 · Spring Kafka-遇到“Magic v0不支持记录头”错误

8 年前

Ana Caroline Sanchez Silva · Flume体系结构:传递到通道的事件

8 年前

user99999991 · Flume能否将ElasticSearch与Amazon Elastic Search服务结合使用?

8 年前

okocki · 如何使用apache flume从txt文件读取日志

8 年前

sree · 从网站hadoop检索数据

10 年前

sarath endluri · 使用文件通道在水槽中耗尽可用空间

10 年前

JochenDB · 水槽HDFS水槽不断滚动小文件

12 年前