代码之家 › 专栏 › 技术社区 › Davi Resio

在字符串或stringbuilder中放入非常大的内容[duplicate]

java

-3

Davi Resio · 技术社区 · 7 年前

我想获取一个非常大的html页面,但是当我尝试使用jsoup解析页面时,它报告了很多错误,因为页面太大了。

我怎么能处理这么大的绳子?

2 回复 | 直到 7 年前

banncee 7 年前

下载文件并保存到本地。然后使用缓冲文件读取器逐行读取文件并对其进行处理。考虑到文件的大小,将整个文件读入一个字符串似乎是个坏主意,而且您仍然无法有效地分析数据。

Andreas dfa 7 年前

答案是 text/plain

执行一个简单的httpget,并在下载数据时解析数据,一次一行,以最小化内存使用。不需要先存储到磁盘。

推荐文章

user29759326 · 如何返回递归函数中的最后一个值?

1 年前

malife89 · 将java中的字符串读取为正确的日期格式

1 年前

Tim · 在java中,有没有更快的方法将字节数组写入文件?

1 年前

pebble unit · 如何检查以前缀开头、以后缀结尾的属性(不是属性值)

1 年前

Nuñito Calzada · Spring Boot with JWT:访问此资源需要完全身份验证

1 年前

rudraraj · java中未声明最终变量

1 年前

Bala Ji · 以下BFS的实施效率如何?

1 年前

MineRickStar · 如何在Java中从Windows获取当前选定的应用程序

1 年前

user2649681 · 实时生成音频以写入“SourceDataLine”`

1 年前

davidalayachew · 为什么我的文件有竞争条件,即使我使用了StandardOpenOption。同步?

1 年前