我正在尝试将大流(4mb)转换为字符串,最终将其转换为 JSON 数组。
当流大小很小(以 KB 为单位)时,一切正常,当它开始处理 4mb 流时,它就会耗尽内存
下面是我用来将流转换为字符串的方法,我几乎尝试了所有方法,我怀疑问题出在 while 循环上。有人可以帮忙吗?
public String convertStreamToString(InputStream is)
throws IOException {
if (is != null) {
Writer writer = new StringWriter();
char[] buffer = new char[1024];
try
{
Reader reader = new BufferedReader(
new InputStreamReader(is, "UTF-8"));
int n;
while ((n = reader.read(buffer)) != -1)
{
writer.write(buffer, 0, n);
}
}
finally
{
is.close();
}
return writer.toString();
} else {
return "";
}
}
更新:
好吧,这就是我现在到达的地方,我走在正确的轨道上吗?
我想我已经很接近了..不知道我还能关闭或刷新什么来恢复记忆..
public String convertStreamToString(InputStream is)
throws IOException {
String encoding = "UTF-8";
int maxlines = 2000;
StringWriter sWriter = new StringWriter(7168);
BufferedWriter writer = new BufferedWriter(sWriter);
BufferedReader reader = null;
if (is == null) {
return "";
} else {
try {
int count = 0;
reader = new BufferedReader(new InputStreamReader(is, encoding));
for (String line; (line = reader.readLine()) != null;) {
if (count++ % maxlines == 0) {
sWriter.close();
// not sure what else to close or flush here to regain memory
//Log.v("Max Lines Reached", "Max Lines Reached");;
}
writer.write(line);
}
Log.v("Finished Loop", "Looping over");
} finally {
is.close();
writer.close();
}
return writer.toString();
}
}
StringWriter
写入一个StringBuffer
内部。 AStringBuffer
基本上是一个围绕 a 的包装char
大批。该阵列具有一定的容量。当这个能力不足的时候,StringBuffer
将分配一个新的更大的char
数组并复制前一个数组的内容。最后你打电话toString()
在 StringWriter 上,这将再次复制char
数组放入char
结果字符串的数组。
如果您有任何方法可以事先知道所需的容量是多少,则应该使用 StringWriter 的构造函数来设置初始容量。这将避免不必要地复制数组以增加缓冲区。
但这并不能避免最终的副本发生在toString()
。如果您正在处理可能很大的流,您可能需要重新考虑是否真的需要该输入流作为String
。使用足够大的char
直接数组可以避免所有的复制,并且会大大减少内存使用。
最终的解决方案是在所有输入进入之前对输入进行一些处理,因此可以丢弃已处理的字符。这样,您只需在内存中保存处理步骤所需的内容即可。
本文内容由网友自发贡献,版权归原作者所有,本站不承担相应法律责任。如您发现有涉嫌抄袭侵权的内容,请联系:hwhale#tublm.com(使用前将#替换为@)