微信公众号搜"智元新知"关注
微信扫一扫可直接关注哦!

c# – 如何使用包含大量数据的Encoding.GetString? (抛出OutOfMemoryException)

我正在从db读取二进制数据并使用代码将其转换为文本.

public String BinaryToText(byte[] data)
       {
         System.Text.Encoding encEncoder = System.Text.ASCIIEncoding.ASCII;

         return encEncoder.GetString(data);
       }

上面的过程正常工作但是当转换二进制文件> = 85mb时,OutOfMemoryException
显示.如何将大型二进制数据转换为字符串而不会出错.

解决方法

我通常不会期望85MB也是一个问题,除非你的内存不足等.即使x86通常可以处理它而不会暂停呼吸.

对于大量数据,最简单的答案始终是“不要一次将其全部保存在内存中”. ADO.NET在数据读取器上有一个仅转发API,允许连续调用获取大型BLOB的不同部分:

using(var reader = cmd.ExecuteReader(CommandBehavior.SequentialAccess))
{  //                                    ^^ forwards-only mode ^^
  long offset = 0;
  int read;
  byte[] buffer = new byte[8096];
  while ((read = reader.GetBytes(colIndex,offset,buffer,buffer.Length))>0)
  {
     ProcessBytes(buffer,read);
     offset += read;
  }
}

其中ProcessBytes(byte [] buffer,int offset,int count)处理缓冲区中的字节数,从offset开始.在ASCII的情况下,你可以在不使用编码的情况下逃脱;对于其他编码,您可以使用Encoding.GetDecoder()API来解码数据流,尽管它有点混乱.这两个因素将允许您处理任意大(多TB)(如果必要的话)数据源,而不会将所有数据源同时存储在内存中.

接下来的问题是:你打算用这些数据做什么?

如果你确实需要一次在内存中,你别无选择,只能握住它.您可以使用迭代器块执行某些操作,依次返回字符串的片段.

版权声明:本文内容由互联网用户自发贡献,该文观点与技术仅代表作者本人。本站仅提供信息存储空间服务,不拥有所有权,不承担相关法律责任。如发现本站有涉嫌侵权/违法违规的内容, 请发送邮件至 dio@foxmail.com 举报,一经查实,本站将立刻删除。

相关推荐