如何解决尽管在 R 中使用了磁盘框架,但仍然无法分配大小问题的向量
我一直在尝试使用磁盘框架来加载大约 45 GB 的文件。我使用下面的代码将 csv 转换为磁盘框架:
output_path = file.path(tempdir(),"tmp_cars.df")
disk <- csv_to_disk.frame("full-drivers.csv",outdir = output_path,overwrite = T,header = T)
但是,我不断收到:
"Error: cannot allocate vector of size 369.8 MB"
或 739.5 MB 的相同错误。
我尝试加载第二个较小的 csv 文件以查看它是否有效,并且确实如此。第二个文件与大文件相同,但只有前 1000 行。当我在网上寻找解决方案时,除 Rstudio 和 chrome 之外的所有其他程序都已关闭。我的电脑有 16 GB 的内存,我很困惑为什么尺寸这么小。运行 memory.limit()
给我 16344。
版权声明:本文内容由互联网用户自发贡献,该文观点与技术仅代表作者本人。本站仅提供信息存储空间服务,不拥有所有权,不承担相关法律责任。如发现本站有涉嫌侵权/违法违规的内容, 请发送邮件至 dio@foxmail.com 举报,一经查实,本站将立刻删除。