如何解决将 FlairTagger 与大数据集一起使用时出现 MemoryError
我想使用 Flair Tagger 来训练大型数据集 (10GB)，但出现 MemoryError。我怎么解决这个问题？我认为将数据集分成更小的部分可能会有所帮助，我确实这样做了，但我不确定如何将其读取到 Flair，因为它希望我按如下方式定义文件：
corpus: Corpus = ColumnCorpus(data_folder,columns,train_file='train.txt',test_file='test.txt',dev_file='dev.txt')
先谢谢你！
版权声明：本文内容由互联网用户自发贡献，该文观点与技术仅代表作者本人。本站仅提供信息存储空间服务，不拥有所有权，不承担相关法律责任。如发现本站有涉嫌侵权/违法违规的内容， 请发送邮件至 dio@foxmail.com 举报，一经查实，本站将立刻删除。
