如何解决跨线程的句子阻塞?
我正在尝试使用互操作将 SentencePiece 与一些 C# 代码集成。我有 # of threads = # of cores,以及在每个线程中运行的 SentencePieceProcessor 实例。我在这些不同的实例上同时调用 EncodeAsIds。
我的日志显示,有时对 Encode 的调用需要花费大量时间(>1000 毫秒)。这不会发生在我在空载条件下运行 Encode 的同一个字符串上,所以我怀疑有什么东西阻塞了......有没有其他人经历过这个或知道句子是否被阻塞?
版权声明:本文内容由互联网用户自发贡献,该文观点与技术仅代表作者本人。本站仅提供信息存储空间服务,不拥有所有权,不承担相关法律责任。如发现本站有涉嫌侵权/违法违规的内容, 请发送邮件至 dio@foxmail.com 举报,一经查实,本站将立刻删除。