如何解决OpenFST - 从单词列表中创建 FST
我正在阅读最上面的例子:http://www.openfst.org/twiki/bin/view/FST/FstExamples 关于标记化。
在示例中,他们创建了三个 fst:Mars.fst
、Martian.fst
和 man.fst
,并手动运行一些 fst 命令将它们合并为一个大转换器。他们从 wotw.syms
得到“火星”、“火星人”和“人”这个词,其中有 7102 个词。
我的问题是,是否有一种聪明的方法可以为所有 7102 个单词创建一个 word.fst
,以便可以将所有 7102 个单词组合成一个大自动机,还是必须像他们那样手动完成火星、火星和人这三个词?
版权声明:本文内容由互联网用户自发贡献,该文观点与技术仅代表作者本人。本站仅提供信息存储空间服务,不拥有所有权,不承担相关法律责任。如发现本站有涉嫌侵权/违法违规的内容, 请发送邮件至 dio@foxmail.com 举报,一经查实,本站将立刻删除。