微信公众号搜"智元新知"关注
微信扫一扫可直接关注哦!

使用 networkx 库在数据中查找集群

如何解决使用 networkx 库在数据中查找集群

使用文本数据我使用“wiki_ru_wordnet”库来查找同义词并将所有单词组替换为一个。后来我用 networkx 来查找孤立的组。

def get_dict_synsets(texts):
  wikiwordnet = WikiWordnet()
  G=nx.Graph()

  for text in texts:
    s = set()
    synsets = wikiwordnet.get_synsets(text)
    for synset in synsets:
      for w in synset.get_words():
        if text != w.lemma():
          G.add_edge(text,w.lemma())

  d = {}
  for g in nx.connected_components(G):
    default_lemma = g.pop()
    d.update(dict.fromkeys(g,default_lemma))
    d[default_lemma] = default_lemma
    
  return d,G

下面是一个词描述的一组词的例子:

enter image description here

在我看来,我不能使用它,因为不是真正同义词的词属于同一组。好的结果会像下一张图片

[![在此处输入图片描述][2]][2]

我如何更正我的结果?我有想法 - 使用 networx.clustering 但不知道如何... [2]:https://i.stack.imgur.com/Hi2C8.png

版权声明:本文内容由互联网用户自发贡献,该文观点与技术仅代表作者本人。本站仅提供信息存储空间服务,不拥有所有权,不承担相关法律责任。如发现本站有涉嫌侵权/违法违规的内容, 请发送邮件至 dio@foxmail.com 举报,一经查实,本站将立刻删除。