使用斯坦福解析器的句子生成

Question

我正在尝试使用斯坦福解析器生成类似的句子。 脚步 ：

1.使用斯坦福图书馆解析输入句子。

2.根据解析后的句子生成生产规则

3.替换一些终端值

4，使用nltk.parse.generate的generate（）函数重新生成句子

我有三个疑问：

1. StanfordParser是否总是生成有限的生产规则？

2.在使用generate函数时，对于几句话，我遇到了以下错误。

“ RuntimeError：调用Python对象时超出了最大递归深度”

当我使用sys.setrecursionlimit（0x10000000）设置递归限制时，出现错误：“ Segmentation fault：11”

2.1我可以增加递归限制吗？

2.2我该如何解决这个问题？

3这是正确的方法吗？ 我该如何改善？

Answer 1

功能nltk.parse.generate.generate()用于生成所有语法产品。 这意味着即使是单个递归规则，例如NP内的NP（始终发生），也会给您无限的递归。 如文档所示，您可以通过限制递归深度来控制它（例如， depth=20 ）。 如果愿意，还可以指定要生成的树数（ n=100 ）。

限制将解决无限递归问题，但不能保证您会喜欢结果。 generate()按顺序插入所有可能的扩展，因此，如果第一个规则是递归的，则将一次又一次使用它。 例如，如果选择生成的第50棵树，可能会得到更好的结果。 但是如果您检查生成的语法的结构，并对自己的生成器进行编码，从而在可能的扩展中进行随机选择，则肯定会获得最佳结果。