Monaco 编辑器自定义令牌提供者行为

Question

我正在尝试实现具有非常特定行为的标记器，例如，在以下情况下：

1:   Line 1
2:   Line 2
3:
4:   Line 4 
5:   Line 5
6:   Line 6
7:
8:
9:   Line 9

第 1 行的更改将导致第 1-3 行的重新标记化，第 5 行的更改将导致第 3-8 行的重新标记化，第 9 行的更改将导致第 7-9 行的重新标记化，等等...... . 这是因为给定行的标记化可能会根据在下一个空行之前发生的情况而有所不同。

所以基本上，我希望通过用空行分隔的块来标记文本。

我有一个使用装饰的模糊原型，但对于我的用例来说，没有办法使用装饰或语义标记，主要是出于性能原因。 然而，摩纳哥的setTokensProvider似乎只能逐行工作：编辑文档中的一行将导致每个后续行都被重新标记，无法停止它，也无法重新标记之前的行。

目前是否有任何现实的方法可以做到这一点，即使它是 hacky 和/或涉及摆弄一些未公开的 API？ vscode 的 textmate 语法能够指定跨越多行的标记，所以我觉得我错过了一些东西：/

Answer 1

听起来您正在寻找DocumentSemanticTokensProvider 。 看看这篇博文：

顾名思义，摩纳哥的 DocumentSemanticTokensProvider 处理为整个输入文档提供语义。 Unlike a tokens provider, instead of providing a set of regular expressions to tokenize the document, a DocumentSemanticTokensProvider implementation is a callback function: When invoked, the function is provided with the overall model containing the code entered by the user, and it is the responsibility实现者返回必要的语义信息，需要完整的解析。