如何從Dart Analyzer掃描儀獲取評論令牌？

Question

我正在使用Dart Analyzer程序包中的tokeniser，從本示例中的代碼開始。

我已經調整了代碼，只吐出了令牌（不使用Parser）來嘗試跟蹤我的問題。 所以我的代碼看起來像這樣：

import 'dart:io';

import 'package:analyzer/src/generated/ast.dart';
import 'package:analyzer/src/generated/error.dart';
import 'package:analyzer/src/generated/parser.dart';
import 'package:analyzer/src/generated/scanner.dart';

void main(List<String> args) {

  // Dummy code to parse (contains comments!)
  var src = """
               // test
               /* test */
               import 'dartd:io';
               // This is a test
  """;

  // Tokenise the code
  var errorListener = new _ErrorCollector();
  var reader = new CharSequenceReader(src);
  var scanner = new Scanner(null, reader, errorListener);
  var token = scanner.tokenize();

  // Dump all tokens to screen
  while (token != null && token.type != TokenType.EOF)
  {
    print(token);
    token = token.next;
  }

但是，當我運行此命令時，注釋消失了：

import
'dartd:io'
;

我正在瀏覽Scanner代碼，試圖理解注釋的去向，但並不高興。 有一個名為_preserveComments的布爾值，但是無論如何它默認為true！

Answer 1

評論似乎在他們自己的令牌鏈中。 您可以通過普通令牌的precedingComments訪問器訪問它們，然后需要使用next遍歷每個注釋，直到到達結尾：

// Dump all tokens to screen
while (token != null && token.type != TokenType.EOF)
{
  printComments(token);
  print(token);
  token = token.next;

  if(token.type == TokenType.EOF) {
    printComments(token);
  }
}

void printComments(Token token) {
  var comments = token.precedingComments;
  while(comments != null) {
    print(comments);
    comments = comments.next;
  }
}