某处是否有 java 字符串文字的 jflex 规范？

Question

我所说的字符串文字是指那些也包含类似 \123 的字符的字符串。 我写了一些东西，但我不知道它是否完美：

<STRING> {
  \"                             { yybegin(YYINITIAL); 
                                   return new Token(TokenType.STRING,string.toString()); }
  \\[0-3][0-7][0-7]              { string.append( yytext() ); }
  \\[0-3][0-7]                   { string.append( yytext() ); }
  \\[0-7]                        { string.append( yytext() ); }
  [^\n\r\"\\]+                   { string.append( yytext() ); }
  \\t                            { string.append('\t'); }
  \\n                            { string.append('\n'); }

  \\r                            { string.append('\r'); }
  \\\"                           { string.append('\"'); }
  \\                             { string.append('\\'); }
}

事实上，我知道这并不完美，因为对于解析 \ddd 类字符的三行，我不把字符串中的字符本身，而是其表示形式。 我可能会尝试使用字符方法来转换它，但也许我并不详尽，也许还有其他我没有处理的转义序列......所以如果有一个规范的 jflex 文件那就太完美了。

Answer 1

查看 JLS 时，段落 3.10.5字符串文字，它定义字符串文字如下：

    StringLiteral:
      " StringCharacters* "

    StringCharacters:
      StringCharacter
      StringCharacters StringCharacter

    StringCharacter:
      InputCharacter but not " or \
      EscapeSequence

其中 EscapeSequence 定义于 3.10.6：

    EscapeSequence:
      \ b            /* \u0008: backspace BS */
      \ t            /* \u0009: horizontal tab HT */
      \ n            /* \u000a: linefeed LF */
      \ f            /* \u000c: form feed FF */
      \ r            /* \u000d: carriage return CR */
      \ "            /* \u0022: double quote " */
      \ '            /* \u0027: single quote ' */
      \ \            /* \u005c: backslash \ */
      OctalEscape    /* \u0000 to \u00ff: from octal value */

    OctalEscape:
      \ OctalDigit
      \ OctalDigit OctalDigit
      \ ZeroToThree OctalDigit OctalDigit

    OctalDigit: one of
      0 1 2 3 4 5 6 7

    ZeroToThree: one of
      0 1 2 3

请注意，目前 \' 也是字符串文字中的有效转义序列，你仍然错过了几个转义序列。您可能还需要考虑 Java 源文件中可能存在的 Unicode 转义（因此也存在于字符串文字中）： \u HEX HEX HEX HEX 其中 HEX 是0-9 之一 | AF。

Answer 2

是的。下载 JFlex 并查看文件 examples/java/java.flex。它具有 Java 语言所有词汇组件的 JFlex 语法定义。

干杯。