Java词法分析器识别文字代码

以下是 Java 词法分析器识别文字的示例代码：

public class Lexer {
    private String input;  // 输入的代码
    private int position;  // 当前扫描的位置

    public Lexer(String input) {
        this.input = input;
        this.position = 0;
    }

    // 判断一个字符是否是字母
    private boolean isLetter(char c) {
        return (c >= 'a' && c <= 'z') || (c >= 'A' && c <= 'Z');
    }

    // 判断一个字符是否是数字
    private boolean isDigit(char c) {
        return c >= '0' && c <= '9';
    }

    // 识别一个字符串字面量
    private Token recognizeString() {
        char c = input.charAt(position);
        if (c == '\"') {
            // 找到下一个双引号
            int end = input.indexOf('\"', position + 1);
            if (end != -1) {
                // 取出字符串字面量并返回 Token
                String s = input.substring(position, end + 1);
                position = end + 1;
                return new Token(TokenType.STRING, s);
            } else {
                // 没有找到匹配的双引号，认为是错误
                String s = input.substring(position);
                position = input.length();
                return new Token(TokenType.ERROR, "Unmatched double quote: " + s);
            }
        } else {
            // 不是双引号开头，认为是错误
            String s = input.substring(position);
            position = input.length();
            return new Token(TokenType.ERROR, "Invalid string: " + s);
        }
    }

    // 获取下一个 Token
    public Token nextToken() {
        while (position < input.length()) {
            char c = input.charAt(position);
            if (isLetter(c)) {
                // 识别标识符或关键字
                return recognizeIdentifierOrKeyword();
            } else if (isDigit(c)) {
                // 识别数字字面量
                return recognizeNumber();
            } else if (c == '\"') {
                // 识别字符串字面量
                return recognizeString();
            } else {
                // 识别其他符号
                return recognizeSymbol();
            }
        }
        // 到达输入的末尾，返回结束符
        return new Token(TokenType.EOF, "");
    }
}

在这个示例代码中，`Lexer` 类是一个简单的词法分析器，用于扫描输入的代码并识别各种语言元素。其中，`recognizeString` 方法用于识别字符串字面量，它会读取输入的字符流并判断其中的双引号，从而识别出一个完整的字符串字面量。在 `nextToken` 方法中，当扫描到一个双引号时，会调用 `recognizeString` 方法来识别字符串字面量。如果识别成功，会返回一个 `Token` 对象，其中的 `TokenType` 是 `STRING`，并且 `Token` 的值为字符串字面量的字符串表示。如果识别失败，会返回一个 `Token` 对象，其中的 `TokenType` 是 `ERROR`，并且 `Token` 的值为错误信息。