javascript - 除了 ECMAScript 规范中提供的上下文无关语法之外，是否还有其他方法可以将 JavaScript 词法化为 token ？

Question

我正在寻找一种状态机表示形式，用于将 JavaScript 字符串转换为标记，是否还有其他替代表示形式？任何状态机或自动机的表示？

Answer 1

JavaScript 无法使用有限状态自动机进行标记，因为每个连续标记的目标符号是由该点语法解析的状态确定的。