lexer

    2热度

    1回答

    ANTLR4 - 解析JavaScript语法中的正则表达式文字

    我正在使用ANTLR4为某些JavaScript预处理器（基本上它标记一个JavaScript文件并提取每个字符串文本）生成一个Lexer。 我使用了最初为Antlr3制作的语法，并为v4导入了相关部分（只有词法分析规则）。 我只有一个单一的问题，其余的：我不知道如何处理极端案例以正则表达式的文字，像这样： log(Math.round(v * 100)/100 + ' msec/sample')
    parsing antlr4 lexer 2016-08-12

    2热度

    1回答

    ％option noinput nounput：它们是干什么用的？

    我在这个新的，所以我不知道为什么，我需要使用这些指令 %option nounput %option noinput 是啊，我知道，否则我就会有这些警告： lex.yy.c:1237:17: warning: ‘yyunput’ defined but not used [-Wunused-function] static void yyunput (int c, register
    compiler-construction flex-lexer lexer 2016-08-22

    -1热度

    1回答

    Ply示例计算器多个表达式

    我一直在尝试Ply example calculator from Github。 当我运行计算器时，它运行在REPL内部。我将如何使用Ply来一次一个地评估多个表达式。 例如，如果我进入3+4的REPL做到这一点： calc > 3+4 7 calc > 如果我进入4+3 6+2的REPL做到这一点： calc > 4+3 6+2 Syntax error at '6' 2 cal
    python parsing lexer ply 2016-08-23

    2热度

    2回答

    如何在保留拆分字符的情况下在多个正则表达式上拆分字符串

    我正在第一次编写词法分析器/扫描程序，并且遇到了拆分输入字符串的问题。 实施例： val result = "func add(Num x, Num y) = x+y;".split(???) result == Array("func", "add", "(", "Num", "x", ",", "Num", "y", ")", "=", "x", "+", "y", ";") 但问题是，
    regex string scala split lexer 2016-03-29

    1热度

    1回答

    在boost :: spirit :: lex中，如何添加具有语义动作和令牌ID的令牌？

    我知道如何添加标记定义与标识符： this->self.add(identifier, ID_IDENTIFIER); 而且我知道如何添加标记定义与语义动作： this->self += whitespace [ lex::_pass = lex::pass_flags::pass_ignore ]; 不幸的是，这并不工作： this->self.add(whitespace
    c++ boost boost-spirit lexer 2016-08-26

    2热度

    1回答

    数学解析器/词法分析器 - 令牌接口设计

    目前正在开发一个小型的宠物项目，数学解析器/词法分析器，并最终为求解/学习而求解。我已经制定了一个基本的原型，现在正在将其转换为TypeScript来清理。对于那些感兴趣的原型可以在这里找到https://github.com/chips5k/math-solver-prototype。 我试图想出一个干净的基于界面的方法来处理我的令牌。我怀疑我看错了这个方式，但希望有人能提供有用的建议。 在我的
    oop parsing typescript lexer 2016-09-05

    0热度

    1回答

    我可以从JavaScript代码使用python获取[variable name，value]表吗？

    我有一个JavaScript文件index.js。 我正在开发一个用Python编写的工具，它静态导航JavaScript代码以检查是否定义了某个API。 为了开发它，我需要一个存储 [variable, value]的数据结构（表）。 这里是JavaScript代码的例子。 var a = "hello"; var b = "hi"; a = "world"; var c= certai
    javascript python lexer 2016-07-26

    0热度

    1回答

    标识符的ECMAScript规范2017年

    你好从ecmascript specifications UnicodeIDStart:: any Unicode code point with the Unicode property "ID_Start" UnicodeIDContinue:: any Unicode code point with the Unicode property "ID_Continue"
    javascript unicode compiler-construction grammar lexer 2016-09-15

    2热度

    1回答

    Antlr4如何检测无法识别的令牌和给出的句子是无效的

    我想用Antlr开发一种新语言。下面是我的语法文件： grammar test; program : vr'.' to'.' e ; e: be | be'.' top'.' be ; be: 'fg' | 'fs' | 'mc' ; to: 'n' | 'a' | 'ev' ; vr: 'er' |
    java parsing antlr antlr4 lexer 2016-09-16

    1热度

    1回答

    如何使用parser-tools/lex-sre匹配换行符或文件结尾

    我试图在Racket中编写一个忽略行注释的词法分析器（即，从开头#开始，直到行结束）。该行的末尾，在我的脑海里，可能是因为存在#\newline或(eof)，但显然以下为(eof)不起作用在这个位置上是无效的： (define comment-lexer (lexer [(:or #\newline (eof)) (cons `(COMMENT) (main-lexe
    racket lexer 2016-08-05
最新问题