如何使用gocc在Golang中实现不区分大小写的词法分析器?

问题描述

我需要使用Gocc构建一个词法分析器,但是文档中没有提到忽略大小写的选项,而且我还找不到任何相关的东西。任何人都知道如何完成操作,还是应该使用其他工具?

/* Lexical part */

_digit : '0'-'9' ;

int64 : '1'-'9' {_digit} ;

switch:  's''w''i''t''c''h';

while:  'w''h''i''l''e';

!whitespace : ' ' | '\t' | '\n' | '\r' ;

/* Syntax part */

<< 
import(
    "github.com/goccmack/gocc/example/calc/token"
    "github.com/goccmack/gocc/example/calc/util"
)
>>

Calc : Expr;

Expr :
        Expr "+" Term   << $0.(int64) + $2.(int64),nil >>
    |   Term            
;

Term :
        Term "*" Factor << $0.(int64) * $2.(int64),nil >>
    |   Factor          
;

Factor :
        "(" Expr ")"    << $1,nil >>
    |   int64           << util.IntValue($0.(*token.Token).Lit) >>
;

例如,对于“ switch”,我想识别是大写还是小写,但不必键入所有组合。在Bison中,选项%选项没有大小写;在Gocc中,是否存在一个

解决方法

浏览该产品的文档,我看不到任何使字符文字不区分大小写的选项,也看不到任何编写字符类的方法,就像在每个正则表达式引擎和扫描仪生成器中一样。但是,除了乏味,可读性和风格之外,其他一切都无法阻止您写作

switch:  ('s'|'S')('w'|'W')('i'|'I')('t'|'T')('c'|'C')('h'|'H');
while:  ('w'|'W')('h'|'H')('i'|'I')('l'|'L')('e'|'E');

(这是在lex中做到的,不区分大小写的旧方法,该方法使用字符类使其更具可读性:

[sS][wW][iI][tT][cC][hH]    return T_SWITCH;
[wW][hH][iI][lL][eE]        return T_WHILE;

您可以通过定义26种模式来更接近前者:

_a: 'a'|'A';
_b: 'b'|'B';
_c: 'c'|'C';
_d: 'd'|'D';
_e: 'e'|'E';
_f: 'f'|'F';
_g: 'g'|'G';
_h: 'h'|'H';
_i: 'i'|'I';
_j: 'j'|'J';
_k: 'k'|'K';
_l: 'l'|'L';
_m: 'm'|'M';
_n: 'n'|'N';
_o: 'o'|'O';
_p: 'p'|'P';
_q: 'q'|'Q';
_r: 'r'|'R';
_s: 's'|'S';
_t: 't'|'T';
_u: 'u'|'U';
_v: 'v'|'V';
_w: 'w'|'W';
_x: 'x'|'X';
_y: 'y'|'Y';
_z: 'z'|'Z';

,然后分解字符串文字:

switch: _s _w _i _t _c _h;
while: _w _h _i _l _e;