第二人生的源码分析(104)脚本的词法分析(2)
源码 分析 脚本 第二 人生 词法 104
2023-09-14 09:10:41 时间
接着上一次,再来分析
flex文件的下一部份:规则部份。它们由一连串带有代码的正则表达式组成,当匹配相对应的正则表达式时,这些代码就会被运行。下面就一段规则的代码:
#001 %%
这行表示规则代码开始。
#002 "//"
{ gInternalLine++; gInternalColumn = 0; comment(); }
这里使用“
//”来表注释一行代码。
#003
#004 "integer"
{ count(); return(INTEGER); }
这里识别关键字
integer为整数据处理。
#005 "float"
{ count(); return(FLOAT_TYPE); }
#006 "string"
{ count(); return(STRING); }
#007 "key"
{ count(); return(LLKEY); }
#008 "vector"
{ count(); return(VECTOR); }
#009 "quaternion"
{ count(); return(QUATERNION); }
#010 "rotation"
{ count(); return(QUATERNION); }
#011 "list"
{ count(); return(LIST); }
上面这段依次是识别浮点数
float,字符串string,键key,数组vector,四元数quaternion,旋转rotation,列表list。可以看到每识别一个关键字出来就返回相应的标识ID,这样方便后面的语法分析和语义分析,以及代码的生成。
其它好多的规则都是跟上面一样的,下面再来分析一些比较特别的规则,如下:
#001 0[xX]{H}+
{ count(); yylval.ival = strtoul(yytext, NULL, 0); return(INTEGER_CONSTANT); }
#002 {N}+
{ count(); yylval.ival = strtoul(yytext, NULL, 10); return(INTEGER_CONSTANT); }
这两行就是识别数字串,比如第一行是识别
16进制的数字串,例如0x12,0Xa233。第二行是识别一般的10进制的数字。
下面这行是识文件结束的状态:
#001 "EOF"
{ yylval.sval = new char[UUID_STR_LENGTH]; strcpy(yylval.sval, "/n/n/n"); return(STRING_CONSTANT);
#002 }
下面是一些比较复杂的规则:
#001
#002 {L}({L}|{N})*
{ count(); yylval.sval = new char[strlen(yytext) + 1]; strcpy(yylval.sval, yytext); return(IDENTIFIER); }
这行是识别脚本定义的变量标识符。
#003
#004 {N}+{E}
{ count(); yylval.fval = (F32)atof(yytext); return(FP_CONSTANT); }
识别浮点数。
#005 {N}*"."{N}+({E})?{FS}?
{ count(); yylval.fval = (F32)atof(yytext); return(FP_CONSTANT); }
识别浮点数。
#006 {N}+"."{N}*({E})?{FS}?
{ count(); yylval.fval = (F32)atof(yytext); return(FP_CONSTANT); }
识别浮点数。
#007
#008 L?/"(//.|[^//"])*/"
{ parse_string(); count(); return(STRING_CONSTANT); }
识别字符串常量。
下面一段是识别操作符的规则:
#001 "++"
{ count(); return(INC_OP); }
#002 "--"
{ count(); return(DEC_OP); }
#003 "+="
{ count(); return(ADD_ASSIGN); }
#004 "-="
{ count(); return(SUB_ASSIGN); }
#005 "*="
{ count(); return(MUL_ASSIGN); }
#006 "/="
{ count(); return(DIV_ASSIGN); }
#007 "%="
{ count(); return(MOD_ASSIGN); }
下面两行:
#001 [ /t/v/n/f]
{ count(); }
这行是处理制表符。
#002 .
{ /* ignore bad characters */ }
处理不能正确处理的字符。
通过上面这段
flex规则文件的分析,可以看到构造一个词法分析器,还是比较复杂的。如果使用手工来构造一个词法分析器会更加复杂多了。通过一节学会怎么编写flex词法分析器的规则。
相关文章
- ABP源码分析十:Unit Of Work
- mybatis简单案例源码详细【注释全面】——实体层(Role.java)
- jQuery源码分析系列(39) : 动画队列
- Spring Actuator源码分析
- android-async-http框架源码分析
- 用Darwin开发RTSP级联服务器(拉模式转发)(附源码)
- Npoi导出excel整理(附源码)
- Underscore.js 1.3.3 源码分析收藏
- Greenplum 资源隔离的原理与源码分析
- Python编程学习:深度剖析shap.datasets.adult()源码中的X,y和X_display,y_display输出数区别
- WebRTC源码分析 pacer代码流程
- ffplay源码分析:音视频同步
- ijkplayer源码分析 start流程和buffering缓冲策略
- LiteOS内核源码分析:位操作模块
- 鸿蒙轻内核源码分析:虚拟文件系统 VFS
- 带你掌握不同平台下,探索JDK源码所需的native方法
- 鸿蒙轻内核源码分析:虚实映射
- springboot源码分析: 请求方式+请求映射原理+获取参数原理
- 【Linux 内核 内存管理】物理内存组织结构 ⑤ ( 内存区域 zone 类型简介 | 内存区域类型zone_type 枚举源码分析 | zone_type 枚举源码 )
- 1.java线程的源码解析和两种线程创建方法
- Go 语言 HTTP Server 源码分析
- NLP模型笔记2022-17:实体识别、实体对齐、实体消歧、属性对齐【论文+源码】
- 第二人生的源码分析(101)脚本的初步知识
- 第二人生的源码分析(103)脚本的词法分析(1)
- 第二人生的源码分析(109)脚本的语法分析(3)
- java并发:jdk1.8中ConcurrentHashMap源码浅析
- Tomcat卷一 ----架构和初始化源码分析
- react源码分析:深度理解React.Context
- 【java】Spring Cloud --OpenFeign源码解析学习
- (20)Blender源码分析之闪屏窗口的菜单python代码draw的属性和函数对应
- (8)Blender源码分析之创建区域对象UI_block_begin函数