|
|
27a87d17ab
|
feat(lexer): 改进预处理器token测试用例并修复##符号处理
- 将"##" token从SCC_TOK_SHARP修正为SCC_TOK_SHARP_SHARP
- 添加更多预处理器指令测试用例,包括宏定义、错误和警告指令
- 修正序列测试中的##符号处理
fix(pproc): 完善预处理器指令处理逻辑
- 实现#error和#warning指令的具体处理逻辑
- 添加对字符串字面量的错误和警告消息输出
- 优化未处理指令的错误处理流程
fix(pproc): 修复词法分析器流处理边界条件
- 在scc_pproc.c中添加对token获取失败的检查
- 防止在流结束时出现未处理的边界情况
|
2026-02-19 12:14:56 +08:00 |
|
|
|
681a15cb44
|
feat(lexer): 添加预处理器关键字支持并优化词法分析器
添加了完整的C预处理器关键字表,包括define、include、ifdef等关键字,
用于支持预处理器功能。
- 新增SCC_PPKEYWORD_TABLE宏定义所有预处理器关键字
- 在token类型枚举中包含预处理关键字
- 重构词法分析器以正确识别预处理关键字
- 添加scc_lexer_tok_drop函数用于清理token资源
refactor(lexer): 重构词法分析器内部结构
- 修复keywords数组字段名从tok到tok_type
- 优化scc_lexer_get_valid_token使用while循环替代do-while
- 修改fill_token和fill_valid_token返回类型为cbool
- 调整lexer_to_ring参数语义更清晰
fix(sstream): 修正环形缓冲区填充函数返回类型
- 将fill_func返回类型从int改为cbool以保持一致性
- 更新SCC_RING宏文档说明fill回调函数返回值含义
docs(argparse): 重命名examples目录修复路径错误
- 将libs/argparse/example重命名为libs/argparse/examples保持一致性
test(lexer): 更新测试用例适配新的流接口
- 修改测试代码中的scc_sstream_ref_ring为scc_sstream_to_ring
- 确保测试用例与新的API保持兼容
style(lexer): 更新示例程序日志级别和实现方式
- 将调试日志改为信息日志
- 使用环形缓冲区实现示例程序的token获取
|
2026-02-16 22:27:09 +08:00 |
|
|
|
b4929be6b8
|
refactor(lexer): 重构词法分析器头文件结构并优化缓冲区管理
移除了旧的lexer_stream.c实现,引入新的环形缓冲区机制来替代原有的
动态数组缓冲区。更新了词法分析器的核心数据结构,修改了token获取
相关函数的实现以支持新的缓冲区管理方式。
BREAKING CHANGE: 移除了scc_lexer_stream_t相关的API,替换为基于
环形缓冲区的新接口scc_lexer_to_ring和相关函数。
feat(lexer_token): 添加词法分析结果内存泄漏警告注释
docs: 移除预处理器模块的测试文件和相关配置
|
2026-02-16 21:21:23 +08:00 |
|
|
|
0e7dec202a
|
refactor(lex_parser): 移除旧的词法解析器实现并更新依赖
移除了 libs/lex_parser 目录下的所有头文件和源文件,包括:
- lex_parser.h 和 lex_parser.c 核心解析功能
- 所有测试文件(test_char.c, test_identifier.c, test_number.c,
test_skip_block_comment.c, test_skip_line.c, test_string.c)
更新了 lexer 模块的依赖配置,将 lex_parser 替换为 sstream,
同时更新了 lexer.h 中的相关包含头文件和数据结构定义,
简化了 scc_lexer_t 结构体的字段。
|
2026-02-16 16:56:40 +08:00 |
|