feat(lexer): 添加预处理器关键字支持并优化词法分析器

添加了完整的C预处理器关键字表,包括define、include、ifdef等关键字,
用于支持预处理器功能。

- 新增SCC_PPKEYWORD_TABLE宏定义所有预处理器关键字
- 在token类型枚举中包含预处理关键字
- 重构词法分析器以正确识别预处理关键字
- 添加scc_lexer_tok_drop函数用于清理token资源

refactor(lexer): 重构词法分析器内部结构

- 修复keywords数组字段名从tok到tok_type
- 优化scc_lexer_get_valid_token使用while循环替代do-while
- 修改fill_token和fill_valid_token返回类型为cbool
- 调整lexer_to_ring参数语义更清晰

fix(sstream): 修正环形缓冲区填充函数返回类型

- 将fill_func返回类型从int改为cbool以保持一致性
- 更新SCC_RING宏文档说明fill回调函数返回值含义

docs(argparse): 重命名examples目录修复路径错误

- 将libs/argparse/example重命名为libs/argparse/examples保持一致性

test(lexer): 更新测试用例适配新的流接口

- 修改测试代码中的scc_sstream_ref_ring为scc_sstream_to_ring
- 确保测试用例与新的API保持兼容

style(lexer): 更新示例程序日志级别和实现方式

- 将调试日志改为信息日志
- 使用环形缓冲区实现示例程序的token获取
This commit is contained in:
zzy
2026-02-16 22:27:09 +08:00
parent b4929be6b8
commit 681a15cb44
7 changed files with 73 additions and 26 deletions

View File

@@ -14,7 +14,7 @@
* - head: 已消费的逻辑索引
* - probe: 预览索引
* - tail: 已填充的逻辑末尾索引
* - fill: 填充回调函数 (当需要新元素时调用)
* - fill: 填充回调函数 (当需要新元素时调用) 返回true表示成功
*/
#define SCC_RING(type) \
struct { \
@@ -23,7 +23,7 @@
usize head; \
usize probe; \
usize tail; \
int (*fill)(type * out, void *userdata); \
cbool (*fill)(type * out, void *userdata); \
void *userdata; \
}