feat(parser): 启用parser和ast模块并重构解析器结构

- 在cbuild.toml中启用parser和ast依赖项
- 将AST内置类型枚举重命名为SCC_AST_BUILTIN_TYPE_*前缀格式
- 修复ast_def.h中的类型字段命名,将builtin改为type
- 添加逗号操作符支持到表达式操作符枚举中
- 更新字面量表达式的lexeme字段为const char*指针和owned标志
- 重构解析器头文件结构,分离为parser.h、parser_utils.h、scc_sema.h等
- 实现新的解析器工具函数,包括预览、消费、回溯等功能
- 更新声明解析逻辑,使用新的解析器接口进行token处理
- 添加符号表语义分析功能框架
- 修复词法分析器中token移动时的空指针检查
- 统一使用scc_tree_dump_printf替代直接的scc_printf调用
This commit is contained in:
zzy
2026-03-09 15:25:12 +08:00
parent a805814d3f
commit 1fceeca011
28 changed files with 2759 additions and 1987 deletions

View File

@@ -46,6 +46,8 @@ typedef struct scc_pproc {
scc_lexer_tok_ring_t ring;
int ring_ref_count;
cbool ring_need_comment;
cbool ring_need_empty;
struct {
int max_include_depth;
@@ -53,7 +55,8 @@ typedef struct scc_pproc {
} scc_pproc_t;
void scc_pproc_init(scc_pproc_t *pp, scc_lexer_tok_ring_t *input);
scc_lexer_tok_ring_t *scc_pproc_to_ring(scc_pproc_t *pp, int ring_size);
scc_lexer_tok_ring_t *scc_pproc_to_ring(scc_pproc_t *pp, int ring_size,
cbool need_empty, cbool need_comment);
void scc_pproc_drop(scc_pproc_t *pp);
static inline void scc_pproc_add_include_path(scc_pproc_t *pp,

View File

@@ -1,4 +1,5 @@
#include <pproc_expand.h>
#include <scc_lexer.h>
#include <scc_lexer_utils.h>
#include <scc_pproc.h>
@@ -120,11 +121,27 @@ void scc_pproc_add_builtin_macros() {
static cbool fill_token(scc_lexer_tok_t *tok, void *userdata) {
scc_pproc_t *pp = userdata;
return pproc_next(pp, tok);
cbool ret = false;
CONTINUE:
ret = pproc_next(pp, tok);
if (ret && !pp->ring_need_comment &&
scc_get_tok_subtype(tok->type) == SCC_TOK_SUBTYPE_COMMENT) {
scc_lexer_tok_drop(tok);
goto CONTINUE;
}
if (ret && !pp->ring_need_empty &&
scc_get_tok_subtype(tok->type) == SCC_TOK_SUBTYPE_EMPTYSPACE) {
scc_lexer_tok_drop(tok);
goto CONTINUE;
}
return ret;
}
scc_lexer_tok_ring_t *scc_pproc_to_ring(scc_pproc_t *pp, int ring_size) {
scc_lexer_tok_ring_t *scc_pproc_to_ring(scc_pproc_t *pp, int ring_size,
cbool need_empty, cbool need_comment) {
scc_ring_init(pp->ring, ring_size, fill_token, pp);
pp->ring_need_comment = need_comment;
pp->ring_need_empty = need_empty;
pp->ring_ref_count++;
return &pp->ring;
}