feat(parser): 启用parser和ast模块并重构解析器结构
- 在cbuild.toml中启用parser和ast依赖项 - 将AST内置类型枚举重命名为SCC_AST_BUILTIN_TYPE_*前缀格式 - 修复ast_def.h中的类型字段命名,将builtin改为type - 添加逗号操作符支持到表达式操作符枚举中 - 更新字面量表达式的lexeme字段为const char*指针和owned标志 - 重构解析器头文件结构,分离为parser.h、parser_utils.h、scc_sema.h等 - 实现新的解析器工具函数,包括预览、消费、回溯等功能 - 更新声明解析逻辑,使用新的解析器接口进行token处理 - 添加符号表语义分析功能框架 - 修复词法分析器中token移动时的空指针检查 - 统一使用scc_tree_dump_printf替代直接的scc_printf调用
This commit is contained in:
@@ -46,6 +46,8 @@ typedef struct scc_pproc {
|
||||
|
||||
scc_lexer_tok_ring_t ring;
|
||||
int ring_ref_count;
|
||||
cbool ring_need_comment;
|
||||
cbool ring_need_empty;
|
||||
|
||||
struct {
|
||||
int max_include_depth;
|
||||
@@ -53,7 +55,8 @@ typedef struct scc_pproc {
|
||||
} scc_pproc_t;
|
||||
|
||||
void scc_pproc_init(scc_pproc_t *pp, scc_lexer_tok_ring_t *input);
|
||||
scc_lexer_tok_ring_t *scc_pproc_to_ring(scc_pproc_t *pp, int ring_size);
|
||||
scc_lexer_tok_ring_t *scc_pproc_to_ring(scc_pproc_t *pp, int ring_size,
|
||||
cbool need_empty, cbool need_comment);
|
||||
void scc_pproc_drop(scc_pproc_t *pp);
|
||||
|
||||
static inline void scc_pproc_add_include_path(scc_pproc_t *pp,
|
||||
|
||||
@@ -1,4 +1,5 @@
|
||||
#include <pproc_expand.h>
|
||||
#include <scc_lexer.h>
|
||||
#include <scc_lexer_utils.h>
|
||||
#include <scc_pproc.h>
|
||||
|
||||
@@ -120,11 +121,27 @@ void scc_pproc_add_builtin_macros() {
|
||||
|
||||
static cbool fill_token(scc_lexer_tok_t *tok, void *userdata) {
|
||||
scc_pproc_t *pp = userdata;
|
||||
return pproc_next(pp, tok);
|
||||
cbool ret = false;
|
||||
CONTINUE:
|
||||
ret = pproc_next(pp, tok);
|
||||
if (ret && !pp->ring_need_comment &&
|
||||
scc_get_tok_subtype(tok->type) == SCC_TOK_SUBTYPE_COMMENT) {
|
||||
scc_lexer_tok_drop(tok);
|
||||
goto CONTINUE;
|
||||
}
|
||||
if (ret && !pp->ring_need_empty &&
|
||||
scc_get_tok_subtype(tok->type) == SCC_TOK_SUBTYPE_EMPTYSPACE) {
|
||||
scc_lexer_tok_drop(tok);
|
||||
goto CONTINUE;
|
||||
}
|
||||
return ret;
|
||||
}
|
||||
|
||||
scc_lexer_tok_ring_t *scc_pproc_to_ring(scc_pproc_t *pp, int ring_size) {
|
||||
scc_lexer_tok_ring_t *scc_pproc_to_ring(scc_pproc_t *pp, int ring_size,
|
||||
cbool need_empty, cbool need_comment) {
|
||||
scc_ring_init(pp->ring, ring_size, fill_token, pp);
|
||||
pp->ring_need_comment = need_comment;
|
||||
pp->ring_need_empty = need_empty;
|
||||
pp->ring_ref_count++;
|
||||
return &pp->ring;
|
||||
}
|
||||
|
||||
Reference in New Issue
Block a user