27a87d17ab
feat(lexer): 改进预处理器token测试用例并修复##符号处理
...
- 将"##" token从SCC_TOK_SHARP修正为SCC_TOK_SHARP_SHARP
- 添加更多预处理器指令测试用例，包括宏定义、错误和警告指令
- 修正序列测试中的##符号处理
fix(pproc): 完善预处理器指令处理逻辑
- 实现#error和#warning指令的具体处理逻辑
- 添加对字符串字面量的错误和警告消息输出
- 优化未处理指令的错误处理流程
fix(pproc): 修复词法分析器流处理边界条件
- 在scc_pproc.c中添加对token获取失败的检查
- 防止在流结束时出现未处理的边界情况
2026-02-19 12:14:56 +08:00
08a60e6e8a
feat: 添加预处理器宏定义的字符串化和连接操作支持
...
- 实现了 # 和 ## 预处理器操作符的功能
- 添加了 token 深拷贝和移动函数以支持宏展开
- 修改预处理器展开逻辑以正确处理宏参数替换
- 增加了宏参数分割时对空白字符的处理
fix: 修复预处理器宏展开中的内存管理和逻辑错误
- 修正了宏展开集合的数据结构初始化方式
- 修复了函数式宏调用时括号匹配的判断逻辑
- 改进了宏参数解析过程中空白字符的处理
- 解决了 token 在宏展开过程中的所有权管理问题
chore: 为 justfile 添加文件统计命令并优化构建配置
- 新增 count-file 命令用于统计代码文件数量
- 调整了输出文件的默认命名规则
- 优化了词法分析器 token 释放时的字段重置逻辑
2026-02-19 11:20:01 +08:00
9d85dc130d
feat(lexer): 添加词法分析器对##操作符的支持
...
- 重命名lexer_token.h为scc_lexer_token.h以保持命名一致性
- 在词法分析器中实现##操作符的识别和处理
- 修改头文件包含路径和类型定义的位置
- 修复token结构体定义的顺序问题
fix(lexer): 初始化lexer中的cur变量避免未初始化问题
- 在scc_lexer_get_token函数中初始化scc_sstream_char_t cur变量
refactor(core): 增强ring缓冲区功能并添加cstring比较函数
- 在scc_core_ring.h中添加空值检查防止fill函数为空时崩溃
- 添加scc_ring_by_buffer宏用于通过缓冲区创建ring实例
- 在scc_core_str.h中添加scc_cstring_cmp函数用于字符串比较
2026-02-18 18:17:52 +08:00
2de5ae59f5
feat(pproc): 实现C语言预处理器功能并重构项目依赖
...
- 新增预处理器库(pproc)，替代原有的pprocessor模块
- 实现完整的宏定义解析功能，支持对象宏和函数宏
- 添加条件编译指令处理(#if、#ifdef、#ifndef、#else、#elif、#endif)
- 实现宏展开机制，包括嵌套宏和递归宏处理
- 添加宏定义测试用例，覆盖基本功能和复杂场景
- 在cbuild.toml中更新依赖配置，移除parser、ast、ast2ir、ir等未完成模块
- 新增lexer工具函数用于token流处理
- 添加宏定义表管理功能，支持宏的创建、查找、删除操作
- 实现宏参数解析和替换列表处理
2026-02-17 22:47:25 +08:00
681a15cb44
feat(lexer): 添加预处理器关键字支持并优化词法分析器
...
添加了完整的C预处理器关键字表，包括define、include、ifdef等关键字，
用于支持预处理器功能。
- 新增SCC_PPKEYWORD_TABLE宏定义所有预处理器关键字
- 在token类型枚举中包含预处理关键字
- 重构词法分析器以正确识别预处理关键字
- 添加scc_lexer_tok_drop函数用于清理token资源
refactor(lexer): 重构词法分析器内部结构
- 修复keywords数组字段名从tok到tok_type
- 优化scc_lexer_get_valid_token使用while循环替代do-while
- 修改fill_token和fill_valid_token返回类型为cbool
- 调整lexer_to_ring参数语义更清晰
fix(sstream): 修正环形缓冲区填充函数返回类型
- 将fill_func返回类型从int改为cbool以保持一致性
- 更新SCC_RING宏文档说明fill回调函数返回值含义
docs(argparse): 重命名examples目录修复路径错误
- 将libs/argparse/example重命名为libs/argparse/examples保持一致性
test(lexer): 更新测试用例适配新的流接口
- 修改测试代码中的scc_sstream_ref_ring为scc_sstream_to_ring
- 确保测试用例与新的API保持兼容
style(lexer): 更新示例程序日志级别和实现方式
- 将调试日志改为信息日志
- 使用环形缓冲区实现示例程序的token获取
2026-02-16 22:27:09 +08:00
b4929be6b8
refactor(lexer): 重构词法分析器头文件结构并优化缓冲区管理
...
移除了旧的lexer_stream.c实现，引入新的环形缓冲区机制来替代原有的
动态数组缓冲区。更新了词法分析器的核心数据结构，修改了token获取
相关函数的实现以支持新的缓冲区管理方式。
BREAKING CHANGE: 移除了scc_lexer_stream_t相关的API，替换为基于
环形缓冲区的新接口scc_lexer_to_ring和相关函数。
feat(lexer_token): 添加词法分析结果内存泄漏警告注释
docs: 移除预处理器模块的测试文件和相关配置
2026-02-16 21:21:23 +08:00
0e7dec202a
refactor(lex_parser): 移除旧的词法解析器实现并更新依赖
...
移除了 libs/lex_parser 目录下的所有头文件和源文件，包括：
- lex_parser.h 和 lex_parser.c 核心解析功能
- 所有测试文件（test_char.c, test_identifier.c, test_number.c,
test_skip_block_comment.c, test_skip_line.c, test_string.c）
更新了 lexer 模块的依赖配置，将 lex_parser 替换为 sstream，
同时更新了 lexer.h 中的相关包含头文件和数据结构定义，
简化了 scc_lexer_t 结构体的字段。
2026-02-16 16:56:40 +08:00
088050c903
feat(argparse): 添加选择类型支持和错误处理优化
...
添加了 SCC_ARGPARSE_ERR_PNT_DEFAULT 错误类型用于默认操作处理，
实现了 scc_argparse_spec_setup_choices 函数支持枚举选择，
重构了错误处理流程使返回值更加一致。
修复了长选项名称匹配的逻辑错误。
feat(lexer): 添加换行符和注释符号的词法标记
新增 SCC_TOK_ENDLINE 和 SCC_TOK_SHARP 标记类型，
改进词法分析器对换行符和井号的识别处理。
feat(scc_core): 添加常用宏定义
添加 scc_min 和 scc_max 宏定义提供基础数值比较功能。
feat(main): 实现编译器主程序和命令行接口
创建主程序入口实现完整的编译流程，
集成预处理器、词法分析、语法分析和IR生成模块，
添加AST和IR输出功能支持调试查看中间表示。
chore(build): 配置项目构建依赖关系
创建 cbuild.toml 配置文件定义项目包信息和依赖库，
建立编译器各组件库之间的依赖关系管理。
2026-02-13 17:26:50 +08:00
ffee07a03d
feat(ir): 添加线性IR转储功能并改进AST转储
...
- 实现了IR的线性转储功能，包括类型、节点、基本块和函数的线性表示
- 添加了scc_ir_dump_ctx_init函数用于初始化转储上下文
- 为AST函数类型添加了变参标记注释说明
- 改进了AST转储中函数类型的参数和返回值显示逻辑
- 统一了AST解析中节点类型的声明为通用的scc_ast_node_t指针类型
fix(lexer): 改进词法分析器错误信息显示
- 在不支持字符的错误信息中添加十六进制编码显示
- 便于调试时识别特殊不可打印字符
2026-02-13 09:56:42 +08:00
e1cd8c5206
feat(lexer): 添加SCC语言扩展关键字支持并重构标准定义
...
- 将SCC_CEXT_ASM重命名为SCC_CEXT_SCC以更好地反映扩展类型
- 为asm关键字添加SCC_CEXT_SCC标准标识
- 新增atomic、auto、bool、complex四个关键字及其对应的token类型
- 所有新关键字都标记为SCC_CEXT_SCC扩展标准
fix(lexer): 修复数字字面量解析中的类型不匹配问题
- 将token->value.n更正为token->value.u以正确存储解析结果
- 统一了词法分析器中数值解析的字段访问
refactor(log): 重构日志系统API设计并增强功能
- 将日志处理器接口从void返回改为int返回类型
- 新增函数名记录功能，通过__func__宏获取当前函数名
- 引入可变参数支持，允许格式化字符串传递
- 重构内部宏实现，使用SCC_LOG_IMPL统一处理逻辑
- 改进缓冲区管理，优化日志消息格式化流程
- 重命名头文件保护宏从__SCC_LOG_H__到__SCC_LOG_IMPL_H__
- 替换snprintf为vsnprintf以支持可变参数处理
- 更新断言宏实现，提供更清晰的错误信息格式
2026-01-28 15:44:24 +08:00
84cff78b86
feat(lexer): 在换行符处理时添加流回退功能
...
在词法分析器中遇到换行符时，添加对 scc_probe_stream_back 的调用，
以确保流探针位置正确回退。同时修正了 probe_stream_t 接口定义中的
注释说明，明确 back 函数的作用是后退探针位置而非头指针位置。
修复了内存探针流实现中回退逻辑的边界条件判断，
现在能够正确处理探针位置的回退操作。
2026-01-11 14:20:54 +08:00
6c801fbb92
refactor(lexer): 移除未使用的期望函数并修复内存分配错误
...
移除了 scc_lexer_tok_expect 函数，因为它不再被使用。
在 lexer_stream_extend 函数中添加了返回语句，以在内存重新分配失败时正确处理错误。
BREAKING CHANGE: 移除了 scc_lexer_tok_expect 函数
2026-01-10 17:43:31 +08:00
b753ae0911
refactor(lex_parser): 重命名libcore为scc_core并重构头文件包含
...
- 将依赖项从libcore重命名为scc_core
- 更新头文件包含路径从<libcore.h>到<scc_core.h>
- 保持原有功能不变
refactor(lexer): 重命名libcore为scc_core并添加词法流式解析功能
- 将依赖项从libcore重命名为scc_core
- 移除不再需要的scc_lexer_token结构体定义
- 重命名struct cc_lexer为struct scc_lexer
- 添加scc_lexer_stream_t流式解析器相关定义和实现
- 新增lexer_stream.c文件实现流式token缓冲功能
refactor(lexer_log): 重命名logger变量和头文件定义
- 将头文件保护宏从__SMCC_LEXER_LOG_H__改为__SCC_LEXER_LOG_H__
- 将logger变量从__smcc_lexer_log改为__scc_lexer_log
- 更新头文件包含从<libcore.h>到<scc_core.h>
refactor(lexer_token): 重新组织token头文件结构
- 将头文件保护宏从__SMCC_CC_TOKEN_H__改为__SCC_LEXER_TOKEN_H__
- 更新头文件包含从<libcore.h>到<scc_core.h>
- 将scc_lexer_token结构体定义移至该文件
refactor(lexer): 简化token匹配代码格式
- 移除LCC相关的注释内容
- 优化括号符号的token匹配代码格式，使用clang-format控制
refactor(pprocessor): 更新依赖项名称和头文件包含
- 将libcore重命名为scc_core
- 将libutils重命名为scc_utils
- 更新头文件包含路径
refactor(runtime): 重命名libcore为scc_core并重构目录结构
- 将libcore目录重命名为scc_core
- 将libutils目录重命名为scc_utils
- 更新所有相关的头文件包含路径
- 修改cbuild.toml中的包名称
- 更新core_vec.h中的宏定义以支持标准库模式
2026-01-08 11:22:27 +08:00
09f4ac8de0
feat(lex_parser, pprocessor): replace consume with next and remove stream resets
...
- Replace `scc_probe_stream_consume` with `scc_probe_stream_next` for consistent stream advancement
- Remove redundant `scc_probe_stream_reset` calls before peeking, as `next` and `peek` handle state
- Update `scc_cstring_new` to `scc_cstring_create` and `scc_pos_init` to `scc_pos_create` for naming consistency
- Change `scc_pp_macro_get` parameter to `const scc_cstring_t*` for better const-correctness
- Improves code clarity and maintains proper stream position tracking
2025-12-28 10:49:29 +08:00
07f5d9331b
feat(lexer, preprocessor): replace cstring conversion with copy and refactor macro expansion
...
- Replace `scc_cstring_from_cstr(scc_cstring_as_cstr(...))` with `scc_cstring_copy()` in lexer to fix memory leaks
- Extract macro expansion logic into separate `expand_macro.c` file
- Remove `expand_stack` parameter from `scc_pp_expand_macro()` function
- Add new parsing functions for macro replacement lists and arguments
- Add string utility functions for whitespace trimming and string joining
- Update memory stream documentation for clarity
2025-12-15 20:24:39 +08:00
874a58281f
feat(lex_parser): rename functions and update header guard prefix
...
- Change header guard from `__SMCC_LEX_PARSER_H__` to `__SCC_LEX_PARSER_H__`
- Prefix all lexer functions with `scc_` (e.g., `lex_parse_char` → `scc_lex_parse_char`)
- Add new helper function `scc_lex_parse_is_identifier_header`
- Update references in source and test files to use new function names
- Replace `core_stream_eof` with `scc_stream_eof` for consistency
2025-12-13 14:06:13 +08:00
94d3f46fac
refactor(lex_parser): replace core_pos_* functions with scc_pos_* equivalents
...
Update all position tracking calls in lex_parser.c to use the scc_pos_* function family (scc_pos_next, scc_pos_next_line) instead of the deprecated core_pos_* variants. This ensures consistency with the scc naming convention and prepares for future removal of the old core functions.
2025-12-12 21:33:51 +08:00
3aaf3a3991
feat: add SCF format library and rename components to SCC prefix
...
- Introduce new SCF (SCC Format) library with header, implementation, and test files
- SCF is a minimal executable/linkable format focused on internal linking with external symbol import/export abstraction
- Rename lexer and lex_parser packages from 'smcc_' to 'scc_' prefix for consistency
- Update hashmap implementation to use 'scc_' prefix for types and structures
- Add build configuration for new format library with dependencies on libcore and libutils
2025-12-11 17:29:12 +08:00
d88fa3b8d3
feat: rename core types to scc prefix for consistency
...
Updated type names from `core_*` to `scc_*` across lex_parser and stream modules to maintain naming consistency within the SCC codebase. This includes changes to function signatures and internal usage of types like `core_probe_stream_t`, `core_pos_t`, and `cstring_t` to their `scc_*` counterparts.
2025-12-11 13:00:29 +08:00
186602a301
feat(core): rename string and stream functions for clarity
...
- Rename `cstring_push` to `cstring_append_ch` and `cstring_push_cstr` to `cstring_append_cstr` for consistent naming with new `cstring_append` function
- Update all callers in lexer and tests to use new function names
- Rename stream `destroy` method to `drop` for consistency with resource management conventions
- Fix potential overflow in string capacity calculation by adjusting growth logic
2025-12-09 18:04:53 +08:00
36bff64a91
feat 重构stream流API并适配lex_parse和lexer
2025-12-08 23:04:11 +08:00
871d031ceb
feat(lex_parser): 初始化词法解析器模块
...
新增词法解析器库 `smcc_lex_parser`，包含基础的词法规则解析功能：
- 支持字符、字符串、数字、标识符的解析
- 支持跳过注释、空白符、行尾等辅助函数
- 提供对应的单元测试用例，覆盖各类合法与非法输入情况
该模块依赖 `libcore`，并被 `smcc_lex` 模块引用以支持更上层的词法分析逻辑。
2025-11-23 22:53:46 +08:00
63f6f13883
feat(cbuild): 重构构建系统并迁移至 tools/cbuild
...
将 `cbuild.py` 迁移至 `tools/cbuild/` 并进行大量功能增强。引入依赖解析器、支持颜色日志输出、
改进包配置默认值处理、完善构建目标识别与拓扑排序依赖管理。同时添加 `.gitignore` 和
`pyproject.toml` 以支持标准 Python 包结构，并更新 README 文档。
新增命令支持：tree（显示依赖树）、clean（带文件统计）、test（运行测试）等，
优化了 Windows 平台下的可执行文件扩展名处理逻辑。
移除了旧的 `wc.py` 行数统计脚本。
2025-11-22 15:08:49 +08:00
a3322f0d4c
feat(runtime): 添加字符串和内存操作工具函数
...
- 在 `core_mem.h` 中新增 `smcc_strhash32`、`smcc_strlen` 和 `smcc_strcmp` 函数，
提供 C 字符串的哈希、长度获取和比较功能
- 完善 `core_str.h` 中 `cstring_t` 结构体及相关操作函数的注释说明
- 更新 `core_str.h` 头文件保护宏命名，增强模块标识一致性
- 修改 `core_vec.h` 文件头部保护宏名称以匹配实际文件名
另外，在 lexer 测试运行代码中引入日志相关头文件并调整日志级别设置逻辑。
2025-11-21 17:52:42 +08:00
164bab0f13
fix(lexer): 修复词法分析器中的关键字比较与字符串处理逻辑
...
修正了关键字表的注释，明确要求其必须按字典序排列以确保二分查找正确性。
在词法分析过程中，修复标识符解析时对 `cstring` 的使用问题，并调整 token 类型赋值顺序，
避免潜在的未定义行为。同时新增测试文件用于验证操作符、关键字及各类字面量的识别准确性，
并更新测试运行器的日志级别控制参数。
2025-11-20 22:49:22 +08:00
d1fafa830d
format using clang-format to formate code
2025-11-20 17:55:08 +08:00
9762cf8a2b
feat(log): 支持设置多个日志级别的组合
...
将 `log_set_level` 函数的参数类型从 `log_level_t` 改为 `int`，
以支持传入多个日志级别的按位或组合。
同时调整测试代码中的日志级别设置方式，并修复部分逻辑引用问题，以及#未知宏跳过更多的行的bug。
2025-11-20 14:30:14 +08:00
47b56d52f6
feat(core): 重构词法分析器流接口并迁移至 core 库
...
将 lexer_stream 抽象为 core_stream，统一运行时核心组件的输入流模型。
移除了旧的 `lexer_stream.h` 定义，并将其功能完整迁移至 `core_stream.h` 中。
更新了内存流实现以适配新的 core_stream 接口，并修复部分资源释放问题。
同时调整日志模块包含方式，增强模块间解耦能力。
此变更影响词法分析器对输入流的操作方式，所有涉及 stream 的类型与函数均已替换为 core 前缀版本。
测试用例同步更新并验证通过。
2025-11-20 14:17:03 +08:00
e22811f2f5
feat(build): 引入新的 Python 构建系统并移除旧 Makefile
...
新增基于 Python 的构建脚本 `cbuild.py`，支持包管理、依赖解析和模块化编译。
同时添加 `.gitignore` 忽略 `build` 目录，并在 `justfile` 中更新构建命令。
移除了原有的 `lib/Makefile` 和主目录下的相关 make 规则，统一使用新构建系统。
2025-11-20 10:44:59 +08:00
