Refactor parser
This commit is contained in:
+127
-118
@@ -4,114 +4,6 @@
|
||||
#include <string.h>
|
||||
#include <stdio.h>
|
||||
|
||||
// /**
|
||||
// * Parses an import declaration.
|
||||
// *
|
||||
// * @param ts The token stream to parse from.
|
||||
// * @param module The module being parsed.
|
||||
// * @returns true on success, false on failure.
|
||||
// */
|
||||
// static bool parse_import(TokenStream* ts, Module* module) {
|
||||
// ImportDeclaration* new_imports = realloc(module->imports, (module->import_count + 1) * sizeof(ImportDeclaration));
|
||||
// if (!new_imports) {
|
||||
// fprintf(stderr, "Out of memory\n");
|
||||
// exit(1);
|
||||
// }
|
||||
// module->imports = new_imports;
|
||||
|
||||
// Token t = tokenstream_next(ts);
|
||||
// bool is_public = false;
|
||||
// if (t.token == TOKEN_PUBLIC) {
|
||||
// is_public = true;
|
||||
// t = tokenstream_next(ts);
|
||||
// }
|
||||
|
||||
// if (t.token != TOKEN_IDENTIFIER) {
|
||||
// log_on_line(&t.location, t.location.column_end, "expected module name to import");
|
||||
// return false;
|
||||
// }
|
||||
|
||||
// char* name = (char*)malloc(t.text.length + 1);
|
||||
// memcpy(name, t.text.data, t.text.length);
|
||||
// name[t.text.length] = '\0';
|
||||
|
||||
// module->imports[module->import_count] = (ImportDeclaration){ .module_name = name, .is_public = is_public };
|
||||
// module->import_count++;
|
||||
|
||||
// t = tokenstream_next(ts);
|
||||
// if (t.token != TOKEN_SEMICOLON) {
|
||||
// log_on_line(&t.location, t.location.column_end, "expected ';' after import");
|
||||
// return false;
|
||||
// }
|
||||
// return true;
|
||||
// }
|
||||
|
||||
// /**
|
||||
// * Parses an alias declaration.
|
||||
// *
|
||||
// * @param ts The token stream to parse from.
|
||||
// * @param module The module being parsed.
|
||||
// * @returns true on success, false on failure.
|
||||
// */
|
||||
// static bool parse_alias(TokenStream* ts, Module* module) {
|
||||
// AliasDeclaration* new_aliases = realloc(module->aliases, (module->alias_count + 1) * sizeof(AliasDeclaration));
|
||||
// if (!new_aliases) {
|
||||
// fprintf(stderr, "Out of memory\n");
|
||||
// exit(1);
|
||||
// }
|
||||
// module->aliases = new_aliases;
|
||||
|
||||
// Token t = tokenstream_next(ts);
|
||||
// if (t.token != TOKEN_IDENTIFIER) {
|
||||
// log_on_line(&t.location, t.location.column_end, "expected alias name");
|
||||
// return false;
|
||||
// }
|
||||
// char* name = (char*)malloc(t.text.length + 1);
|
||||
// memcpy(name, t.text.data, t.text.length);
|
||||
// name[t.text.length] = '\0';
|
||||
// AliasDeclaration alias;
|
||||
// alias.name = name;
|
||||
|
||||
// t = tokenstream_next(ts);
|
||||
// if (t.token != TOKEN_ASSIGN) {
|
||||
// log_on_line(&t.location, t.location.column_end, "expected '='");
|
||||
// return false;
|
||||
// }
|
||||
|
||||
// t = tokenstream_next(ts);
|
||||
|
||||
// TypeExpression type;
|
||||
// if (t.token == TOKEN_IDENTIFIER && strncmp(t.text.data, "int32", t.text.length) == 0) {
|
||||
// type = (TypeExpression){ .tag = TYPE_EXPRESSION_BUILTIN, .builtin = { .bitSize = 32, .isSigned = true } };
|
||||
// t = tokenstream_next(ts);
|
||||
// if (t.token == TOKEN_BRACKET_OPEN) {
|
||||
// t = tokenstream_next(ts);
|
||||
// if (t.token != TOKEN_BRACKET_CLOSE) {
|
||||
// log_on_line(&t.location, t.location.column_end, "expected ']'");
|
||||
// return false;
|
||||
// }
|
||||
// TypeExpression* inner = malloc(sizeof(TypeExpression));
|
||||
// *inner = type;
|
||||
// type = (TypeExpression){ .tag = TYPE_EXPRESSION_ARRAY, .array = { .array = inner } };
|
||||
// t = tokenstream_next(ts);
|
||||
// }
|
||||
// } else {
|
||||
// log_on_line(&t.location, t.location.column_end, "expected type");
|
||||
// return false;
|
||||
// }
|
||||
|
||||
// alias.value = type;
|
||||
|
||||
// module->aliases[module->alias_count] = alias;
|
||||
// module->alias_count++;
|
||||
|
||||
// if (t.token != TOKEN_SEMICOLON) {
|
||||
// log_on_line(&t.location, t.location.column_end, "expected ';'");
|
||||
// return false;
|
||||
// }
|
||||
// return true;
|
||||
// }
|
||||
|
||||
typedef struct {
|
||||
TokenStream* ts;
|
||||
Token token;
|
||||
@@ -186,7 +78,7 @@ static char* parser_to_text(Parser* p) {
|
||||
/**
|
||||
* Parses the "module" keyword
|
||||
*/
|
||||
static bool parse_declaration_module(Parser* p, Module* module) {
|
||||
static bool parse_module_declaration(Parser* p, Module* module) {
|
||||
if (!parser_expect(p, TOKEN_MODULE, "expected keyword 'module'")) {
|
||||
return false;
|
||||
}
|
||||
@@ -199,22 +91,139 @@ static bool parse_declaration_module(Parser* p, Module* module) {
|
||||
return parser_expect(p, TOKEN_SEMICOLON, "expected ';' after module name");
|
||||
}
|
||||
|
||||
static bool parse_import(Parser* p, Module* module, bool is_public) {
|
||||
/**
|
||||
* @copilot add docs
|
||||
*/
|
||||
static bool parse_import_declaration(Parser* p, Module* module, bool is_public) {
|
||||
module->import_count++;
|
||||
module->imports = realloc(module->imports, sizeof(ImportDeclaration) * module->import_count);
|
||||
ImportDeclaration* import = &module->imports[module->import_count - 1];
|
||||
|
||||
if (!parser_expect(p, TOKEN_IDENTIFIER, "expected module identifier")) {
|
||||
ImportDeclaration* import = &module->imports[module->import_count - 1];
|
||||
memset(import, 0, sizeof(ImportDeclaration));
|
||||
import->is_public = is_public;
|
||||
|
||||
if (!parser_require(p, TOKEN_IDENTIFIER, "expected module identifier")) {
|
||||
return false;
|
||||
}
|
||||
|
||||
import->module_name = parser_to_text(p);
|
||||
import->is_public = is_public;
|
||||
|
||||
if (!parser_expect(p, TOKEN_SEMICOLON, "expected ';' after import")) {
|
||||
return false;
|
||||
}
|
||||
|
||||
return true;
|
||||
}
|
||||
|
||||
static bool parse_alias(Parser* p, Module* module, bool is_public) {
|
||||
// @copilot implement
|
||||
/**
|
||||
* @copilot add docs
|
||||
*/
|
||||
static bool parse_primitive_type_expression(Parser* p, TypeExpression* expr) {
|
||||
if (parser_accept(p, TOKEN_U8)) {
|
||||
expr->tag = TYPE_EXPRESSION_BUILTIN;
|
||||
expr->builtin.bitSize = 8;
|
||||
expr->builtin.isSigned = false;
|
||||
return true;
|
||||
} else if (parser_accept(p, TOKEN_U16)) {
|
||||
expr->tag = TYPE_EXPRESSION_BUILTIN;
|
||||
expr->builtin.bitSize = 16;
|
||||
expr->builtin.isSigned = false;
|
||||
return true;
|
||||
} else if (parser_accept(p, TOKEN_U32)) {
|
||||
expr->tag = TYPE_EXPRESSION_BUILTIN;
|
||||
expr->builtin.bitSize = 32;
|
||||
expr->builtin.isSigned = false;
|
||||
return true;
|
||||
} else if (parser_accept(p, TOKEN_U64)) {
|
||||
expr->tag = TYPE_EXPRESSION_BUILTIN;
|
||||
expr->builtin.bitSize = 64;
|
||||
expr->builtin.isSigned = false;
|
||||
return true;
|
||||
} else if (parser_accept(p, TOKEN_I8)) {
|
||||
expr->tag = TYPE_EXPRESSION_BUILTIN;
|
||||
expr->builtin.bitSize = 8;
|
||||
expr->builtin.isSigned = true;
|
||||
return true;
|
||||
} else if (parser_accept(p, TOKEN_I16)) {
|
||||
expr->tag = TYPE_EXPRESSION_BUILTIN;
|
||||
expr->builtin.bitSize = 16;
|
||||
expr->builtin.isSigned = true;
|
||||
return true;
|
||||
} else if (parser_accept(p, TOKEN_I32)) {
|
||||
expr->tag = TYPE_EXPRESSION_BUILTIN;
|
||||
expr->builtin.bitSize = 32;
|
||||
expr->builtin.isSigned = true;
|
||||
return true;
|
||||
} else if (parser_accept(p, TOKEN_I64)) {
|
||||
expr->tag = TYPE_EXPRESSION_BUILTIN;
|
||||
expr->builtin.bitSize = 64;
|
||||
expr->builtin.isSigned = true;
|
||||
return true;
|
||||
} else {
|
||||
log_on_line(&p->token.location, "expected type expression");
|
||||
return false;
|
||||
}
|
||||
}
|
||||
|
||||
/**
|
||||
* @copilot add docs
|
||||
*/
|
||||
static bool parse_array_type_expression(Parser* p, TypeExpression* expr) {
|
||||
TypeExpression elementType;
|
||||
if (!parse_primitive_type_expression(p, &elementType)) {
|
||||
return false;
|
||||
}
|
||||
|
||||
if (parser_accept(p, TOKEN_BRACKET_OPEN)) {
|
||||
expr->tag = TYPE_EXPRESSION_ARRAY;
|
||||
expr->array.array = malloc(sizeof(TypeExpression));
|
||||
*expr->array.array = elementType;
|
||||
|
||||
if (!parser_expect(p, TOKEN_BRACKET_CLOSE, "expected ']' to end array type")) {
|
||||
return false;
|
||||
}
|
||||
} else {
|
||||
*expr = elementType;
|
||||
return true;
|
||||
}
|
||||
return true;
|
||||
}
|
||||
|
||||
/**
|
||||
* @copilot add docs
|
||||
*/
|
||||
static bool parse_type_expression(Parser* p, TypeExpression* expr) {
|
||||
return parse_array_type_expression(p, expr);
|
||||
}
|
||||
|
||||
/**
|
||||
* @copilot add docs
|
||||
*/
|
||||
static bool parse_alias_declaration(Parser* p, Module* module, bool is_public) {
|
||||
module->alias_count++;
|
||||
module->aliases = realloc(module->aliases, sizeof(AliasDeclaration) * module->alias_count);
|
||||
|
||||
AliasDeclaration* alias = &module->aliases[module->alias_count - 1];
|
||||
memset(alias, 0, sizeof(AliasDeclaration));
|
||||
alias->is_public = is_public;
|
||||
|
||||
if (!parser_require(p, TOKEN_IDENTIFIER, "expected alias identifier")) {
|
||||
return false;
|
||||
}
|
||||
alias->name = parser_to_text(p);
|
||||
|
||||
if (!parser_expect(p, TOKEN_ASSIGN, "expected '=' after alias name")) {
|
||||
return false;
|
||||
}
|
||||
|
||||
if (!parse_type_expression(p, &alias->value)) {
|
||||
return false;
|
||||
}
|
||||
|
||||
if (!parser_expect(p, TOKEN_SEMICOLON, "expected ';' after alias declaration")) {
|
||||
return false;
|
||||
}
|
||||
|
||||
return true;
|
||||
}
|
||||
|
||||
@@ -225,7 +234,7 @@ Module* parser_parse(TokenStream* ts) {
|
||||
|
||||
Module* module = malloc(sizeof(Module));
|
||||
memset(module, 0, sizeof(Module));
|
||||
if (!parse_declaration_module(p, module)) {
|
||||
if (!parse_module_declaration(p, module)) {
|
||||
goto fail;
|
||||
}
|
||||
|
||||
@@ -234,12 +243,12 @@ Module* parser_parse(TokenStream* ts) {
|
||||
bool terminal = false;
|
||||
do {
|
||||
if (parser_accept(p, TOKEN_IMPORT)) {
|
||||
if (!parse_import(p, module, is_public)) {
|
||||
if (!parse_import_declaration(p, module, is_public)) {
|
||||
goto fail;
|
||||
}
|
||||
terminal = true;
|
||||
} else if (parser_accept(p, TOKEN_ALIAS)) {
|
||||
if (!parse_alias(p, module, is_public)) {
|
||||
if (!parse_alias_declaration(p, module, is_public)) {
|
||||
goto fail;
|
||||
}
|
||||
terminal = true;
|
||||
|
||||
Reference in New Issue
Block a user