tokenizer：作为程序员，不会tokenizer和parser是种怎样的体验

作为程序员，不会tokenizer和parser是种怎样的体验

Tokenizer和parser是编译器的两个关键部分，它们负责将源代码转换为机器能够理解的代码。Tokenizer的作用是将源代码分解成一个个标记（token），例如关键字、标识符、符号等。Parser的作用是根据语法规则将这些标记组合成语法树，并检查代码中是否有语法错误。

如果不会tokenizer和parser，那么程序员可能无法将源代码转换为机器能够理解的代码，这会导致程序无法正常运行。此外，如果源代码中有语法错误，程序员可能无法发现并修正这些错误，这也会导致程序无法正常运行。

因此，作为程序员，不会tokenizer和parser可能会导致程序无法正常运行，并且无法发现和修正语法错误。这可能会给程序员带来困难和挫折。

到此，以上就是小编对于tokenizer的问题就介绍到这了，希望介绍关于tokenizer的1点解答对大家有用。