随笔- 45  评论- 614  文章- 0 
  2014年3月2日
摘要:文章中引用的代码均来自https://github.com/vczh/tinymoe。实现Tinymoe的第一步自然是一个词法分析器。词法分析其所作的事情很简单,就是把一份代码分割成若干个token,记录下他们所在文件的位置,以及丢掉不必要的信息。但是Tinymoe是一个按行分割的语言,自然token列表也就是二维的,第一维是行,第二维是每一行的token。在继续讲词法分析器之前,先看看Tiny... 阅读全文
posted @ 2014-03-02 23:45 陈梓瀚(vczh) 阅读 (5890) 评论 (5) 编辑