https://github.com/zzusunjs/Scanner

    编译原理实验课要求自己实现一个简单一些的扫描器。 我是用c++实现的。具体的原理的话，完全是按照书上的算法实现的，也没有什么特别难懂的地方，不过想要写的比较完备的话还是有一定难度的。

    Go ->  preProcess() -> init()

                                -> delete-space()

         ->  Scanner()

                                -> 首字符

                                ->....

代码大致的结构就是上面的那个样子。

编译原理之扫描器