如何从GCC源码学编译原理
1.前言公司的一款编译器是基于gcc写的，最近测试发现了一个小bug。为了解决这个bug不得不对gcc源码进行debug，因此有了这篇文章。
本文结合编译原理理论和gcc实践做了一个总结，希望能给需要了解编译原理和底层知识的同学一个更快的学习路径。
除了gcc的文章之外，后续也会写一些llvm的文章，如果再有时间的话争取将gcc中的编译器算法和llvm中的编译器算法做一个对比总结。
希望看到这篇文章的朋友能持续关注本公众号，如果没有更新，肯定是研究代码去了，研究完之后的心得会第一时间在公众号分享出来，也希望能和更多的朋友一起交流，共同进步。
2. 编译原理基础2.1 编译原理的重要性了解事物的本质，是一件非常愉快的事情。
学习编译原理好处：
可以更加容易理解在一个语言中哪些写法是等价的，哪些是有差异的。可以更加客观的比较不同语言的差异不容易被某个特定语言的宣扬者忽悠学习更新的语言效率更高从语言a到语言b是一个通用的需求，学好编译原理会更加游刃有余用编译原理的眼光看自己的代码，能够写出优秀的单元测试。自己写的程序更优效率跟高自创一门新的语言编译原理可以说是一个计算机科学的缩影，在学习寄存器分配中会使用到贪心算法，死代码消除中会用到图论算法，数据流分析中使用到fixed-point algorithm，词法分析和语法分析中会使用到有限状态机和递归下降等重要思想。可见编译原理是值得学习的。
2.2 编译原理理论源程序到目标代码的过程要经历如下四个步骤：
首先是源程序到抽象语法树：
需要经历词法分析，也就是将程序中的一个一个字符按照单词识别出来。
然后是语法分析，将词法分析阶段的单词构成短语，将短语以抽象语法树的形式存储起来。
接下来是语义分析，语义分析是审查源程序有无语义错误，为代码生成阶段收集类型信息。
从源程序到抽象语法树的过程称为编译器前端。
中间代码生成：中间代码是与体系结构无关的一种中间表示，形式接近于汇编代码，中间代码的目的是为了能生成各种体系结构相关的目标代码但是只需要一套前端代码。
目标代码生成：中间代码到目标代码会经过大量的代码优化，例如死代码删除、指令调度等。这个过程称为编译器后端。
编译器后端是整个编译器中最精华的地方，如果想要提升程序性能，研究编译器后端算法绝对会让你受益良多。
下面是一条语句 i = j + k*10 编译过程的具体实例：
3.gcc实践3.1 源码阅读心得程序 = 数据结构 + 算法
相信很多关心程序效率的同学都有这样的体验：
算法和数据结构密不可分，一个高效的算法必然有合适的数据结构作为支撑。高效的算法与合理的数据结构同样重要。
对于算法，通常仔细读一读论文就可以弄清楚原理，但是去看一些开源代码具体实现的时候往往又一头雾水。
那是因为我们刚接触开源代码的时候并不清楚它的数据结构是如何设计的。
本文从gcc的数据结构开始入手，为想要快速上手gcc的同学提供一个捷径。
即使不关心gcc源码，也可以从数据结构设计中获得启发，毕竟合理的数据结构和高效的算法一样重要。
3.2 gcc整体结构我们通常认为gcc是一个编译器，然而官方的解释是这样的：
gcc is not a compiler.
gcc is a compiler collection that consists of three components.
a front end for each programming language, a middle end, and a back end for each architecture.
也就是说gcc是一个编译器集合，支持多种语言和多种硬件架构。
下图是gcc的一个整体结构图
gcc整体结构图
图中的绿色的部分generic、gimple、rtl是本文要介绍的，看懂这三个数据结构之后离看懂gcc源码基本就成功了一半。
3.3 gcc中的genericgcc中的generic其实也是一种抽象语法树（ast）。
从gcc整体结构图中我们可以看到，在generic前面已经生成了ast，为啥这儿的generic也是一种ast呢？
原因是这样的，从gcc整体结构图中我们可以看到，c语言会生成一种ast，c++也会生成一种ast，java还会生成一种ast。这三种ast其实还是会有一些细微的差别，因此设计了一种通用的ast去统一所有的语言生成的ast，这个通用的ast就是generic。
有了统一的ast后，就不用针对多种语言的ast写多份code去生成目标代码。只需要针对统一的ast写一份code去生成目标代码。
gcc中的ast用联合体（union）来表示即union tree_node。这是一个非常庞大的数据结构，因为要表示各种各样的树节点（例如声明、标识符、整型常量）。
将每一种节点统一到一个联合体中的好处就是便于代码阅读和代码的编写与维护。
union tree_node{ struct tree_base base; struct tree_common common; .... //用于变量声明，后面的例子中会用到 struct tree_var_decl var_decl; //整形常量节点 struct tree_int_cst int_cst; //标志符节点 struct tree_identifier identifier ....}上面的代码是gcc中表示ast的树节点。只列举了部分，实际上是一个非常庞大的数据结构。
int main(){ int a; int b;}以上面仅有两个声明的代码为例，在gcc中使用
struct tree_var_decl var_decl;
表示变量a和变量b两个声明。其具体的表示如下：
如上图所示对变量a的声明为绿色方框部分，对变量b的部分为红色方框部分。
两者交叉的部分为变量的类型，因为a与b都是int类型，所以用指针指向同一个int类型节点。
变量a与变量b通过var_decl的chan字段以链的方式连接起来。
3.4 gcc中的gimple在gcc中很多前端处理并不包含ast到generic的转换，而是直接将ast转换成与语言无关的另外一种中间表示，即gimple。
从gcc整体框架图可以看到，ast转换成gimple之后首先进行静态单赋值(ssa), 然后进行各种优化pass。
gimplify_function_tree是生成gimple的入口函数。
其作用是通过扫描函数的ast，分别对函数的返回值、函数参数、函数中的变量以及函数体的语句序列进行处理，并将其转换成对应的gimple序列。
gimplify_body函数,对函数的内容进行gimple转换。
gimplify_parameters对函数的参数列表进行gimple转换。
gimplify_stmt,函数体的gimple生成是通过调用gimplify_stmt完成的。
gimplify_expr 函数是gimple生成的核心函数，由gimplify_stmt调用。
另外一个需要注意的是，对于带有操作数的gimple语句，这些操作数的节点指针（类型为tree）将被连续存放在从该结构体最后一个成员tree op[1]开始的连续地址中。
对与gimple的介绍仅列出了相关的函数，是为了能够快速的定位到gimple生成的具体位置。想要了解更多细节，可以参考源码。
3.5 gcc中的rtlrtl 中文叫做寄存器传输语言（register transfer language）。rtl是一种非常接近汇编指令的中间表示。rtl采用了类似lisp语言的列表形式，描述了每一条指令的语义动作。
刚接触rtl的时候对其含义并不是太了解，导致代码难理解，因此在这儿对rtl的含义进行简要介绍，方便初学者能够快速入门gcc。
rtl是下面这样子的：
别以为是乱码，刚开始见的时候确实非常奇怪，但弄清楚之后非常简单。
其中set表示等号或者说是赋值，plus表示加法。si表示寄存器存取的模式，si表示该寄存器以32位整形的模式存取。
整个rtl的意思是：将寄存器139与寄存器138相加的值赋给寄存器140.
用一张图表示就是：
其中的xexp(x,0)是gcc源码中用来取第一个操作数的代码。
知道了rtl表示后阅读源码就会轻松许多，当然还有一些细节没有介绍，需要了解的可以后台回复gcc，下载我收集的几份比较好的国外ppt，再配合源码看起来会方便很多。
4 总结首先列举了学习编译原理的重要性以及编译原理理论。
然后分享了源码阅读心得。程序等于数据结构加算法，弄清楚数据结构基本上成功了一半。因此本文对gcc的整体架构和一些数据结构做了简要介绍，方便源码阅读。
最后介绍了开源编译器gcc从抽象语法树（ast）到汇编（asm）的过程。主要是gcc用来表示抽象语法树的generic以及两个中间表示gimple和rtl。这个过程是逐渐从目标硬件无关到目标相关的过程。
用于自主系统设计的激光雷达：对象分类还是对象检测
良好的数字模拟基础-Well Grounded, Digit
美国着力研发能几秒钟充好电的超级电池
带你了解最热门的三款FRAM产品
四大生物识别技术 巨头为何看好脸部识别？
如何从GCC源码学编译原理
世界未必需要比特币，背后的区块链才是价值所在
全球半导体产业深度变革 化合物半导体成新关注点
pcb产业发展前景介绍 PCB向“轻、薄、短、小”发展
SpaceX已经获得发射Starlink的卫星互联网项目的全部卫星批文
一文详解基站天线原理
浅析过孔的寄生电容和寄生电感
工业互联网现在处于怎样的阶段
不喜欢黑和灰？一加5终于有新配色了
2023年光子学市场规模将达到7804亿美元
ICE385565P单片开关电源的制作
中国铁塔公布上半年业绩报告：营收入达353.35亿元，净利润达12.1亿元
夏普领航8K市场稳步前行 消费者即将近距离体验8K电视
台积电将带来全球第一个2D纳米片晶体管，预计2024年实现量产
智能手机后置多摄像头时代已爆发！“堆料”策略是否还有空间？
本文结合编译原理理论和gcc实践做了一个总结，希望能给需要了解编译原理和底层知识的同学一个更快的学习路径。
除了gcc的文章之外，后续也会写一些llvm的文章，如果再有时间的话争取将gcc中的编译器算法和llvm中的编译器算法做一个对比总结。
希望看到这篇文章的朋友能持续关注本公众号，如果没有更新，肯定是研究代码去了，研究完之后的心得会第一时间在公众号分享出来，也希望能和更多的朋友一起交流，共同进步。
2. 编译原理基础2.1 编译原理的重要性了解事物的本质，是一件非常愉快的事情。
学习编译原理好处：
可以更加容易理解在一个语言中哪些写法是等价的，哪些是有差异的。可以更加客观的比较不同语言的差异不容易被某个特定语言的宣扬者忽悠学习更新的语言效率更高从语言a到语言b是一个通用的需求，学好编译原理会更加游刃有余用编译原理的眼光看自己的代码，能够写出优秀的单元测试。自己写的程序更优效率跟高自创一门新的语言编译原理可以说是一个计算机科学的缩影，在学习寄存器分配中会使用到贪心算法，死代码消除中会用到图论算法，数据流分析中使用到fixed-point algorithm，词法分析和语法分析中会使用到有限状态机和递归下降等重要思想。可见编译原理是值得学习的。
2.2 编译原理理论源程序到目标代码的过程要经历如下四个步骤：
首先是源程序到抽象语法树：
需要经历词法分析，也就是将程序中的一个一个字符按照单词识别出来。
然后是语法分析，将词法分析阶段的单词构成短语，将短语以抽象语法树的形式存储起来。
接下来是语义分析，语义分析是审查源程序有无语义错误，为代码生成阶段收集类型信息。
从源程序到抽象语法树的过程称为编译器前端。
中间代码生成：中间代码是与体系结构无关的一种中间表示，形式接近于汇编代码，中间代码的目的是为了能生成各种体系结构相关的目标代码但是只需要一套前端代码。
目标代码生成：中间代码到目标代码会经过大量的代码优化，例如死代码删除、指令调度等。这个过程称为编译器后端。
编译器后端是整个编译器中最精华的地方，如果想要提升程序性能，研究编译器后端算法绝对会让你受益良多。
下面是一条语句 i = j + k*10 编译过程的具体实例：
3.gcc实践3.1 源码阅读心得程序 = 数据结构 + 算法
相信很多关心程序效率的同学都有这样的体验：
算法和数据结构密不可分，一个高效的算法必然有合适的数据结构作为支撑。高效的算法与合理的数据结构同样重要。
对于算法，通常仔细读一读论文就可以弄清楚原理，但是去看一些开源代码具体实现的时候往往又一头雾水。
那是因为我们刚接触开源代码的时候并不清楚它的数据结构是如何设计的。
本文从gcc的数据结构开始入手，为想要快速上手gcc的同学提供一个捷径。
即使不关心gcc源码，也可以从数据结构设计中获得启发，毕竟合理的数据结构和高效的算法一样重要。
3.2 gcc整体结构我们通常认为gcc是一个编译器，然而官方的解释是这样的：
gcc is not a compiler.
gcc is a compiler collection that consists of three components.
a front end for each programming language, a middle end, and a back end for each architecture.
也就是说gcc是一个编译器集合，支持多种语言和多种硬件架构。
下图是gcc的一个整体结构图
gcc整体结构图
图中的绿色的部分generic、gimple、rtl是本文要介绍的，看懂这三个数据结构之后离看懂gcc源码基本就成功了一半。
3.3 gcc中的genericgcc中的generic其实也是一种抽象语法树（ast）。
从gcc整体结构图中我们可以看到，在generic前面已经生成了ast，为啥这儿的generic也是一种ast呢？
原因是这样的，从gcc整体结构图中我们可以看到，c语言会生成一种ast，c++也会生成一种ast，java还会生成一种ast。这三种ast其实还是会有一些细微的差别，因此设计了一种通用的ast去统一所有的语言生成的ast，这个通用的ast就是generic。
有了统一的ast后，就不用针对多种语言的ast写多份code去生成目标代码。只需要针对统一的ast写一份code去生成目标代码。
gcc中的ast用联合体（union）来表示即union tree_node。这是一个非常庞大的数据结构，因为要表示各种各样的树节点（例如声明、标识符、整型常量）。
将每一种节点统一到一个联合体中的好处就是便于代码阅读和代码的编写与维护。
union tree_node{ struct tree_base base; struct tree_common common; .... //用于变量声明，后面的例子中会用到 struct tree_var_decl var_decl; //整形常量节点 struct tree_int_cst int_cst; //标志符节点 struct tree_identifier identifier ....}上面的代码是gcc中表示ast的树节点。只列举了部分，实际上是一个非常庞大的数据结构。
int main(){ int a; int b;}以上面仅有两个声明的代码为例，在gcc中使用
struct tree_var_decl var_decl;
表示变量a和变量b两个声明。其具体的表示如下：
如上图所示对变量a的声明为绿色方框部分，对变量b的部分为红色方框部分。
两者交叉的部分为变量的类型，因为a与b都是int类型，所以用指针指向同一个int类型节点。
变量a与变量b通过var_decl的chan字段以链的方式连接起来。
3.4 gcc中的gimple在gcc中很多前端处理并不包含ast到generic的转换，而是直接将ast转换成与语言无关的另外一种中间表示，即gimple。
从gcc整体框架图可以看到，ast转换成gimple之后首先进行静态单赋值(ssa), 然后进行各种优化pass。
gimplify_function_tree是生成gimple的入口函数。
其作用是通过扫描函数的ast，分别对函数的返回值、函数参数、函数中的变量以及函数体的语句序列进行处理，并将其转换成对应的gimple序列。
gimplify_body函数,对函数的内容进行gimple转换。
gimplify_parameters对函数的参数列表进行gimple转换。
gimplify_stmt,函数体的gimple生成是通过调用gimplify_stmt完成的。
gimplify_expr 函数是gimple生成的核心函数，由gimplify_stmt调用。
另外一个需要注意的是，对于带有操作数的gimple语句，这些操作数的节点指针（类型为tree）将被连续存放在从该结构体最后一个成员tree op[1]开始的连续地址中。
对与gimple的介绍仅列出了相关的函数，是为了能够快速的定位到gimple生成的具体位置。想要了解更多细节，可以参考源码。
3.5 gcc中的rtlrtl 中文叫做寄存器传输语言（register transfer language）。rtl是一种非常接近汇编指令的中间表示。rtl采用了类似lisp语言的列表形式，描述了每一条指令的语义动作。
刚接触rtl的时候对其含义并不是太了解，导致代码难理解，因此在这儿对rtl的含义进行简要介绍，方便初学者能够快速入门gcc。
rtl是下面这样子的：
别以为是乱码，刚开始见的时候确实非常奇怪，但弄清楚之后非常简单。
其中set表示等号或者说是赋值，plus表示加法。si表示寄存器存取的模式，si表示该寄存器以32位整形的模式存取。
整个rtl的意思是：将寄存器139与寄存器138相加的值赋给寄存器140.
用一张图表示就是：
其中的xexp(x,0)是gcc源码中用来取第一个操作数的代码。
知道了rtl表示后阅读源码就会轻松许多，当然还有一些细节没有介绍，需要了解的可以后台回复gcc，下载我收集的几份比较好的国外ppt，再配合源码看起来会方便很多。
4 总结首先列举了学习编译原理的重要性以及编译原理理论。
然后分享了源码阅读心得。程序等于数据结构加算法，弄清楚数据结构基本上成功了一半。因此本文对gcc的整体架构和一些数据结构做了简要介绍，方便源码阅读。
最后介绍了开源编译器gcc从抽象语法树（ast）到汇编（asm）的过程。主要是gcc用来表示抽象语法树的generic以及两个中间表示gimple和rtl。这个过程是逐渐从目标硬件无关到目标相关的过程。
用于自主系统设计的激光雷达：对象分类还是对象检测
良好的数字模拟基础-Well Grounded, Digit
美国着力研发能几秒钟充好电的超级电池
带你了解最热门的三款FRAM产品
四大生物识别技术 巨头为何看好脸部识别？
如何从GCC源码学编译原理
世界未必需要比特币，背后的区块链才是价值所在
全球半导体产业深度变革 化合物半导体成新关注点
pcb产业发展前景介绍 PCB向“轻、薄、短、小”发展
SpaceX已经获得发射Starlink的卫星互联网项目的全部卫星批文
一文详解基站天线原理
浅析过孔的寄生电容和寄生电感
工业互联网现在处于怎样的阶段
不喜欢黑和灰？一加5终于有新配色了
2023年光子学市场规模将达到7804亿美元
ICE385565P单片开关电源的制作
中国铁塔公布上半年业绩报告：营收入达353.35亿元，净利润达12.1亿元
夏普领航8K市场稳步前行 消费者即将近距离体验8K电视
台积电将带来全球第一个2D纳米片晶体管，预计2024年实现量产
智能手机后置多摄像头时代已爆发！“堆料”策略是否还有空间？