第二十六讲:大型项目调试技巧——GDB高级用法、核心转储分析、AddressSanitizer
调试,说白了就是跟代码里的bug斗智斗勇。我做了十几年大型项目,最深的体会就是:不会调试的程序员,就像不会看地图的船长。今天咱们聊聊三个实战利器——GDB高级用法、核心转储分析、还有AddressSanitizer。嗯,这些都是我每天吃饭的家伙。
一、GDB高级用法:不只是跑个bt
很多人用GDB,就知道设个断点、跑一下、看个堆栈。其实GDB的潜力远不止这些。我在项目中遇到过几次诡异的死锁问题,全靠GDB的线程调试功能才揪出来。
1.1 条件断点与断点命令
你想想看,一个循环跑100万次,你手动按c按到崩溃?
(gdb) break foo.cpp:42 if counter > 999000
(gdb) commands
> print counter
> print *this
> continue
> end
这样只在counter大于999000时才停下,并且自动打印信息。我个人习惯把常用断点命令写成脚本,省得每次重复敲。
1.2 反向调试(Reverse Debugging)
这个功能我吹爆。程序跑过了,你想回头看刚才发生了什么?
(gdb) target record-full
(gdb) continue
... 程序崩溃了 ...
(gdb) reverse-continue # 往回跑!
(gdb) reverse-step # 单步往回
说白了就是给程序装了个「时光机」。不过要注意,record模式会消耗大量内存,大型项目里别全程开着,只在关键路径上启用。
1.3 多线程调试三板斧
多线程调试是大型项目的噩梦。我建议你记住这三招:
- thread apply all bt:一键打印所有线程的堆栈
- set scheduler-locking on:调试当前线程时,其他线程冻结
- thread specific breakpoint:只让某个线程停
(gdb) thread apply all bt full # 带局部变量的完整堆栈
(gdb) break foo.cpp:50 thread 3 # 只在线程3命中
我曾经在一个20个线程的服务器程序里,用thread apply all bt发现某个线程卡在锁上,而持有锁的线程早就挂了——典型的死锁场景。
二、核心转储分析:事后诸葛亮也得当
线上崩溃了,你没法attach GDB怎么办?核心转储(core dump)就是你的救命稻草。
2.1 开启核心转储
很多新手上来就碰壁——core文件没生成。先检查一下:
ulimit -c unlimited # 取消大小限制
echo "/tmp/core.%e.%p" > /proc/sys/kernel/core_pattern # 自定义路径
嗯,这里要注意:容器环境里经常默认关闭core dump,记得在Dockerfile里加上。
2.2 分析core文件
拿到core文件后,用GDB加载:
gdb ./your_program /tmp/core.your_program.12345
进去之后,我一般按这个顺序查:
- bt:看崩溃时的堆栈
- frame N:跳到怀疑的帧
- info locals:看局部变量
- print *this:看对象状态
- list:看源码上下文
我的小技巧:如果bt显示在malloc/free里崩溃,十有八九是内存越界或重复释放。这时候别急着看堆栈,先检查一下附近的内存布局。
2.3 实战:分析野指针崩溃
有一次线上服务半夜挂了,core文件显示在某个对象的成员函数里崩溃。我一看this指针是0xdeadbeef——典型的已释放内存标记。用info registers看寄存器,发现rdi(this指针)指向一个已经被回收的内存池。最后定位到是某个线程在释放对象后,另一个线程还在用——加了个引用计数就解决了。
三、AddressSanitizer:内存错误的照妖镜
说实话,GDB和core dump都是事后补救。AddressSanitizer(ASan)才是预防针。它能在运行时直接检测内存错误,而且准确率极高。
3.1 编译启用
只需要加两个编译选项:
g++ -fsanitize=address -fno-omit-frame-pointer -g -O1 your_code.cpp -o your_program
注意:不要用-O2或更高优化,否则ASan的检测可能不准。我一般用-O1,兼顾性能和检测精度。
3.2 它能抓什么?
| 错误类型 | ASan检测能力 | 我遇到的典型案例 |
|---|---|---|
| 堆缓冲区溢出 | ✅ 精确到字节 | new[10]却写入了第11个元素 |
| 栈缓冲区溢出 | ✅ 精确到字节 | 局部数组越界 |
| 全局缓冲区溢出 | ✅ 精确到字节 | 全局数组越界 |
| 释放后使用 | ✅ 精确到行号 | delete后继续访问 |
| 双重释放 | ✅ 精确到行号 | 两次delete同一指针 |
| 内存泄漏 | ✅ 需要加LSan | 忘记释放的new对象 |
3.3 实战输出解读
ASan报错时,输出信息非常详细。举个例子:
==12345==ERROR: AddressSanitizer: heap-buffer-overflow on address 0x60200000eff4
WRITE of size 4 at 0x60200000eff4 thread T0
#0 0x4008a4 in main /home/user/test.cpp:10
#1 0x7f1234567890 in __libc_start_main
0x60200000eff4 is located 0 bytes to the right of 20-byte region
allocated by thread T0 here:
#0 0x7f1234567890 in operator new[](unsigned long)
#1 0x40087e in main /home/user/test.cpp:8
你看,它直接告诉你:在test.cpp第10行,往一个只有20字节的堆缓冲区右边写了4个字节。连分配位置(第8行)都标出来了。这比你自己猜快十倍。
注意:ASan会显著增加内存占用(约2-3倍)和运行时间(约2倍)。所以别在生产环境开,只在测试和CI里用。我一般会在CI流水线里专门跑一个ASan构建。
3.4 配合其他Sanitizer
除了ASan,还有几个兄弟工具:
- LeakSanitizer (LSan):检测内存泄漏,常和ASan一起用
- ThreadSanitizer (TSan):检测数据竞争,多线程神器
- UndefinedBehaviorSanitizer (UBSan):检测未定义行为,比如整数溢出
我个人习惯在开发阶段同时开ASan和UBSan:
g++ -fsanitize=address,undefined -fno-omit-frame-pointer -g -O1 ...
这样编译出来的程序,基本上能把90%的内存和UB问题都揪出来。
总结一下
这三个工具,我建议你这样用:
- 日常开发:开ASan跑单元测试,快速发现内存问题
- 复杂bug:用GDB高级功能,特别是反向调试和多线程分析
- 线上崩溃:确保core dump开启,事后分析定位根因
说白了,调试不是靠运气,而是靠工具和方法。你把这些练熟了,再诡异的bug也逃不出你的手掌心。嗯,今天就聊到这儿,下次咱们讲讲性能分析工具——perf和火焰图。