第二十六讲:大型项目调试技巧——GDB高级用法、核心转储分析、AddressSanitizer

调试,说白了就是跟代码里的bug斗智斗勇。我做了十几年大型项目,最深的体会就是:不会调试的程序员,就像不会看地图的船长。今天咱们聊聊三个实战利器——GDB高级用法、核心转储分析、还有AddressSanitizer。嗯,这些都是我每天吃饭的家伙。

一、GDB高级用法:不只是跑个bt

很多人用GDB,就知道设个断点、跑一下、看个堆栈。其实GDB的潜力远不止这些。我在项目中遇到过几次诡异的死锁问题,全靠GDB的线程调试功能才揪出来。

1.1 条件断点与断点命令

你想想看,一个循环跑100万次,你手动按c按到崩溃?

(gdb) break foo.cpp:42 if counter > 999000
(gdb) commands
> print counter
> print *this
> continue
> end

这样只在counter大于999000时才停下,并且自动打印信息。我个人习惯把常用断点命令写成脚本,省得每次重复敲。

1.2 反向调试(Reverse Debugging)

这个功能我吹爆。程序跑过了,你想回头看刚才发生了什么?

(gdb) target record-full
(gdb) continue
... 程序崩溃了 ...
(gdb) reverse-continue  # 往回跑!
(gdb) reverse-step      # 单步往回

说白了就是给程序装了个「时光机」。不过要注意,record模式会消耗大量内存,大型项目里别全程开着,只在关键路径上启用。

1.3 多线程调试三板斧

多线程调试是大型项目的噩梦。我建议你记住这三招:

  • thread apply all bt:一键打印所有线程的堆栈
  • set scheduler-locking on:调试当前线程时,其他线程冻结
  • thread specific breakpoint:只让某个线程停
(gdb) thread apply all bt full  # 带局部变量的完整堆栈
(gdb) break foo.cpp:50 thread 3  # 只在线程3命中

我曾经在一个20个线程的服务器程序里,用thread apply all bt发现某个线程卡在锁上,而持有锁的线程早就挂了——典型的死锁场景。

二、核心转储分析:事后诸葛亮也得当

线上崩溃了,你没法attach GDB怎么办?核心转储(core dump)就是你的救命稻草。

2.1 开启核心转储

很多新手上来就碰壁——core文件没生成。先检查一下:

ulimit -c unlimited          # 取消大小限制
echo "/tmp/core.%e.%p" > /proc/sys/kernel/core_pattern  # 自定义路径

嗯,这里要注意:容器环境里经常默认关闭core dump,记得在Dockerfile里加上。

2.2 分析core文件

拿到core文件后,用GDB加载:

gdb ./your_program /tmp/core.your_program.12345

进去之后,我一般按这个顺序查:

  1. bt:看崩溃时的堆栈
  2. frame N:跳到怀疑的帧
  3. info locals:看局部变量
  4. print *this:看对象状态
  5. list:看源码上下文

我的小技巧:如果bt显示在malloc/free里崩溃,十有八九是内存越界或重复释放。这时候别急着看堆栈,先检查一下附近的内存布局。

2.3 实战:分析野指针崩溃

有一次线上服务半夜挂了,core文件显示在某个对象的成员函数里崩溃。我一看this指针是0xdeadbeef——典型的已释放内存标记。用info registers看寄存器,发现rdi(this指针)指向一个已经被回收的内存池。最后定位到是某个线程在释放对象后,另一个线程还在用——加了个引用计数就解决了。

三、AddressSanitizer:内存错误的照妖镜

说实话,GDB和core dump都是事后补救。AddressSanitizer(ASan)才是预防针。它能在运行时直接检测内存错误,而且准确率极高。

3.1 编译启用

只需要加两个编译选项:

g++ -fsanitize=address -fno-omit-frame-pointer -g -O1 your_code.cpp -o your_program

注意:不要用-O2或更高优化,否则ASan的检测可能不准。我一般用-O1,兼顾性能和检测精度。

3.2 它能抓什么?

错误类型 ASan检测能力 我遇到的典型案例
堆缓冲区溢出 ✅ 精确到字节 new[10]却写入了第11个元素
栈缓冲区溢出 ✅ 精确到字节 局部数组越界
全局缓冲区溢出 ✅ 精确到字节 全局数组越界
释放后使用 ✅ 精确到行号 delete后继续访问
双重释放 ✅ 精确到行号 两次delete同一指针
内存泄漏 ✅ 需要加LSan 忘记释放的new对象

3.3 实战输出解读

ASan报错时,输出信息非常详细。举个例子:

==12345==ERROR: AddressSanitizer: heap-buffer-overflow on address 0x60200000eff4
WRITE of size 4 at 0x60200000eff4 thread T0
    #0 0x4008a4 in main /home/user/test.cpp:10
    #1 0x7f1234567890 in __libc_start_main
0x60200000eff4 is located 0 bytes to the right of 20-byte region
allocated by thread T0 here:
    #0 0x7f1234567890 in operator new[](unsigned long)
    #1 0x40087e in main /home/user/test.cpp:8

你看,它直接告诉你:在test.cpp第10行,往一个只有20字节的堆缓冲区右边写了4个字节。连分配位置(第8行)都标出来了。这比你自己猜快十倍。

注意:ASan会显著增加内存占用(约2-3倍)和运行时间(约2倍)。所以别在生产环境开,只在测试和CI里用。我一般会在CI流水线里专门跑一个ASan构建。

3.4 配合其他Sanitizer

除了ASan,还有几个兄弟工具:

  • LeakSanitizer (LSan):检测内存泄漏,常和ASan一起用
  • ThreadSanitizer (TSan):检测数据竞争,多线程神器
  • UndefinedBehaviorSanitizer (UBSan):检测未定义行为,比如整数溢出

我个人习惯在开发阶段同时开ASan和UBSan:

g++ -fsanitize=address,undefined -fno-omit-frame-pointer -g -O1 ...

这样编译出来的程序,基本上能把90%的内存和UB问题都揪出来。

总结一下

这三个工具,我建议你这样用:

  • 日常开发:开ASan跑单元测试,快速发现内存问题
  • 复杂bug:用GDB高级功能,特别是反向调试和多线程分析
  • 线上崩溃:确保core dump开启,事后分析定位根因

说白了,调试不是靠运气,而是靠工具和方法。你把这些练熟了,再诡异的bug也逃不出你的手掌心。嗯,今天就聊到这儿,下次咱们讲讲性能分析工具——perf和火焰图。