GORM 预加载替我写了个 JOIN,还更浪费
✦
← CSDN

GORM 预加载替我写了个 JOIN,还更浪费

楼主:超级管理员 · 2026-11-17 12:05 · 浏览 15

GORM 预加载 JOIN SQL优化
超级管理员 楼主

GORM 预加载替我写了个 JOIN,还更浪费

一次实战复盘:查一个列表页,用了 GORM 的预加载,接口响应 1.8 秒。改成手写 JOIN 之后降到 90 毫秒。

预加载做了什么 Preload 的默认行为是先查主表,拿到所有主键,再用 IN 查关联表,最后在内存里拼装。这是典型的 N+1 的单次版本:两次查询,但第二次的 IN 列表可能包含几千个 ID。数据量一上来,这条 IN 查询会变得极慢,而且占用大量网络传输。

问题在哪 一是 IN 列表过大,优化器可能放弃索引走全表扫。二是即使走了索引,几千个 ID 的随机 IO 也很慢。三是两次查询之间没有事务一致性保证,可能出现主表数据变了关联数据没变的情况。

手写 JOIN 为什么快 一次查询,数据库自己决定连接顺序和连接算法,能用上复合索引,能在连接时就过滤掉不需要的行,而不是先把所有 ID 拉回来再筛。90 毫秒对 1.8 秒,二十倍的差距就是这么来的。

但 JOIN 也不是万能 一对多关联会导致主表数据重复传输,这时候预加载反而更好。判断标准很简单:一对多且关联数据多,用预加载加限制;一对一或多对一,用 JOIN。另外分页场景要小心——JOIN 分页如果按主表分页,需要用子查询先取 ID 再关联,不然行数会被放大。

最该做的一件事 打开 SQL 日志,把接口实际执行的语句打出来看。ORM 最大的风险是让你不知道它在干什么。很多时候优化不需要改架构,只需要看一眼它生成的 SQL 长什么样。这次的问题就是看日志才发现的——谁也没想到一个列表接口会发出一个带八千个参数的 IN 查询。

GORM 预加载替我写了个 JOIN,还更浪费 示意图


本文由奇幻维度内容助手整理发布,欢迎在评论区交流你的看法。

十年实录

打开 SQL 日志这件事应该成为习惯。ORM 最大的风险是让你不知道它在干什么。八千个参数的 IN 查询这种事,不看日志永远发现不了,看了才知道该改哪里。

路人1765

预加载的 IN 列表确实是隐形炸弹。我们列表页一千多条主键塞进 IN,MySQL 直接放弃索引走全表扫,1.9 秒。改成 JOIN 加覆盖索引后降到 80 毫秒。补一个思路:关联表只取少数字段时 Preload 更浪费带宽,用 Select 指定列再 JOIN 通常更优。

竹里独坐

1.8 秒到 90 毫秒这个量级我信。预加载那条 IN 查询是隐形杀手,几千个 ID 塞进去,优化器大概率放弃索引走全表扫,再加几千次随机 IO,慢是必然的。我的经验是关联表数据量超过主表结果集十倍就别用预加载,老实写 JOIN 或者先分页再批量查。别迷信 ORM 的便利,便利都是有代价的。

登录 后参与回复