Data URL 太长存不进数据库怎么办

Base64 是原始字节的 4/3,再加几十字节前缀。超过字段上限就换 MEDIUMTEXT,超过几 MB 就别存库了,扔对象存储只留 URL。

  • 长度 ≈ 原始字节 × 4/3,末尾填充符也要算
  • MySQL 的 TEXT 上限 65,535 字节,按字节不按字符
  • 单行 65,535 字节,VARCHAR 要跟整行所有列抢
  • 单条超过几百 KB 就别内联,改存对象存储
b64file — converter · local

粘贴即自动处理,不用点按钮(Ctrl+Enter 立刻转换 / Esc 清空)

粘贴、拖拽、Ctrl+V 截图都行

[01]

长度是怎么涨上去的

Base64 每 3 个字节编成 4 个字符,体积变成 4/3,涨三分之一。一张 200 KB 的图,编完是 267 KB 左右的纯文本,外面再套 data:image/png;base64, 这层声明,多几十字节。

膨胀是编码方式决定的,压不下去。字符表只有 64 个符号,一个字符最多带 6 bit 信息,剩下两位是固定开销。

粗算公式 4 * Math.ceil(bytes / 3),末尾的填充符已经算在里面。要精确到字节,用 体积换算 对一下。

[02]

字段该选哪个

MySQL 的上限按字节算,跟字符集无关。TEXT 的上限是 65,535 字节,按字节卡,不按字卡,这点最容易混。

类型上限(字节)大约能装
TINYTEXT255一张像样的小图标都不够
TEXT65,535约 48 KB 的原图
MEDIUMTEXT16,777,215约 12 MB 的原图
LONGTEXT4,294,967,2954 GB,够用但不划算

看着 LONGTEXT 一劳永逸,卡你的其实是另外两处。一是单行 65,535 字节的行长度上限:TEXT 列在行里只占 9 到 12 字节的指针,不占这条额度;VARCHAR 列要跟整行所有列抢,写大了直接 Row size too large。二是 max_allowed_packet,MySQL 8.0 起服务端默认 64 MB,整条 SQL 超过它就报 Packet too large。

PostgreSQL 那边松一点,text 不用声明长度,单个字段的硬上限是 1 GB。

还有个常见误解:以为换成 utf8mb4 就能多存。字符集只决定一个字符占几个字节,字节上限一点没动。

[03]

拆开存,代价在哪

按 64 KB 切片、存进关联表,确实能绕过字段上限。代价在读取侧:每次都要把碎片拼回来,排序、导出、备份全变麻烦,库里还躺着一堆看不懂的字符串。

更常见的选择是把文件放对象存储,库里只留 key 或 URL。库小了,备份快了,图片还能挂 CDN 吃缓存。迁移时也省事,换存储桶比改表结构简单。

中间路线是存之前先压一遍。gzip 对 Base64 文本有效,重复度高的 PDF、JSON 能压掉一半以上,照片基本压不动。

客户端统计长度常用字符数,落库按字节卡,两边对不上就会出现「接口说没超、数据库说超长」。写入前统一按字节算一遍。

拆列也算一种拆法:大字段单独建一张表,主表只留摘要和状态,列表页查询时就不会顺手把几 MB 的文本一起拉出来。

[04]

什么时候该放弃内联

三个信号:单条记录超过几百 KB;同一条数据被反复读;需要浏览器缓存或 CDN 加速。命中任意一条,内联就不划算了。

Data URL 内联适合的场景其实很窄:几 KB 的小图标、单文件 HTML、邮件模板。图片过了 10 KB,省下的那次请求,抵不过体积膨胀带来的传输开销。

非要在库里留着,写入前先算长度:编码后的字节数超过字段上限就在应用层拒掉,别等数据库抛异常再回头猜。

Data URL 生成与解析 那页能直接看到前缀结构,判断一段字符串是不是内联资源很快。

对象存储还有个附带好处:URL 能设过期时间,访问权限不必绑在数据库账号上。

常见问题

TEXT 到底能存多少汉字?

65,535 字节。utf8mb4 下一个汉字占 3 或 4 字节,实际一万六千字上下。存中文别按字符数估。

报 Packet too large 是什么原因?

一条 SQL 或一个数据包超过了 max_allowed_packet。MySQL 8.0 服务端默认 64 MB,可以调,单包上限 1 GB。

VARCHAR 能不能存 Base64?

能存,但 VARCHAR 跟同一行的所有列共享 65,535 字节,塞大段 Base64 会把整行顶爆,报 Row size too large。

存进数据库的 Base64 会自动压缩吗?

不会。InnoDB 的行格式压缩、页压缩都要显式开启,默认不压。想省空间自己先 gzip 一遍。

相关工具与指南