架构生长实验室 · 第 4 阶段 · 资料核对 2026-11-11

图片离开程序机器:从本机目录到对象存储

虚构小店的教学场景。规模、耗时和算例不是生产性能承诺;技术方案均需按实际部署核验。

  1. 加硬盘为什么只解决了一半问题
  2. 上传与下载是两条路,不要让每个文件都绕程序
  3. 私有文件、旧版本与费用:仓库建好之后

加硬盘为什么只解决了一半问题

青屿小店的图片越来越多,80 GB 磁盘开始紧张。把磁盘扩大当然可以解决一段时间的空间问题。可店主又提出两个要求:程序机器可以随时更换,以后还要同时运行两份程序。此时真正的问题变成“图片属于哪台机器,换机器以后谁还能找到它”。

本机文件的便利和限制

最初程序把上传的图片保存到本机目录,数据库存一个路径,Nginx 按路径读取并返回。没有额外服务,容易理解。但如果顾客上传到 A,而另一次访问到 B,B 的磁盘上未必有这个文件。复制文件可以解决部分问题,却又出现同步延迟、冲突、空间和恢复管理。

磁盘更大不会自动把文件共享到其他机器。把文件搬到数据库里也不是默认答案:数据库适合业务记录和查询,把大量图片字节混进去可能增加备份、恢复和数据访问负担。具体系统可以有例外,但必须有明确理由。

改造后的归属:数据记录与文件内容分开

程序与入口机器

Nginx:接网页和 API
业务程序:处理商品、权限和图片关联

独立数据服务

数据库:商品编号、名称、图片对象位置
对象存储:图片字节及对象元信息

右侧是两类独立服务的逻辑分组,不表示它们位于同一台服务器。对象存储不在每个商品 API 请求的中间;只有涉及文件时才访问。

对象究竟是什么?

对象可以理解为“文件内容,加上一个用于定位的名字和相关说明”。存储桶是组织这些对象的逻辑空间。对象名字常被叫作键,例如 products/123/main-v2.jpg。名字中有斜杠,不代表它一定像本机文件系统那样存在真实目录。

对象服务通过接口接收上传、读取、删除等请求,并按策略判断权限。你不需要逐台登录程序机器找文件。代价是访问方式从本机文件操作变成远端服务调用,需要处理网络、认证、请求失败和费用。

本机目录、共享文件系统、对象存储怎么选?

本机目录适合简单单机,成本和调用方式清楚,但共享与更换机器麻烦。共享文件系统让多台机器以较熟悉的文件方式访问共同空间,但要理解性能、权限、可用性及网络限制。对象存储适合以对象为单位上传和读取的图片、视频和导出文件,但并不保证支持所有本机文件操作语义。

OSS、S3 等是常见对象存储产品。比较时看地区、访问权限、生命周期、版本管理、请求与流量费用,以及应用所需接口是否兼容。不要因为名称都叫对象存储就假设所有行为完全一样。

上传与下载是两条路,不要让每个文件都绕程序

先看下载:商品页如何找到图片

商品数据库保存图片对应的位置或对象名。程序返回商品信息时带上可访问的图片地址,浏览器随后另发文件请求。商品名称和价格走程序与数据库,图片可以直接从对象存储返回,不必再穿过 Nginx 和业务程序。

公开商品图片的下载示例
  1. 浏览器→Nginx → 业务程序

    请求商品 123 的信息;程序查询数据库中的业务记录

    ← 返回:商品数据以及图片地址
  2. 浏览器→对象存储

    另发图片 GET 请求,按桶与对象名定位文件

    ← 返回:图片字节、内容类型和状态

这是两次不同请求。第一行的箭头是入口代理到程序,第二行直接访问对象存储;不能画成浏览器 → 程序 → 数据库 → 对象存储的必经串联。

上传方案一:经过业务程序

店主上传图片到程序,程序检查身份、大小和文件要求,再调用对象存储保存,成功后更新数据库关联。流程容易集中管理,也方便执行某些检查;但图片字节经过程序机器,占它的网络、内存或临时磁盘。大文件和大量并发上传会放大这项成本。

上传方案二:先拿受限授权,再直接上传

程序先确认店主身份和允许上传的位置,生成有期限、有限操作范围的授权。浏览器拿授权直接向对象存储发送文件,完成后通知业务程序核对并关联商品。某些产品使用预签名 URL 或临时凭证,具体约束方式不同。

示例顺序:
1. 浏览器 → 程序:我要给商品 123 上传主图。
2. 程序 → 浏览器:允许上传到指定对象位置的受限授权。
3. 浏览器 → 对象存储:上传文件;存储服务返回结果。
4. 浏览器 → 程序:请求确认;程序核对对象及权限,更新商品记录。

不能只因为浏览器说“上传完成”就无条件信任它。程序要按业务要求核对文件是否存在、对象归属、大小或类型等。内容安全检查和格式校验也需要设计,不是直传就自动完成。

为什么仍然要数据库?

对象存储保存图片,但不知道这张图属于哪个商品、哪个店主、是否已经审核。数据库记录业务关系。文件上传成功而数据库更新失败时,可能留下无人引用的对象;数据库先写成功而文件没有上传完成,也可能产生坏链接。两套系统之间不是天然一个事务,需要状态和清理机制。

可以先记录“待上传”,完成核对再改为“可使用”;定期清理超过期限且未关联的对象。删除商品也不一定立刻永久删除图片,要考虑恢复、引用关系和保留策略。

私有文件、旧版本与费用:仓库建好之后

公开商品图与私人文件不能共用一种权限思路

商品宣传图可以按需求公开读取;顾客的发票或私人附件则不能仅靠一个“不容易猜到的文件名”保护。程序应先验证顾客是否有权访问,再提供受限的访问方式。授权地址在有效期内通常能被拿到它的人使用,因此要控制范围、期限和泄露风险。

浏览器跨域访问还可能涉及 CORS,即服务告诉浏览器允许哪些网页来源读取响应的规则。它不是服务器端身份授权的替代品,也不是把桶变成私有的开关。访问策略、签名、网页来源限制各有不同职责。

图片修改之后,旧地址怎么办?

直接覆盖同名对象可能让浏览器或之后引入的 CDN 继续使用旧副本。给新版本使用新的对象名,数据库更新引用,是常见做法之一;它更容易区分版本,但旧文件需要清理或按期限保留。对象存储自身版本功能也可能有帮助,不过要核对产品能力与额外存储费用。

不要把持久性宣传等同于“不会误删”。错误程序和账号权限过大仍可能删除文件;版本、备份、保留与恢复演练分别解决不同风险。

一个简单的用量账本

假设有 10,000 张图片,每张平均 0.5 MB,总内容约 5,000 MB。每天下载 20,000 张,按没有缓存的简化假设,每天传输约 10,000 MB。保存容量与下载量是不同账目,不能只看“仓库才几 GB”就忽略流量。

真实账单还可能有请求、版本、跨地区、数据取回等项目,单位和计费口径依产品而异。已有费用估算页给的是明确假设下的教学估算,采购时需要核对官方价格。

为什么下载仍然可能慢?

文件仓库独立后,程序更容易更换和扩容,但顾客与存储地区之间的距离、网络路径、图片大小仍存在。把图片放到对象存储不等于它自动出现在所有顾客附近。下一阶段 CDN 才处理适合缓存内容的分发问题。

如何确认迁移真的解决问题?

检查多台程序能否一致引用图片、程序替换后文件是否仍可用、上传成功与业务关联是否一致、权限是否符合预期。再看程序出口和磁盘压力是否下降,以及新增存储、请求和流量费用。收益不能只用“少了一个文件目录”来判断。

现在可以明确说:Nginx 仍接网页和 API;程序管理商品与文件关系;数据库存业务记录;对象存储存文件。下载图片时,浏览器可能直接找存储服务,不一定再进网站大门。