有一次,我被叫去处理一台机架式存储服务器的问题。现场工程师很笃定地跟我解释:JBOD嘛,就是把两块盘串起来,RAID 0是并着跑,串着跑能变大,并着跑才提速。这话听起来好像没毛病,但真正从底层一看,问题远没有那么简单。RAID 0的条带化和JBOD的串联,虽然经常被放在一起比较,甚至在部分阵列界面里只有一字之差,但它们的数据布局、性能特征、故障爆炸半径完全是两套逻辑。这台机器最后的处理方案也让我意识到,很多人对这两个词的误解,远比想象中深。
这篇文章就从我实际排查和部署存储的经历出发,把条带化与串联这两条技术路线的本质差异讲透。我不打算给你背教科书定义,而是直接从数据在磁盘上怎么摆、请求下来后控制器怎么切、盘坏了之后你能救回什么东西这几个角度聊,顺便把选型时容易被忽略的坑也排一排。
1. 先澄清概念:JBOD 所谓的“串联”,物理链路上根本不存在
1.1 我在一次故障排查中听过的离谱说法
那次故障其实不算复杂,机器上原本有两块 4TB SAS 盘,客户想扩一个视频存储卷,新加了两块 8TB 盘。实施同事在 RAID 卡 BIOS 里看到两个选项,一个 RAID 0,一个 JBOD,他犹豫了一下选了 JBOD,理由是“JBOD 就是把盘串起来,容量可以变大,RAID 0 也是把两个盘当一块用,似乎差不多”。
结果视频服务跑起来后,新卷的写入速度始终只有单盘水平,客户质疑硬件有问题。我去现场后先做了两件事:第一,看 RAID 卡里虚拟磁盘的拓扑;第二,查系统层识别到的磁盘设备。结果发现,这块 RAID 卡上的“JBOD”并不是把两块盘拼成一个卷,而是把两块盘分别透传给操作系统,系统层看到的是 /dev/sdb 和 /dev/sdc 两块独立盘,根本没有组成一个跨盘设备。同事做的“扩容”只是在 Linux 里把第二块盘单独格式化、挂载到另一个目录,跟原来的存储池毫无关系。
这个案例非常典型,因为它暴露了 JBOD 这个词在行业里的混乱用法:一部分设备管 JBOD 叫“多块盘组合成一个大线性卷”,另一部分设备管 JBOD 叫“把物理盘直接透传给操作系统”。两种语义完全不同,做出来的效果也完全不同。
1.2 JBOD 在不同厂商实现下的两种面孔
从字面上看,JBOD 是 Just a Bunch Of Disks,意思就是“一堆盘”。传统存储阵列和直通 HBA 卡场景里,JBOD 通常指每块物理盘被独立识别,操作系统直接拿到原生的块设备,盘上的 SMART 信息、扇区重映射数据都直通给系统。这种模式下,控制器不做条带、不做校验、不合并容量,RAID 卡本质上退化成一个端口扩展器。
另一类实现出现在很多 NAS 和部分入门级阵列上。你在群晖、威联通或者某些国产存储设备里建立存储池时,如果选“JBOD”,系统实际做的是把多块物理盘按顺序拼接成一个逻辑卷。现代 Linux 里对应的概念是 md 驱动的 linear mode,Windows 磁盘管理里叫“跨区卷”。注意,这里所有盘被绑定成一个块设备,操作系统看不到单盘,只能看到一个总容量叠加的大卷。
搞清楚这两种面孔之后,你才能理解为什么大家总把 JBOD 和“串联”混在一起说。实际上,物理链路上没有任何一场“串联”。SATA/SAS 盘都接在背板的端口上,控制器通过端口选择器分时访问每一块盘,电学意义上这些盘是并联在总线上的。所谓串联,只是逻辑卷层面的“数据线性拼接”:第一块盘满了才写第二块。
1.3 RAID 0 的条带化到底怎么工作
RAID 0 虽然名字里有 RAID,但它完全没有冗余,这一点人尽皆知。它的核心是条带化(striping),控制器把连续的逻辑地址空间切成长度相等的块,然后轮流写到阵列里的每一块物理盘上。举个例子,两块盘做 RAID 0,条带深度设为 256KB,那么逻辑地址 0~256KB 落在盘 A,256KB~512KB 落在盘 B,512KB~768KB 又回到盘 A,依次类推。
这种交叉排列带来的直接效果是:当上层应用发起一个较大的连续读或写请求时,控制器可以把请求拆分到多块盘并行处理。机械盘时代,单盘顺序读可能只有 200MB/s,两块盘 RAID 0 可以跑到接近 400MB/s;到了 SSD 时代,虽然单盘性能已经很高,但多盘 RAID 0 的队列深度叠加依然有效,尤其是多线程随机读场景。
到这里,你已经能看出条带化和线性拼接的本质分歧了:RAID 0 是把数据拆开交错存放,JBOD 线性卷是把数据按顺序接龙存放。这个分歧决定了后面所有性能、故障、容量管理上的差异。
需要模型API调用? 免费领10W Token,多模型网关一键接入 Claude、DeepSeek 等主流模型。
2. 写入布局的分水岭:拆着写还是接着写
2.1 一次大文件写入分别经过了什么
为了说清楚差异,我模拟一个最常见的场景:向一个 8TB 逻辑卷写入一个 8GB 的镜像文件,底层是两块 4TB 盘。
如果这个卷是 RAID 0,控制器会把 8GB 文件按 256KB 条带切成 32768 个小块,第 1 块写盘 A,第 2 块写盘 B,第 3 块写盘 A……最终文件数据被均匀地撒在两块盘上。写的过程中,盘 A 和盘 B 的磁头同时在运动,缓存也在同时被消耗。单块盘的持续写速度如果是 150MB/s,那么逻辑卷的持续写速度可以接近 280~300MB/s,因为控制器还要处理拆分和总线调度的开销,做不到严格翻倍。
如果这个卷是 JBOD 线性卷,写入流程就简单粗暴得多:文件系统把数据块从逻辑地址 0 开始往后分配,底层线性映射让这些块先写到盘 A。盘 A 剩余空间假设还有 700GB,那么这 8GB 文件会完整地落在盘 A 上,盘 B 全程围观,连一个扇区都不用碰。写完之后,逻辑卷的写入速度基本等于单块盘的速度,没有任何叠加收益。
这就是为什么很多人在 JBOD 线性卷上拷贝大文件,感觉速度和单盘一模一样,甚至会怀疑“是不是没有组上阵列”。你的感觉没有错,JBOD 本来就不提供性能叠加。
2.2 chunk 与 Span 边界:为什么 RAID 0 可以叠加性能,JBOD 不行
RAID 0 性能叠加的核心在于条带单元的并行度。你把 n 块盘组成 RAID 0,对于单个大请求,控制器会尽量让 n 块盘同时工作。但这里有个容易被忽略的细节:如果请求的大小小于一个 chunk,控制器没有必要拆它,只会挑一块盘去写。因此,RAID 0 叠加的是多盘并发处理能力,而不是把单次 4KB 小请求变快。你在数据库里跑大量 8KB 随机写,如果队列深度不够,RAID 0 不一定能翻倍,但并发一上来,多块盘的 IOPS 贡献就出来了。
JBOD 线性卷不存在 chunk 的概念,它的边界叫 Span 边界。数据在逻辑卷内部是连续地址映射,操作系统根本不知道盘 A 和盘 B 的物理分界线在哪里,只有当逻辑地址跨越盘 A 的末尾时,控制器才把目标切换到盘 B。这种设计在扩容时很直观,但对性能毫无帮助,反而可能在跨边界时产生一次额外的寻道切换,让单次大文件读取出现一个轻微毛刺。
我在实测中遇到过很典型的毛刺:用 dd 从 JBOD 线性卷读一个分布在跨盘边界附近的大文件,速度曲线会出现一个小凹陷,原因就是控制器把读写目标从盘 A 切到盘 B 时,需要重排命令队列,机械盘尤其明显。RAID 0 不会有这个问题,因为条带已经把数据分散交织,控制器的命令队列里始终有多个磁盘的目标。
2.3 负载不均衡与寿命损耗
JBOD 线性卷另一个容易被忽略的问题是负载严重不均衡。这个其实和标题里顺手搜到的“电容串联分压不均衡”有点神似:串联电路里电容上的电压分配受容值影响,容易不均;串联硬盘卷里,写压力分配受剩余容量影响,更是天然不均。第一块盘永远先被写,写满了才轮到第二块。如果业务是持续往同一个卷里追加数据,你会发现盘 A 的累计写入量、运行温度、磨损度都远高于盘 B,两者的寿命曲线完全不在一个水平线上。
RAID 0 的条带化写则会把写放大平均摊到每块盘上。两块盘做 RAID 0,写入量基本是同步增长的,磨损也相对均匀。这个差异在机械盘时代可能只是寿命长短问题,到了 SSD 时代就很要命了——如果 JBOD 线性卷底层是两块 SSD,第一块盘的闪存擦写次数会提前耗尽,而你第二块盘可能还有大把寿命没用。所以企业级 SSD 阵列我几乎不会建议用线性卷模式,要么就 RAID 0/10,要么就每块盘独立挂载。
3. 一组量化对比:性能、容量、故障率的真实数值
3.1 用同一组磁盘跑出来的参考数据
为方便说明,我拿两块同样规格的 10K 转 1.2TB SAS 盘举例,分别做成 RAID 0 和 JBOD 线性卷,用 fio 跑几种典型负载,结果大概可以是这样的:
| 指标 | RAID 0(两块盘) | JBOD 线性卷(两块盘) | 单块盘基线 |
|---|---|---|---|
| 顺序读带宽 | 约 380MB/s | 约 195MB/s | 约 200MB/s |
| 顺序写带宽 | 约 350MB/s | 约 190MB/s | 约 190MB/s |
| 4KB 随机读 IOPS(QD=32) | 约 620 | 约 315 | 约 320 |
| 4KB 随机写 IOPS(QD=32) | 约 260 | 约 135 | 约 140 |
| 容量利用率 | 100% | 100% | 100% |
| 单盘故障后数据可用性 | 整卷不可用 | 整卷后半段或前半段不可用 | 该盘数据不可用 |
注意上表里的 JBOD 指的是线性拼接模式。如果 JBOD 是直通模式,操作系统看到的就是两块独立盘,压根没有逻辑卷合并的概念,性能表现自然完全等效于单块盘。很多拿到“JBOD”选项的服务器用户,实际得到的可能就是直通模式,于是他们发现新卷速度没有提升,这是完全符合预期的。
我在实际项目中用 12 块盘做过类似对比:RAID 0 卷在 128KB 条带下跑顺序读,12 块 10K SAS 盘能跑到 1.8GB/s 以上;同样的盘做 JBOD 线性卷,跑出来只有单盘速度,因为控制器的瓶颈根本不在于总线,而在于你只有一套串行地址解析逻辑。你要靠 JBOD 提升性能,那是南辕北辙。
3.2 故障率并没那么玄,但故障模式差异很大
聊到故障,很多人第一反应是 RAID 0 和 JBOD 都是无冗余方案,坏一块盘都丢数据。这个说法对,但不全对。故障可以用概率量化:假设企业盘的年故障率 AFR 是 1%,两块盘组成 RAID 0 后,逻辑卷全年出现不可用的概率大约是 1 - (0.99 × 0.99) = 1.99%,两块盘都比单盘更容易碰到整体失效情况,因为任何一个成员掉链子,整个卷就完蛋。
JBOD 线性卷如果也被系统当成一个大卷使用,那么它的整体失效概率和 RAID 0 相同,都是 1.99%。区别在于失效后的数据受损模式不同。RAID 0 因为数据条带交织,一块盘坏了,逻辑卷内几乎所有大文件都可能缺了某一段,文件系统无法正常挂载。JBOD 线性卷的数据是按地址连续排列的,如果坏的是盘 B,盘 A 上的前半段数据理论上还在,前提是文件系统没有跨盘边界分配目录项和元数据,不过实际情况往往混合分布,不能保证。
真正拉开差距的是 JBOD 直通模式。这个模式下每块盘是独立失败域,盘 A 坏了不会影响盘 B,盘 B 上的文件系统还能正常挂载、正常读写。这种“爆炸半径小”的特性,是大数据节点喜欢用 JBOD 的核心原因,后面我会专门展开。
3.3 RAID 0/1/5/10 里为什么只有 RAID 0 喜欢被拉来和 JBOD 对比
很多人搜“RAID 0 1 5 10 区别”,最后得出的结论是:RAID 0 最少需要两块盘,没有冗余,空间利用率 100%,性能最好。恰好 JBOD 也不需要冗余、空间利用率也是 100%,两者就总被放在一起比较。
其实从数学角度看,RAID 0 的条带化和 JBOD 线性卷根本不在一个维度。RAID 1 是镜像,RAID 5 是分布式校验,RAID 10 是先镜像再条带,它们都有各自的冗余和重建逻辑。RAID 0 的独特性在于它牺牲了所有冗余,只追求容量和性能;JBOD 连性能都不追求,只追求“让多块盘变成一个更大的卷”或者“让多块盘独立可用”。所以 JBOD 不是一个 RAID 级别,它是 RAID 之外的另一种磁盘管理思路。
在某些阵列控制器的菜单里,你甚至会看到 RAID 0 和 JBOD 相邻排列,新手里很容易认为“JBOD 是 RAID 0 的简化版”。但从上面的量化对比可以看出,两者连简化关系都谈不上:一个是并行速度叠加,一个是接龙式扩容,方向完全不同。
4. 掉盘以后的分岔路:爆炸半径、重建过程与可恢复性
4.1 两块盘都有坏道:RAID 0 与 JBOD 线性卷的际遇
我处理过一个真实故障,可以帮助你把故障模式刻进脑子。一台老服务器,两个 2TB 盘组了个线性卷,跑内部文件共享。某天用户报告,某个目录读不出来,但其他目录可用。我登上去看 /var/log/messages,系统大量报 SCSI medium error,错误指向第二块物理盘。因为是 md 线性模式,我先把包含坏盘的 md 设备停掉,再用只读方式单独挂载第一块盘,结果第一块盘上的目录完全正常——很多历史文件都还救得回来。
如果这是一个 RAID 0 卷,同样第二块盘报 medium error,情况就完全不同了:RAID 0 没有校验、没有镜像,只要有一块盘出现无法读取的扇区,整个虚拟磁盘的 I/O 就会陷入错误风暴,文件系统挂载失败。你拿第一块好盘去做数据恢复,会发现它里面只有交错的半个条带,单凭它无法拼出完整文件。
这个对比说明了一个容易被人忽略的事实:RAID 0 和 JBOD 线性卷虽然都没有冗余,但它们的“数据可恢复性”并不是一回事。RAID 0 任何一块盘的物理损坏都会让整个逻辑卷的文件系统崩溃;JBOD 线性卷则取决于坏盘落在哪个区段,其他区段的数据有更高概率通过绕过坏盘的方式来抢救。当然,前提是文件系统元数据没有横跨盘边界。
4.2 阵列卡日志里“UB”和“Foreign”的一些经验读法
如果你用的是 LSI/Broadcom 的 MegaRAID 系列阵列卡,会遇到几个很扰人的状态词。插进新盘时,它显示为 Unconfigured Good(UB),意思是“我认识这块盘,但它不属于任何虚拟磁盘”。很多初学者以为 UB 就是 JBOD,其实不一定。在传统 RAID 卡上,UB 状态下的盘默认是被 RAID 卡“监管”的,但还没有被组成卷;如果你把卡切换到 JBOD 模式,UB 盘通常会被透传给操作系统,系统才能看到原生设备。
如果你把一块曾经在另一台机器上做过 RAID 的盘直接插进来,卡会把它标成 Foreign(外来盘)。这时候千万不要手一抖选“Clear Foreign”,否则盘上的原有阵列配置信息会被抹掉,如果原机器数据结构特殊,数据恢复难度会直线上升。我处理过一次这样的情况:运维图省事直接把旧盘插到新卡上,阵列卡提示 Foreign,他选了 Import,结果因为新旧卡阵列元数据版本不同,卷虽然出现了但挂载失败。后来用 dd 备份整盘镜像,再用软件分析 RAID 参数才找回来数据。
JBOD 直通模式的排查相对简单,你可以在命令行下检查:
code复制storcli /c0 show jbod
返回结果里能看到哪些盘处于 JBOD 透传状态。老的 MegaCli 工具用:
code复制MegaCli64 -AdpSetProp -EnableJBOD -a0
可以把阵列卡切换为支持 JBOD 透传模式。不过要注意,部分入门级 RAID 卡即使开了 JBOD,依然会拦截 SMART 直通,系统读不到盘的健康信息,这种半吊子模式下做监控会很被动。
4.3 直通 JBOD 做多副本:大数据节点故意不用 RAID
讲到直通 JBOD,就绕不开大数据场景。我在部署 Hadoop DataNode 集群时,官方推荐配置始终是“每块盘一个独立挂载点”,也就是 JBOD 直通模式,而不是用 RAID 0 或 RAID 5 把 12 块盘合成一个大卷。
原因有两点。第一,HDFS 本身就有三副本机制,数据在节点之间已经做了冗余,底层再做 RAID 属于重复投资,白白消耗容量和性能。第二,RAID 0 的爆炸半径太大:如果 12 块盘组成一个 RAID 0 卷,任何一块盘损坏,整个节点上所有副本都一起丢失,HDFS 可能同时失去多个数据块,恢复代价极高。而直通 JBOD 下,每块盘都是一个独立失败域,坏一块盘只损失这盘上的副本,HDFS 会从其他节点重新补副本,系统几乎无感。
在这种场景里,JBOD 的价值恰恰在于它“不合并、不条带、不冗余”。你把 JBOD 线性卷模式用在大数据节点上,反而会制造一个跨盘的单点,和 Hadoop 的设计哲学相冲突。所以,看到厂商手册里写“大数据推荐 JBOD”,你要先搞清楚这个 JBOD 是指直通模式还是线性拼接模式,两者结论完全相反。
5. 部署时要避免的常见误区与几组可落地配置
5.1 什么场景真的适合 JBOD
说了这么多,很多朋友最关心的还是:我手头有服务器,到底该不该用 JBOD?
我按经验把适合的场景列一下。直通 JBOD 适合以分布式文件系统、对象存储为上层应用的节点,比如 HDFS DataNode、Ceph OSD 节点。这类系统自带跨节点副本或纠删码,不需要底层 RAID 凑冗余,让每块盘独立暴露给系统反而最灵活。另外,如果只是做临时数据存放、系统备份暂存区,追求单块盘故障不影响其他盘,直通 JBOD 也是可以的,前提是上层应用能接受“数据可能丢一块盘”的现实。
JBOD 线性拼接模式适合的场景就很窄了。我能想到的只有老式监控存储机、需要单卷超大容量但容忍故障的冷数据归档场景。例如 4 块 20TB 盘做成一个 80TB 的 JBOD 线性卷,只用来存放可以重新生成的转码素材或缓存的视频备份,用满容量且不追求速度,这种场景偶尔会出现。但我在这种项目里一般会反复和客户确认:你真的不打算给数据加任何冗余吗?如果不是预算特别紧,我更愿意推荐 RAID 6 或 ZFS 双校验。
5.2 在 Linux 与阵列卡上落地 JBOD 直通/线性卷时要注意的细节
如果你确实要在 Linux 下做线性拼接卷,可以参考这套命令。假设有两块数据盘 /dev/sdb、/dev/sdc,先分区并标记为 Linux raid autodetect:
code复制parted /dev/sdb mklabel gpt
parted /dev/sdb mkpart primary 0% 100%
parted /dev/sdb set 1 raid on
# 对 /dev/sdc 重复同样操作
然后创建 linear 卷:
code复制mdadm --create /dev/md0 --level=linear --raid-devices=2 /dev/sdb1 /dev/sdc1
创建后查看:
code复制mdadm --detail /dev/md0
你会看到 Array Size 约等于两块盘容量相加,但没有任何校验和镜像信息。要拆掉这个卷时,注意顺序:
code复制umount /dev/md0
mdadm --stop /dev/md0
mdadm --zero-superblock /dev/sdb1
mdadm --zero-superblock /dev/sdc1
如果忘记 --zero-superblock,后续要把这两块盘重新做成 RAID 或直接格式化时,内核可能会因为残留的 md 超级块而误判盘已被占用,这是个容易踩的小坑。
直通 JBOD 模式下,系统层如果新插入一块盘没被识别,可以触发热扫描:
code复制echo "- - -" > /sys/class/scsi_host/host0/scan
然后运行 lsblk 查看是否出现新的块设备。在 MegaRAID 卡上做直通前,记得先把盘从 Foreign 状态清掉,再到阵列卡 BIOS 里把盘设成 JBOD。某些阵列卡默认开启 “Enable JBOD” 会影响已存在阵列的安全性,实施前最好确认卡上所有已有虚拟磁盘都处于健康状态。
5.3 我的最后建议:先把冗余策略想清楚再谈性能
我在存储这一行干了十几年,见过太多“先上车后补票”的案例。有人为了省两块盘的钱,把业务卷做在 RAID 0 上,跑了三年没出事,但某一次双盘同时掉线,整个业务系统瘫痪了两天,损失远超买盘的钱。也有人误把 JBOD 直通模式当成“阵列没配好”,反复折腾,结果把盘上的数据搞丢了一半。
我的习惯是先问一句话:这份数据如果没了,对你的业务意味着什么?答案如果是“不可接受”,那不管是 RAID 0 还是 JBOD 都不该考虑,至少上 RAID 1 或 RAID 10。答案如果是“可以重建、可以重下、只是麻烦”,那选 RAID 0 还是 JBOD 就变成纯粹的性能与运维偏好问题。追求吞吐和多盘并行,选 RAID 0;追求单盘独立、故障隔离,选直通 JBOD。至于线性拼接 JBOD,我只有在确定“容量是唯一诉求”时才会用。
另一个容易忽略的点是监控和预警。RAID 0 卷由于没有冗余,我建议至少做三件事:第一,开启阵列卡或操作系统的 SMART 定时巡检,发现重映射扇区数增长就要警惕;第二,给逻辑卷做定期哈希校验,尤其是 RAID 0 跑久了以后,静默数据损坏的概率在机械盘上并不低;第三,无论 JBOD 还是 RAID 0,都必须在应用层保留另外一份备份或副本,不要把鸡蛋全放在一个无冗余卷里。
我个人经历里最深刻的一次教训,是给一台渲染农场配了 8 块盘的 RAID 0 作为素材临时卷,当时想着素材源文件在 NAS 上有备份,断几块盘大不了重新拷。结果崩盘后才发现,源文件已经在半月前被自动清理脚本删了,而渲染输出有一部分还没上传回 NAS。那次事故让我养成一个习惯:无冗余卷上永远只放“丢了也不心疼”的数据,哪怕性能再好,也要给自己留好后路。
