新物网

当前位置:

科技

制造业分布式存储案例:检测数据湖与追溯提速

时间:2026-10-08 16:09:35 来源: 互联网
制造业分布式存储案例:检测数据湖与追溯提速

制造业产线上的数据正在以超出预期的速度堆积。以半导体显示面板制造为例,一片基板从投入到末尾检测,会生成 AOI 缺陷图谱、电测结果、Demura 原始数据以及当班的工艺...

制造业分布式存储案例:检测数据湖与追溯提速

制造业产线上的数据正在以超出预期的速度堆积。以半导体显示面板制造为例,一片基板从投入到末尾检测,会生成 AOI 缺陷图谱、电测结果、Demura 原始数据以及当班的工艺与设备日志,体量随产线节拍持续增长,却没有归到同一个地方。数据分散留存在机台本地盘、各厂区彼此独自的盘阵和不同业务系统里,当企业要复盘异常批次、响应客户审厂、为算法团队准备训练样本时,往往需要数天时间手工拼接。天昕电子面向制造行业给出的分布式统一存储方案,正是针对这一落差设计的。

一、痛点:数据留不住、调不齐、追不动

**留存周期与容量错配。**检测图像通常直写机台本地盘,盘位有限,留存周期短,超期即被自动覆盖。关键批次的缺陷图谱一旦被覆盖,事后复盘与客诉追溯就拿不出原始数据,追溯链条在源头断开。

**跨厂区与跨系统割裂。**各厂区老旧盘阵彼此独自,容量规格与协议不统一,跨厂区数据无法共享,扩容还要停机重建。同一片基板的图像、电测结果与当班工艺参数分属不同系统,根因定位慢,追溯耗时以天计。中间数据靠移动硬盘流转,版本逐渐失控,"数据不出园区"这条安全红线也难以守住。

**合规响应迟缓。**客户审厂要求限时调取指定批次的完整过程数据与检测图像,多套系统各自为政时,几乎无法按时一次性调齐。

二、方案:三节点集群承载的分布式统一存储

分布式统一存储:把多台服务器节点的本地硬盘经存储软件汇成统一资源池,块、文件、对象三类服务由同一套平台供给,数据冗余由软件策略而非阵列卡承担。

软硬件解耦:硬件层不组阵列,硬盘全部交由存储软件直接纳管调度,冗余与可靠性由软件策略保障,避开阵列整盘重建期的长时间降级。

故障域:定义冗余副本的分布边界,可按硬盘级、主机级乃至机柜级划分,避免多份副本落进同一故障范围。

纠删码:以校验数据替代整份副本的冗余方式,在保持可靠性的前提下提高冷数据可用容量占比。

承载节点为天昕 R482I-S60 高密度存储服务器:单台可支持 60 个 3.5"/2.5" 热插拔硬盘位,并可加配 2 个 2.5" 后置热插拔模组,系统盘与数据盘物理分离;支持 2 颗英特尔至强可扩展处理器(第二代/第三代),16 个 DDR4 DIMM 位、3200MT/s,6 个 PCIe 4.0 扩展插槽用于灵活配置高速网卡;IPMI 2.0 带外管理配合 1+1 冗余铂金电源与热插拔风扇,支撑全天候无人值守运行。

三平面网络隔离:存储通信网承载副本写入、数据重建与平衡流量,业务网承载协议接入,管理网承载带外运维,三个平面物理分离。

服务划分同样清晰:块存储以 iSCSI 承载良率管理系统数据库与检测设备业务系统;文件存储以 NFS / CIFS / FTP 承载检测机台图像直写目录、复判工位共享目录与工艺文件;对象存储以 S3 承载缺陷图谱、Demura 原始数据与训练样本集归档。三台节点满配企业级大容量硬盘,即可撑起 PB 级统一存储资源池。

三、价值:追溯从天级收敛到分钟级

某大型半导体显示制造企业拥有多条高世代 TFT-LCD 与柔性 AMOLED 产线,落地该方案后变化是可量化的:

| 原有问题 | 平台带来的改变 |
|---|---|
| 检测图像超期自动覆盖 | 统一写入平台共享目录,容量可持续在线扩展,关键批次图谱长期在线 |
| 跨工序数据分属多套系统 | 以 Glass ID 为主线建统一索引,图像、电测结果与当班工艺参数对得上号 |
| 追溯人工拼数据,以天计 | 统一命名空间与元数据检索,追溯从天级缩短到分钟级 |
| 扩容需停机重建 | 在线加盘加节点、数据自动平衡,扩容无停机窗口 |
| 并发调图受控制器吞吐限制 | 多节点并行叠加缓存分层与读性能优化,聚合带宽随节点线性增长 |
| 审厂数据调不齐 | 归档只读策略配合快速检索与批量导出,过程数据当天调齐 |

平台运行至今未出现关键批次数据丢失。此前因盘阵故障无法复原的缺陷序列,依靠多副本与跨节点自动重建完成了补采与复判,相关产品的良率爬坡根因按期定位,量产节点未受影响。集群扩展后还可启用纠删码、把故障域提升到机柜级,并通过远程复制构建跨厂区容灾。

四、写在末尾

制造业的数据治理,考验的是长期承载与随时可取这两个能力。天昕电子以通用架构服务器与高密度存储节点为底座,用存储软件统一供给块、文件、对象三类服务,把散落在机台、厂区与系统之间的检测数据收进同一个资源池,让复盘、追溯与审厂都有据可查。当产线继续向更高世代与更细制程演进,数据规模只会继续上行,这类软硬件解耦、可在线演进的存储底座,也会从配套系统变成产线的基础设施。