- 新闻
- 今日科普|大数据存处技术新探
今日科普|大数据存处技术新探
公司动态
发布于2025-09-06
从(cóng)“存(cún)不(bù)下(xià)”到(dào)“存(cún)得(de)好(hǎo)”:数(shù)据(jù)爆(bào)炸(zhà)时(shí)代(dài)的(de)存(cún)储(chǔ)革(gé)命(mìng)
2025年(nián),全球(qiú)数(shù)据(jù)量(liàng)预(yù)计(jì)突(tū)破(pò)175泽(zé)字(zì)节(jié)(ZB),相(xiāng)当(dāng)于(yú)每(měi)个(gè)人(rén)每(měi)天(tiān)产(chǎn)生(shēng)1.7MB数(shù)据(jù)。物(wù)联(lián)网(wǎng)设(shè)备(bèi)、AI训(xun)练(liàn)、企(qǐ)业(yè)数(shù)字(zì)化(huà)转(zhuǎn)型(xíng)像(xiàng)三(sān)台(tái)“数(shù)据(jù)永(yǒng)动(dòng)机(jī)”,让(ràng)传(chuán)统(tǒng)硬(yìng)盘(pán)和(hé)固(gù)态(tài)硬(yìng)盘(pán)(SSD)集体(tǐ)“喘(chuǎn)不(bù)过(guò)气(qì)”——存(cún)储(chǔ)密(mì)度(dù)跟(gēn)不(bù)上(shàng),寿(shòu)命(mìng)短(duǎn),频(pín)繁(fán)更(gèng)换(huàn)成(chéng)本(běn)高(gāo),能(néng)耗(hào)更(gèng)是(shì)占(zhàn)全球(qiú)数(shù)据(jù)中(zhōng)心(xīn)总(zǒng)能(néng)耗(hào)的(de)1%以(yǐ)上(shàng)。这(zhè)场(chǎng)数(shù)据(jù)洪(hóng)流(liú)倒(dào)逼(bī)存(cún)储(chǔ)技(jì)术(shù)加(jiā)速(sù)迭(dié)代(dài),从(cóng)“存(cún)得(de)下(xià)”到(dào)“存(cún)得(de)快(kuài)”🔵官方“存得省”“存得安全”,一场存储革命正(zhèng)在(zài)上(shàng)演(yǎn)。

高(gāo)带(dài)宽(kuān)存(cún)储(chǔ)器(qì)(HBM):AI加(jiā)速(sù)器(qì)的(de)“心(xīn)脏(zàng)”
如(rú)果(guǒ)你(nǐ)关注(zhù)AI大(dà)模(mó)型(xíng)训(xun)练(liàn),一(yī)定(dìng)听(tīng)过(guò)“HBM”这(zhè)个(gè)关键词。2025年(nián),HBM3/E技(jì)术(shù)已(yǐ)实(shí)现(xiàn)单(dān)堆(duī)栈(zhàn)24GB容(róng)量(liàng)和(hé)1.2TB/s带(dài)宽(kuān),HBM4更(gèng)将(jiāng)目(mù)标(biāo)锁(suǒ)定(dìng)在(zài)1024位(wèi)宽(kuān)接(jiē)口(kǒu)和(hé)12层(céng)堆(duī)叠(dié),带(dài)宽(kuān)突(tū)破(pò)2TB/s。它(tā)的(de)核(hé)心(xīn)优(yōu)势(shì)在(zài)于(yú)3D堆(duī)叠(dié)DRAM芯(xīn)片(piàn)与(yǔ)硅(guī)通(tōng)孔(kǒng)(TSV)技(jì)术(shù),垂(chuí)直集成缩短数据路径,功耗比GDDR6降低40%,尤其适合大模型训练中高并发的数据流。
举个例子,训练一个千亿参数的AI模型,传统内存需要频繁从硬盘调取数据,而HBM能让数据“原地处理”,就像把厨房搬到餐桌旁,省去了“端菜”的时间。目前,SK海力士占据全球60%的HBM市场份额,但TSV工艺良率不足导致产能受限,HBM3价格比前代上涨5倍。尽管贵,但AI服务器厂商依然“抢着买”——没有HBM,大模型训练效率直接打对折。
QLC闪存:从“配角”到“数据中心主力”
如果说HBM是AI的“心脏”,QLC闪存就是数据中心🍎官方的“骨骼”。2025年,QLC凭借4bit/cell的高密度存储,单Die容量达2Tb,4TB SSD成为消费级标配,企业级产品总出货量突破100EB。长江存储的晶栈®4.0架构让QLC吞吐量提升147%,耐久性提高33%,虽然性能弱于TLC,但AI服务器对低成本大容量的需求,让QLC在闪存产能中占比升至20%,其中45%用于数据中心。
这里有个关键技术:PCIe 5.0接口。它像给数据传输装上了“高铁”,让QLC SSD的顺序读写速度达到14GB/s。不过,QLC也有短板——写入延迟高。为此,厂商开发了高速缓存算法,把“热数据”(频繁访问的数据)存在更快的缓存里,就像图书馆把畅销书放在入口,冷门书放在仓库。2025年下半年,随着AI服务器需求持续上扬,大容量、高性能SSD的需求还会看涨,QLC的“主角地位”将更稳固。
存算分离:让数据“不动”,算力“动起来”
传统存储架构里,数据和计算像“异地恋”——计算要数据,就得把数据从存储层“搬”到计算层,这一搬,时间、能耗全浪费了。2025年,“存算分离”架构成了新宠,它的核心逻辑是“数据不动,算力动”。
以中国V谷马栏山的混合云架构为例,他们采用“公有云、驻地云、边缘云、私有云”混合部署,基于“数据不动、算力动”的设计理念,让算力可以随意去计算各处的数据。比如,一个视频创作者在边缘云上传素材,算力可以在私有云完成渲染,再通过公有云分发到全球用户。这种架构不仅提升了创作效率🍭,还降低了30%的存储成本——因为数据不需要在多个节点间反复拷贝。
存算分离的背后,是CXL技术的支撑。CXL 3.0通过内存池化与一致性协议,实现CPU/GPU/加速器间的超低延迟互联,带宽达64GT/s。三星已推出支持CXL 2.0的256GB MRDIMM,而CXL 3.0的普及将推动异构计算架构革新。不过,这项技术也面临挑战:协议栈复杂,生态碎片化。就像刚学会开车的司机,面对复杂的交通规则,需要时间适应。
量子安全加密:给数据上“终极保险”
数据存储,安全是底线。2025年,随着量子计算的临近,传统加密技术面临被破解的风险。比如,RSA加密算法在量子计算机面前可能“秒破”。为此,量子安全加密技术成了存储领域的“新防线”。
中国科学家团队开发的基于格密码的LAC算法,能抵御量子计算攻击,保障数据长期安全。目前,这项技术已应用于金融、医疗等对数据安全性要求极高的行业。比如,一家银行采用LAC算法加密客户交易数据,即使未来量子计算机出现,黑客也无法破解数据。
量子安全加密的普及,不仅需要技术突破,更需要标准制定。2025年,全球已有12个国家启动量子安全标准研究,中国也在加快推进相关立法。可以预见,未来5年,量子安全加密将成为高端存储设备的“标配”,就像现在的指纹解锁一样普遍。
未来已来:存储技术的“下一站”
站在2025年的节点回望,存储技术已从“被动扩容”转向“主动智能”。HBM让AI跑得更快,QLC让数据存得更省,存算分离让资源用得更高效,量子安全加密让数据更安全。这些技术不是孤立的,而是像拼图一样,共同构建起未来数据基础设施的蓝图。
对于普通用户,存储技术的进步可能体现在更快的手机、更流畅的视频;对于企业,它意味着更低的成本、更高的效率;对于社会,它是数字经济深化发展的“地基”。正如希捷联合益企研究院发布的《AI时代的存储基石》白皮书所说:“到2025年,全球预计产生394ZB数据,现代数据中心80%-90%的数据为非结构化数据。”存储技术的每一次突破,都在为这个数据爆炸的时代“兜底”。
未来,存储技术还会走向哪里?或许,是更智能的自动分层存储,让数据像“电梯”一样自动上下;或许是更绿色的液冷存储,让数据🚀中心能耗再降50%;又或许是脑机接口存储,让人类记忆直接“上传”到云端。无论方向如何,可以确定的是:存储技术的进化,永远不会停歇。
分享至:
