Bakit Pinapatakbo ng Paglaki ng AI Compute ang Demand sa Storage? Ang Pagkakaiba sa Pagitan ng Training, Inference, at Data Retention

Paglaki ng compute ng AI at demand sa storage ng data center

Ang paglago ng AI compute ay hindi lamang nangangahulugan ng mas maraming GPUs, AI accelerators, at servers. Sabay din nitong pinapalawak ang demand sa storage. Ang training ay nangangailangan ng tuloy-tuloy na pagbasa ng malalaking dataset, pagsusulat ng checkpoint, at pagpapanatili ng mga bersyon ng modelo. Ang inference ay nangangailangan ng pag-load ng model weights, pagpapanatili ng KV cache, pag-access sa vector databases, at pag-imbak ng user context. Ang data retention ay kasama ang mga raw dataset, na-filter na data, mga log, nilalamang nabuo, audit records, at mga backup. Kapag sinusuri ang pamumuhunan sa AI infrastructure, hindi dapat titingnan lamang ang mga shipment ng GPU. Kailangan din nating tasahin kung kayang suportahan ng HBM, DRAM, enterprise SSDs, nearline HDDs, object storage, at data platforms ang mga tunay na workload.

Mga Pangunahing Punto

  • Ang paglago ng AI compute ay nagpapalawak ng demand sa storage sa buong training, inference, at data retention.
  • Nakatuon ang training sa high-throughput reads, checkpoint writing, at GPU utilization.
  • Nakatuon ang inference sa model weights, KV cache, low-latency access, at high concurrency.
  • Nakatuon ang data retention sa capacity, cost, tiered storage, log retention, at governance.
  • Nakikinabang ang HBM, DRAM, SSD, at HDD sa pamamagitan ng iba't ibang mekanismo at hindi dapat pagsamahin.
  • Upang hulmahin ang AI storage demand, magtuon sa mga workload sa halip na concept hype.

Bakit Ang Paglago ng AI Compute ay Nagtutulak Hindi Lamang sa mga GPU, Kundi Pati sa Storage?

AI data center servers at storage infrastructure

Ang paglago ng AI compute ay nagtutulak sa demand para sa storage dahil ang isang AI system ay hindi lamang tungkol sa computation. Kailangan din nitong tuloy-tuloy na maglipat, pansamantalang mag-imbak, magsulat, at magpreserba ng data. Kapag mas marami ang GPUs, mas kailangang iwasan ng data pipeline na pabagalin ang training. Kapag mas malaki ang model, mas maraming weights, context, at intermediate states ang kailangang pangasiwaan. Kapag mas malawak ang pag-ampon ng mga AI application, mas maraming inference logs, user interactions, at generated content ang kailangang iimbak. Kaya ang AI infrastructure ay hindi lamang “GPU expansion,” kundi isang nakapag-ugnay na pagpapalawak ng compute, memory, networking, at storage.

Ang isang kumpletong AI system ay karaniwang binubuo ng pangangalap ng data, paglilinis ng data, pagsasanay, fine-tuning, pagsusuri, pag-deploy, inference, pag-log, at pagpapanatili ng data. Sa panahon ng pagsasanay, kailangang patuloy na ilipat ang data mula sa data lakes, object storage, SSDs, o parallel file systems papunta sa GPUs. Sa panahon ng inference, kailangang mabasa nang mabilis ang model weights, maproseso ang context, at ma-access ang mga retrieval system. Matapos maging live ang isang business application, kailangan ding iimbak ang mga kahilingan ng gumagamit, mga output ng modelo, feedback data, at mga audit record. Kapag pinag-uusapan ang pag-scale ng storage para sa AI training and inferencing, binibigyang-diin ng NVIDIA na ang kapasidad, performance, networking hardware, at data transfer protocols ay dapat pinaplano nang magkakasama, sa halip na idadagdag lamang pagkatapos ma-deploy ang mga GPU.

Ang ugnayan sa pagitan ng compute, memorya, at storage ay maaaring maunawaan sa tatlong antas:

Layer Typical Components Pangunahing Tungkulin Karaniwang Bottleneck
Compute GPU, TPU, AI accelerator, ASIC Nagsasagawa ng matrix computation at model inference Kulang sa compute, mataas na konsumo ng kuryente
Memory HBM, GDDR, DDR5, LPDDR, CXL memory Nag-iimbak ng model weights, intermediate states, at cache Kulang sa kapasidad o bandwidth
Storage NVMe SSD, enterprise SSD, object storage, nearline HDD Nag-iimbak ng training data, checkpoints, logs, at arkibo Kulang sa throughput, mataas na latency, mataas na gastos

Mabilis ang mga GPU, ngunit hindi nangangahulugan iyon na mabilis ang buong sistema. Kung hindi makarating sa GPU ang training data nang sapat na bilis, naghihintay ang GPU. Kung masyadong mabagal ang pagsusulat ng checkpoint, napuputol ang training. Kung hindi mananatili sa tamang storage tier ang inference context, tumataas ang oras ng paghihintay ng mga user. Kapag mas malaki ang AI cluster, mas madaling lumaki ang isang bottleneck sa isang bahagi nito. Noon, maraming kumpanya ang itinuturing ang storage bilang cost center lamang. Gayunpaman, sa mga AI workload, naging imprastruktura na ang storage na nakaaapekto sa GPU utilization, inference throughput, data governance, at pangmatagalang gastos.

Ang paglaki ng AI compute ay nagtutulak sa demand sa storage dahil ang mga AI workload ay lumilikha ng mahigpit na mga kinakailangan pareho sa "pagpasok ng data sa compute system" at "pagganap ng mga resulta ng compute sa paglipas ng panahon." Ang pagsasanay ay nangangailangan ng mataas na throughput na pagbasa at tuloy-tuloy na pagsulat. Ang inference ay nangangailangan ng mababang latency na pag-access at pamamahala ng context. Ang pagpapanatili ng data ay nangangailangan ng kapasidad, kontrol sa gastos, at mga kakayahan sa governance. Ang pagpapalawak ng mga GPU habang hindi pinapansin ang storage ay maaaring mag-iwan ng mamahaling compute na naghihintay sa data, o maging sanhi ng mabilis na pagtaas ng gastos sa inference sa ilalim ng mataas na concurrency. Upang masuri kung malusog ang AI infrastructure, kailangang tingnan hindi lamang ang bilang ng mga GPU, kundi pati na rin kung kayang makipagsabayan ng HBM, DRAM, SSDs, HDDs, networking, at data platforms sa paglaki ng compute.

Bakit Kailangan ng AI Training ng Napakaraming Storage?

Hardware para sa AI training at pag-iimbak ng chips

Ang AI training ay nangangailangan ng malaking halaga ng storage dahil hindi nababasa ng model training ang data nang isang beses lamang. paulit-ulit itong bumabasa, nagshu-shuffle, nagba-batch, nagpe-preprocess, at nagsusulat ng mga resulta. Kapag mas malaki ang dataset, mas marami ang training epochs, at mas madalas ang mga checkpoint, mas mahalaga ang storage throughput, magkasabay na pagbasa at pagsulat, at bandwidth ng network. Ang pangunahing tanong sa training ay hindi “maaari bang itago ang data,” kundi “kaya ba ng storage system na tuloy-tuloy, maaasahan, at may mataas na throughput na maghatid ng data sa mga GPU.”

Karaniwang nagiging maraming anyo ang training data: hilaw na teksto, mga imahe, video, code, pananalita, data ng sensor, at mga dokumento ng negosyo. Pagkatapos ng paglilinis, maaari itong maging malinis na data, tokenized data, feature data, at training batches. Kapag ipinaliliwanag kung paano nakikipag-ugnayan ang AI model training sa storage, hinahati ng Dell ang proseso sa tatlong pangunahing yugto: pag-load ng training data, preprocessing ng data, at pagsasanay ng modelo sa mga GPU. Bawat yugto ay nag-a-access ng storage, ngunit magkaiba ang access pattern.

Isa pang pangangailangan sa storage sa yugto ng pagsasanay na madalas mababawasan ng pagtatantiya ay ang checkpointing. Ang pagsasanay ng malaking modelo ay tumatagal ng mahabang panahon at mamahalin, kaya hindi maaaring i-save ang mga resulta lamang pagkatapos makumpleto ang pagsasanay. Kadalasang kailangan ng mga sistema na paulit-ulit na isulat ang mga model weight, optimizer state, at recovery point para sa pagbawi mula sa pagkabigo, paghahambing ng mga eksperimento, pamamahala ng bersyon ng modelo, at tuloy na pagsasanay. Binabatid sa materyal ng SNIA tungkol sa AI storage na gumagamit ang pagsasanay ng mga batch ng data para i-update ang mga model weight at paulit-ulit na sumusulat ng checkpoint na data para sa pagbawi. Kapag mas malaki at mas madalas ang checkpoint, mas malaki ang presyon sa mga SSD, parallel file system, at network.

Ang pangangailangan sa storage sa pagsasanay ay maaaring hatiin sa apat na kategorya:

Yugto ng Pagsasanay Pangangailangan sa Storage Pangunahing Sukatan Karaniwang Medium
Pagbasa ng data Paulit-ulit na pagbasa ng mga training dataset at mga sample batch Throughput, sabay-sabay na pagbasa, bilis ng pag-load ng data NVMe SSD, object storage, parallel file system
Pag-proprocess ng data Paglilinis, paghahati, tokenization, augmentation Pinaghahalong performance ng read/write, koordinasyon ng CPU/GPU SSD, cache layer, data lake
Pagsulat ng checkpoint Pag-save ng mga model weight at recovery point Bilis ng pagsulat, pagiging maaasahan, oras ng pagbawi Enterprise SSD, parallel file system
Pagpapanatili ng eksperimento Pag-save ng mga bersyon, parameter, log, at resulta ng pagsusuri Kapasidad, traceability, gastos Object storage, HDD, archival storage

Upang mabawasan ang mga bottleneck sa paglipat ng data, ang AI training ay nagtutulak din ng mga upgrade sa storage architecture. Ang GPUDirect Storage ng NVIDIA ay maaaring lumikha ng direktang data path sa pagitan ng lokal o remote storage at GPU memory, na nagbabawas sa epekto ng CPU staging sa paglipat ng data. Ito ay sumasalamin sa mas malawak na trend: habang nagiging mas mabilis ang mga GPU, ang tradisyonal na "storage—CPU—memory—GPU" data path ay maaaring maging bottleneck, at kailangan ng mga training system na pumasok ang data sa mga accelerator nang mas direkta at episyente.

Hindi lang dahil lumalaki ang mga training dataset kung bakit nagtutulak ang AI training ng demand sa storage, kundi dahil din sa patuloy na pagbabasa ng data, pagsusulat ng checkpoints, pag-save ng model weights, at pagpapanatili ng mga bersyon ng eksperimento sa proseso ng training. Kapag mas malaki ang compute cluster, mas hindi katanggap-tanggap na mapabagal ang mga GPU dahil sa pag-load ng data. Kapag mas mahaba ang training run, mas nagiging mahalaga ang checkpointing at version management. Ang enterprise SSDs, parallel file systems, mataas na bilis ng network, object storage, at data lakes ay lahat naging bahagi ng training pipeline. Ang pinakamahalagang tanong sa yugto ng training ay hindi "sapat ba ang kapasidad," kundi "kaya ba ng storage system na paunti ang paghihintay ng mga GPU, mabawasan ang mga pagkaantala sa training, at gawing reproducible ang mga eksperimento."

Bakit Dinidrive rin ng AI Inference ang Demand sa Storage at Memory?

Mga serbisyo ng AI inference at server storage

Dinidrive rin ng AI inference ang demand sa storage at memory dahil hindi magaan na gawain ang inference. Ang bawat kahilingan ng user ay nangangailangan ng pag-load ng model weights, pagproseso ng input context, paggawa ng output, at pagpapanatili ng mga intermediate state. Kapag mas marami ang mga user, mas mahaba ang context, mas malaki ang modelo, at mas tumaas ang concurrency, mas lumalaki ang presyon sa HBM, DRAM, SSD, vector database, at mga caching system. Ang training ang yugto ng pagbuo ng modelo; ang inference ang tuloy-tuloy na workload pagkatapos gumana sa malakihang antas ang mga AI application.

Ipinaliliwanag ng IBM ang AI inference bilang proseso ng paggamit ng isang sanay na AI model upang pangasiwaan ang mga bagong data at kahilingan. Maaaring mukha itong simpleng proseso ng “maglagay ng tanong, tumanggap ng sagot,” ngunit sa loob, dumadaan ang sistema sa prompt input, prefill, decode, token generation, at response output. Kailangang i-load ang model weights, kailangang iproseso ang input context, at kailangang gawin hakbang-hakbang ang mga output tokens. Kapag tumaas ang bilang ng mga user, nagiging problema na ng tuloy-tuloy na serbisyo ang inference sa halip na isang solong kalkulasyon lamang.

Isa sa mga pinakamahalagang storage variable sa inference ay ang KV cache. Ang KV cache ay nag-iimbak ng key/value intermediate states na nabubuo kapag pinoproseso ng isang Transformer model ang context. Binabawasan nito ang paulit-ulit na computation, ngunit kumukunsumo rin ito ng malaking halaga ng memorya. Sa isang talakayan tungkol sa large-scale LLM inference, binanggit ng NVIDIA na ang pag-load ng Llama 3 70B at Llama 4 Scout 109B sa FP16 ay nangangailangan ng humigit-kumulang 140GB at 218GB ng memorya, habang ang isang user na may 128k-token context ay maaaring gumamit ng mga 40GB ng KV cache para sa Llama 3 70B. Ang pangangailangan sa memorya na ito ay dumarami nang linear kasabay ng bilang ng mga user.

Binabago ng KV cache ang inference mula sa isang "problemang may kaugnayan sa compute" tungo sa isang "problemang may kaugnayan sa memory at storage tiering." Sa ideyal, ang pinakamainit na cache ay nananatili sa HBM. Kapag hindi sapat ang HBM, maaaring ilagay ang bahagi ng cache sa CPU DRAM, CXL memory, NVMe SSDs, o remote storage. Binabatid ng NVIDIA Dynamo na ang KV Cache offloading ay maaaring sumuporta sa mas mahabang context, mabawasan ang paggamit ng GPU memory, mapabuti ang concurrency, at mabawasan ang paulit-ulit na computation. Ipinapakita ng ganitong uri ng teknolohiya na ang bottleneck sa bahagi ng inference ay hindi lamang GPU compute, kundi pati na rin ang kapasidad ng cache, access latency, at istruktura ng gastos.

Ang inference ay higit na pinaigting ng RAG at mga AI agent. Ang RAG ay nangangailangan ng access sa mga dokumento ng enterprise, vector databases, search indexes, at mga external knowledge base. Ang mga AI agent ay nagtatala rin ng mga plano, resulta ng mga tool call, mga estado ng gawain, at makasaysayang konteksto. Ang mas malapit ang isang inference service sa mga tunay na business workflow, ang mas nagiging distributed ang datos na ina-access nito, at ang mas kailangan ng storage system na suportahan nang sabay-sabay ang mababang latency, mataas na concurrency, kontrol ng permiso, at tuloy-tuloy na pag-update.

Pangangailangan sa Inference Karaniwang Senaryo Pangunahing Presyon Kaugnay na Layer ng Storage
Pag-load ng model weights Pag-deploy ng malaking modelo at elastic scaling Kapasidad, bilis ng pagbasa HBM, DRAM, SSD
KV cache Mahabang context, maraming turno ng usapan, mataas na concurrency Kapasidad ng HBM, cache hit rate HBM, DRAM, CXL, NVMe SSD
RAG retrieval Enterprise knowledge base, customer service, search augmentation Mababang latency, pag-update ng index Vector database, SSD, object storage
Estado ng Agent Mga tool call, pagpaplano ng gawain, memorya ng context Pamamahala ng estado, persistence Database, object storage, logging system
Mga log ng user Pagsusuri ng kalidad, risk control, muling pagsasanay Mga pag-write, retention, governance Object storage, HDD, archival storage

Hindi nangangahulugan ang inference na bababa ang demand sa storage matapos matapos ang training. Sa kabaligtaran, kapag pumasok na ang mga AI application sa malakihang serbisyo sa mga user, patuloy na kumukonsumo ang model weights, KV cache, mahahabang context, multi-turn dialogue, RAG retrieval, at agent states ng mga resources ng HBM, DRAM, SSD, at data platform. Nakatuon ang training sa mataas na throughput at malakihang writes, habang nakatuon naman ang inference sa mababang latency, mataas na concurrency, at pamamahala ng context. Habang lalong lumalawak ang paggamit ng mga AI application, malamang na patuloy na lumago ang demand sa storage sa bahagi ng inference, lalo na habang nagiging mas karaniwan ang mahahabang context, enterprise knowledge bases, at multi-agent workflows.

Bakit Ang Data Retention Ang Pangatlong Pangunahing Salik na Nagtutulak ng AI Storage Demand?

Ang pagpapanatili ng data ay isa sa mga pinaka-maabuting bahagi ng demand sa AI storage dahil hindi lamang kumukonsumo ng lumang data ang mga AI system; patuloy silang lumilikha ng bagong data. Ang training ay lumilikha ng mga checkpoint, bersyon ng modelo, at mga resulta ng evaluation. Ang inference ay lumilikha ng mga kahilingan ng user, mga output ng modelo, feedback data, at mga log. Ang enterprise deployment ay nangangailangan din ng auditing, mga backup, pamamahala ng pahintulot, at compliance retention. Kapag mas marami ang compute at mas madalas tumakbo ang AI, mas malaki ang dami ng data na kailangang panatilihin sa mahabang panahon.

Ang lifecycle ng data ng AI ay karaniwang kinabibilangan ng raw data, malinis na data, training data, model weights, checkpoints, inference logs, nilikhang content, audit records, at mga backup. Ang pagpapanatili ng training data ay pangunahing sumusuporta sa model training, reproducibility, version management, at retraining. Ang pagpapanatili ng inference data ay pangunahing sumusuporta sa pag-optimize ng karanasan ng user, pagsusuri ng kalidad, security auditing, at pagsusuri ng negosyo. Parehong kailangang iimbak ang dalawang uri ng data, ngunit magkakaiba ang kanilang access frequency, value density, at mga kinakailangan sa compliance.

Kapag ipinapaliwanag ang AI storage, binibigyang-diin ng IBM na dapat balansehin ng AI storage ang malakihang data, mataas na performance, mababang latency, at kontroladong access. Mahalaga ito dahil hindi dapat ilagay ang lahat ng AI data sa mabilis na SSDs, at hindi rin dapat ilagay ang lahat sa murang HDDs. Dapat i-tier ang iba't ibang data batay sa dalas ng access, mga kinakailangan sa latency, gastos, at mga pangangailangan sa governance.

Uri ng Data Dalas ng Pag-access Pangunahing Gamit Angkop na Tier ng Imbakan
Mainit na data Napakataas Mga kasalukuyang training batch, online inference context, real-time indexes HBM, DRAM, NVMe SSD
Mainit-init na data Katamtaman Mga kamakailang checkpoint, karaniwang ginagamit na corpora, vector indexes Enterprise SSD, object storage
Malamig na data Mababa Mga pangkasaysayang corpora, naka-archive na logs, backups, low-frequency content Nearline HDD, object storage, archive
Data sa pamamahala Ina-access kung kailangan Auditing, traceability, mga pahintulot, compliance records Object storage, immutable snapshots, backup systems

Hindi lamang sa pag-train ng mas maraming modelo sa hinaharap nag-iimbak ng AI data ang mga enterprises, kundi pati na rin para muling makabuo ng mga resulta, matukoy ang mga problema, protektahan ang data, at matugunan ang mga kinakailangan sa governance. Binabatid ng nilalaman ng Dell tungkol sa cyber-resilience ng AI workload na ang mga training at inference dataset ay maaaring ipamahagi sa maraming storage system at dinamikong mag-ebolusyon sa buong AI lifecycle, kaya't mahalaga ang AI datasets protection para sa integridad at availability. Para sa mga enterprises, ang pagkawala ng mga bersyon ng modelo, mga pinagmulan ng training sample, o mga inference log ay maaaring makaapekto sa pagsusuri ng mga isyu, compliance audit, at business continuity.

Ang pagpapanatili ng data ay nagdudulot din ng mga hadlang sa gastos. Ang mainit na data ay nangangailangan ng mababang latency at mataas na performance, ngunit hindi lahat ng data ay karapat-dapat na mapunta sa mamahaling SSD capacity sa mahabang panahon. Ang mga makasaysayang log, backup, video corpus, at mababang-frequency na nilalaman ay mas angkop sa mas murang capacity tier. Sinabi ng Western Digital sa ikatlong quarter ng pananalapi nito noong 2026 na halos lahat mula sa training at inference hanggang sa agentic AI at physical AI ay lumilikha ng data na kailangang panatilihin nang permanente at cost-effective, na ginagawang mahalagang pundasyon ng capacity ang HDD sa chain ng pagpapanatili ng AI data.

Ang pagpapanatili ng data ang pangatlo sa mga pangunahing salik ng demand para sa AI storage, at ito ang bahaging pinakamadaling matakpan ng "GPU narrative." Patuloy na gumagawa ng data ang training at inference. Kailangan ring panatilihin ng mga enterprise ang mga bersyon ng modelo, checkpoints, logs, nilikhang content, audit records, at mga backup. May iba't ibang halaga, dalas ng pag-access, at mga limitasyon sa gastos ang bawat uri ng data, kaya't patungo ang AI storage sa isang tiered architecture: pinangangasiwaan ng mga high-performance SSD ang hot data, sinusuportahan ng object storage at enterprise SSDs ang warm data, at nagbibigay naman ang mga nearline HDD at archival system ng malaking kapasidad para sa pangmatagalang pagpapanatili. Tinutukoy ng seguridad at governance kung maaaring muling magamit nang maaasahan ang datang ito.

Aling mga Storage Hardware at Segumento ng Industriya ang Makikinabang sa Paglaki ng AI Compute?

Ang paglago ng AI compute ay hindi nagtutulak lamang ng isang uri ng storage hardware. Nagtutulak ito ng buong storage hierarchy. Ang HBM at DRAM ay lumulutas sa mga problemang may kinalaman sa bandwidth at latency na pinakamalapit sa GPU. Ang enterprise SSDs ay sumusuporta sa training throughput, checkpoints, RAG, at inference caching. Ang HDDs at object storage ay nagbibigay ng malaking kapasidad, mababang gastos, at pangmatagalang retention. Ang iba't ibang storage hardware ay nakikinabang sa magkakaibang bahagi ng AI workload, at ang mga kaugnay na kumpanya at stocks ay hindi dapat ituring na parehong uri ng AI demand.

Ang HBM at DRAM ang pinakamataas na halaga ng mga layer ng imbakan na pinakamalapit sa GPU. Ang malaking pagsasanay ng modelo ay nangangailangan ng high-bandwidth memory upang suportahan ang malawakang computation ng matrix, at ang mga serbisyo ng inference ay nangangailangan din ng mahusay na pag-access sa mga model weights, activations, at cache. Sinasabi ng Micron na ang portfolio nito ng AI memory and storage ay sumasaklaw sa HBM, SSD, LPDDR, data center, at mga senaryo ng edge AI, na nagpapakita na ang demand sa imbak na pinapatakbo ng AI ay hindi limitado sa isang produkto lamang. Sa COMPUTEX 2026, sinabi rin ng Micron na ang HBM4 36GB 12H ay maaaring mapabuti ang throughput ng LLM inference sa ilalim ng ilang partikular na kondisyon, na nagpapakita ng direktang koneksyon sa pagitan ng high-bandwidth memory at ng kahusayan sa pagbuo ng token.

Ang mga enterprise SSD ay matatagpuan sa pagitan ng mga GPU, data pipelines, at inference services. Ang pagsasanay ay nangangailangan ng mabilis na pagbasa ng data at mabilis na pagsulat ng mga checkpoint. Ang inference ay nangangailangan ng access sa mga vector database, RAG data, model files, at KV cache tiering. Ang data engineering ay kailangang dumako sa patuloy na lumalaking mga dataset. Ang NVMe SSDs, PCIe Gen5/Gen6 SSDs, QLC enterprise SSDs, NVMe-oF, at GPUDirect Storage ay lahat umuunlad sa layuning mas mabilis, mas matatag, at mas malapit sa mga GPU. Ang paglalarawan ng Micron sa AI data center ay kabilang din ang parehong AI training at inference bilang mga lugar ng aplikasyon para sa mga solusyon sa memorya at storage.

Ang mga HDD at object storage ay mas higit na nagsisilbing pundasyon ng kapasidad. Ang data ng AI training, mga video corpus, inference logs, mga backup, at mga historikal na bersyon ay hindi laging nangangailangan ng millisecond-level na access, ngunit kailangan nilang imbakin nang pangmatagalan sa isang mababang gastos at napamamahalaang paraan. Iniulat ng Seagate ang kita na $3.11 bilyon sa ikatlong fiscal quarter nito ng 2026 at isiniwalat ang isang non-GAAP gross margin na 47.0, na sumasalamin sa suporta mula sa demand ng nearline HDD at data center.

Segmento ng Storage Pangunahing Tungkulin AI Workload Loohika ng Benepisyo
HBM Mataas na bandwidth at mababang latency malapit sa mga GPU Training, inference, mahabang context Mas malalaking modelo at mas maraming pagbuo ng token
DDR5/DRAM Memorya sa gilid ng CPU, cache, data ng sistema Mga serbisyo ng inference, pagproseso ng data Mas maraming concurrency at pamamahala ng context
Enterprise SSD Mataas na throughput, mababang latency, random reads/writes Data ng training, checkpoints, RAG, KV offload Mas maraming presyon sa data pipelines at cache
Object storage Elastic na kapasidad, data lakes, governance Mga raw corpus, inalis ng dumi na data, mga log Mas mahabang lifecycle ng data ng AI
Nearline HDD Low-cost na kapasidad at pangmatagalang retention Backup, archive, pangkasaysayang data ng training Mas pangmatagalang retention ng data ng AI

Ang paglago ng AI compute ay nagtutulak sa buong storage hierarchy, hindi lamang sa isang piraso ng hardware. Ang HBM at DRAM ay sumasagot sa mga problemang may kaugnayan sa bandwidth na pinakamalapit sa GPU. Ang enterprise SSDs ay sumusuporta sa training throughput, checkpoints, RAG, at inference cache. Ang object storage at HDDs ay sumasagot sa malakihang data retention. Kapag sinusuri ang AI storage supply chain, kailangan mong i-map ang "training, inference, at retention" sa "memory, SSDs, HDDs, at data platforms." Iba't ibang kumpanya, produkto, at stocks ang nakikinabang sa iba't ibang bahagi ng chain, kaya hindi dapat ituring na parehong AI theme ang lahat ng storage demand.

Paano Mo Malalaman Kung Ang AI Storage Demand Ay Tunay na Paglago o Panandaliang Inventory Volatility?

Upang hukuman kung totoo ang paglaki ng demand sa AI storage, hindi dapat titingnan lamang kung mainit ang AI theme o kung mataas ang pagpapadala ng GPU. Kailangan mong makita kung sabay-sabay na lumalago ang mga workload sa training, inference, at data retention. Kung ang laki ng training dataset, dami ng inference token, bilang ng sabay-sabay na gumagamit, haba ng context, mga RAG call, pagpapanatili ng log, at capital expenditure sa cloud ay pawang tumataas, mas malamang na totoo ang demand sa storage. Kung ang paglaki ay dahil lamang sa channel restocking o pansamantalang pag-agaw sa suplay, maaaring mas mabilis na bumaliktad ang pagbabago-bago ng presyo.

Una, tingnan ang mga workload. Sa bahagi ng training, bantayan ang laki ng dataset, GPU utilization, checkpoint frequency, at data read throughput. Sa bahagi ng inference, bantayan ang tokens per second, TTFT, KV cache, batch size, at concurrency. Sa bahagi ng retention, bantayan ang paglaki ng data, tagal ng log retention, mga estratehiya sa backup, at mga pangangailangan sa governance. Binabatid ng mga tala sa pag-optimize ng long-context inference ng NVIDIA na habang lumalaki ang KV cache, apektado ang cache hit rate, latency, at HBM usage, na nagpapakita na direktang binabago ng mga totoong inference workload ang demand sa memorya at storage.

Pangalawa, tingnan kung nagpapatibay ang isa't isa ang procurement at presyo. Karaniwang lumalabas ang tunay na demand sa mga order ng enterprise SSD, sa mga shipment ng nearline HDD, sa presyo ng HBM at DRAM, sa backlog ng mga supplier, sa pangmatagalang kontrata, at sa capital expenditure ng cloud. Kung tumaas lamang ang presyo sa isang quarter ngunit mabilis ding tumataas ang mga imbentaryo, maaaring restocking lamang ito. Kung sabay-sabay na lumalabas ang paglaki ng workload, pangmatagalang procurement, at pag-upgrade ng mga produkto, mas mataas ang kredibilidad ng tunay na demand.

Pangatlo, tingnan ang mga limitasyon sa gastos. Ang demand sa AI storage ay walang limitasyon. Kailangang pumili ang mga enterprise sa pagitan ng performance, gastos, power consumption, compliance, at manageability. Ang KV cache compression, tiered storage, hot/cold data separation, model quantization, data deduplication, at selective retention ay lahat paraan upang masakop ang gastos. Ang talakayan ng NVIDIA Research tungkol sa KV cache compression ay nagpapakita rin na ang mga compression method ay makakagaan sa memory pressure sa long-context inference, ngunit ang totoong deployment ay nakakaharap pa rin ng mga hamon sa production infrastructure.

Dimension ng Pagtataya Tunay na Senyales ng Demand Senyales ng Maikling Panahon na Volatility
Pagsasanay Mas malalaking dataset, mas mataas na GPU utilization, mas maraming checkpoints Humihina ang demand pagkatapos ng one-time na pagbili ng proyekto
Inference Mas maraming token, mas mataas na concurrency, mas mahabang context Panandaliang test traffic nang walang pangmatagalang serbisyo
Pagpapanatili ng datos Mas maraming log, backup, audit, at pangangailangan sa governance Panandaliang pag-ipon ng datos na sinusundan ng mabilisang paglilinis
Procurement Pangmatagalang kontrata, tuloy-tuloy na order, pag-upgrade ng produkto Pagpapuno ng stock sa channel, paulit-ulit na order
Pagpopresyo Mahigpit na supply para sa high-end na produkto na may nakikitang order Masyadong mabilis na pagtaas ng presyo habang nagre-recover ang mga imbentaryo
Gastos Sabay na pagsulong ng tiered storage at mga teknolohiya ng optimization Pagkaantala sa procurement dahil sa pressure sa badyet

Kung sinusubaybayan mo ang mga stock o ETF na may kaugnayan sa AI storage, ang mga gastusin sa kalakalan ay dapat ding isama sa aktwal na pagsusuri ng kita. Ang mga gastusin sa pag-trade ng U.S. stock ay maaaring hindi lamang kabilang ang komisyon, kundi pati rin ang mga bayarin sa platform, mga bayarin sa panlabas na ahensya, mga singil sa aktibidad ng transaksyon, mga pagkakaiba sa pagpapatupad ng order, at mga gastusin na may kaugnayan sa settlement. Bilang halimbawa ng mga singil sa pag-trade ng U.S. stock, ang Biya ay nagsisingil ng $0 komisyon sa pag-trade ng U.S. stock, habang ang mga bayarin sa platform, mga bayarin sa panlabas na ahensya, at iba pang mga singil ay nakasalalay sa fee center at pahina ng order. Ang availability ng mga kaugnay na serbisyo ay nakadependa sa lokasyon ng gumagamit, resulta ng pag-verify ng identidad, mga patakaran ng platform, at naaangkop na mga batas at regulasyon.Bago magnegosyo, dapat pang suriin ng mga investor ang order page, account statements, at mga lokal na regulatory na kinakailangan.

Para makahatol sa demand ng AI storage, kailangan mong tingnan kung nagpapatibay-an ang mga workload, procurement, pricing, inventory, at cost sa isa't isa. Ang tunay na paglago ay magpapatuloy na makikita sa training data, inference tokens, long context, RAG calls, log retention, enterprise SSDs, nearline HDDs, at capital expenditure ng data center. Ang maikling-term na volatility ng inventory ay maaaring magpakita bilang pagtaas muna ng presyo, pag-restock ng channel, pagbawi ng inventory, at pagkatapos ay pagbagal ng mga order. Mahalaga ang pang-matagalang direksyon ng demand ng AI storage, ngunit ang mga hatol sa industriya at pamumuhunan ay nakadepende nang higit sa timing: aling demand ang pumasok na sa produksyon, aling demand ay nasa pilot projects pa rin, at aling demand ay naisama na sa mga presyo at valuation.

Kung patuloy mong sinusubaybayan ang AI infrastructure, storage chips, enterprise SSDs, HDDs, semiconductor ETFs, at mga kaugnay na U.S. at Hong Kong stocks, maaari mong gamitin ang Biya upang subaybayan ang multi-asset quotes, trading records, at account activity. Ang paghuhusga sa demand ng AI compute at storage ay hindi isang beses na konklusyon lamang. Patuloy na nagbabago ang training, inference, data retention, cloud capital expenditure, at enterprise orders. Maaari mo ring pagsamahin ang U.S. stock information sa iyong sariling pagsubaybay sa mga kaugnay na kumpanya at mga pagbabago sa industriya, habang kinukumpirma ang availability ng serbisyo batay sa iyong lokasyon, resulta ng identity verification, mga patakaran ng platform, at naaangkop na mga batas at regulasyon.Ang impormasyon ng pampublikong merkado at mga istruktura ng bayad ay para sa sanggunian lamang at hindi bumubuo ng payo sa pamumuhunan. Bago magkalakal, dapat lubos na maunawaan ng mga mamumuhunan ang mga uri ng order, mga istruktura ng bayad, mga panganib ng pagbabago-bago ng presyo, at ang kanilang sariling kahandaan sa panganib.

FAQ

Bakit Nagpapataas ng Demand sa Storage ang Paglaki ng AI Compute?

Ang paglaki ng AI compute ay nagpapataas ng demand sa storage dahil ang pagsasanay (training), inference, at pagpapanatili ng data ay lahat umaasa sa pagbasa, pansamantalang pag-iimbak, pagsusulat, at pagpapanatili ng data sa paglipas ng panahon. Kapag tumaas ang kapasidad ng GPU, kung hindi maaaring maipasok ang data sa compute system nang napapanahon, bababa ang utilization ng GPU. Ang storage samakatuwid ay bahagi ng AI infrastructure.

Ano ang Pagkakaiba ng AI Training at AI Inference Storage Demand?

Ang AI training ay nakatuon sa mataas na throughput ng pagbasa, pagsusulat ng checkpoint, at distributed data pipelines. Ang AI inference ay nakatuon sa pag-load ng model weights, KV cache, low-latency access, at pamamahala ng context na may mataas na concurrency. Parehong nangangailangan ng storage, ngunit magkakaiba ang kanilang mga bottleneck metric.

Bakit Nakakaapekto ang KV Cache sa Demand ng AI Inference Storage?

Ang KV cache ay nag-iimbak ng mga intermedyanteng estado na nabubuo kapag pinoproseso ng modelo ang context. Ang mahabang context, maraming turn na pag-uusap, at mga user na mataas ang concurrency ay lahat nagpapalaki ng KV cache. Kung hindi sapat ang HBM, maaaring gumamit ang sistema ng DRAM, CXL memory, o SSD bilang mga tiered na layer ng cache.

Bakit Hindi Maaaring Umasa Ang AI Data Retention Sa Mabilis na SSD Lamang?

Hindi maaaring umasa ang AI data retention sa mga mabilis na SSD lamang dahil hindi lahat ng data ay nangangailangan ng mababang latency na access. Ang mainit na training data at online inference ay nangangailangan ng mabilis na storage, samantalang ang mga makasaysayang corpus, log, backup, at archive ay mas angkop sa mas murang high-capacity na storage tulad ng object storage at nearline HDD.

Paano Matatantya ng Karaniwang Mamumuhunan Kung Totoo ang Demand sa AI Storage?

Ang mga ordinaryong mamumuhunan ay maaaring magmasid sa laki ng training dataset, dami ng inference token, mga order ng enterprise SSD, demand ng nearline HDD, mga presyo ng memorya, imbentaryo, at capital expenditure ng cloud. Kung maraming indikator ang sabay-sabay na tumaas, mas mataas ang kredibilidad ng totoong demand.

Ang Paglaki ng AI Storage Demand ay Nangangahulugan bang Tiyak na Tataas ang Mga Kaugnay na Stock?

Ang paglaki ng AI storage demand ay hindi nangangahulugan na tiyak na tataas ang mga kaugnay na stock. Naapektuhan din ng valuation, imbentaryo, pricing cycles, kompetisyon, customer concentration, at mga inaasahan ng merkado ang mga presyo ng shares. Bago mag-trade, dapat isaalang-alang ng mga mamumuhunan ang mga kita, mga order, istraktura ng bayad, at ang kanilang sariling risk tolerance.

*Ang artikulong ito ay ibinigay para sa pangkalahatang layunin ng impormasyon at hindi bumubuo ng legal, buwis, o iba pang propesyonal na payo mula sa BiyaPay o sa mga subsidiary at kaakibat nito, at hindi ito nilalayong maging kapalit ng pagkuha ng payo mula sa isang financial advisor o sinumang iba pang propesyonal.

Hindi kami gumagawa ng anumang pahayag o garantiya, hayag man o ipinahiwatig, hinggil sa katumpakan, kabuuan, o pagiging napapanahon ng nilalaman ng publikasyong ito.

Mga kaugnay na blog tungkol sa

Pumili ng Bansa o Rehiyon para Basahin ang Lokal na Blog