Ocient, Solidigm 대용량 드라이브를 활용하여 AI 데이터 센터 공간 및 비용 절감
Ocient가 Solidigm 대용량 SSD를 사용하여 밀리초 단위로 더 많은 데이터를 저장하고 액세스함으로써 더 낮은 비용과 에너지 사용으로 더 나은 성능을 제공하는 방법을 들어 보십시오.
AI는 스토리지를 인프라에서 아키텍처 영역으로 격상시켰습니다. 조용한 변수였던 스토리지는 이제 생성되는 모든 토큰의 경제성에 영향을 미칩니다. 고정 학습 비용부터 가변 추론 비용에 이르기까지, 고용량·고성능 NVMe SSD는 전체 방정식의 성패를 좌우하는 변수입니다.
모델의 추론이 늘어나고 에이전트가 수행하는 작업이 배가됨에 따라, AI를 사용하는 기업들은 토큰당 비용이 하락하는 속도보다 생성되는 토큰 수가 더 빠르게 증가하는 상황을 마주하고 있습니다. 이로 인해 ROI 지표에 대한 재평가가 이루어지고 있습니다. 재계산은 가속기에 많은 비용이 드는 작업인 반면, 재로딩은 컨텍스트를 재사용할 수 있는 비교적 저렴한 옵션입니다.
백서를 통해 솔리다임의 고용량·고성능 NVMe SSD가 AI 토큰 사용에 미치는 영향을 확인해 보십시오. 더 많은 컨텍스트를 필요시 사용 가능한 상태로 유지하여 AI 에이전트가 더 많은 것을 기억하고, 더 빠르게 응답하며, 작업당 비용을 절감할 수 있도록 합니다.