티스토리 뷰

AI 시대의 주인공은 단순히 엔비디아(NVIDIA)에 그치지 않습니다. 최근 반도체 업계와 주식 시장을 뜨겁게 달구고 있는 핵심 화두는 바로 HBM(고대역폭 메모리)을 넘어설 HBF(High Bandwidth Flash)와 HBS(High Bandwidth SRAM)입니다.

KAIST 김정호 교수의 최신 인터뷰를 바탕으로, AI 컴퓨터 구조가 어떻게 3D 적층 반도체 형태로 진화하고 있으며 국내 반도체 거두인 삼성전자와 SK하이닉스가 왜 절대적인 우위를 점할 수밖에 없는지 깊이 있게 분석해 보겠습니다.

1. AI 패권의 핵심은 "GPU"가 아닌 "메모리"다

지금까지 AI 학습 시대의 주인공은 엔비디아의 GPU였습니다. 하지만 본격적인 추론(Inference) 및 에이전틱 AI(Agentic AI) 시대로 접어들면서 병목 현상의 주범은 계산기가 아닌 '데이터 전달 속도와 용량'이 되었습니다.

📌 차세대 AI 반도체 핵심 용어 정리

  • HBM (High Bandwidth Memory)이란?: D램(DRAM) 칩을 수직으로 여러 층 적층하여 초고속 데이터 전송 통로(2048차선 이상)를 구현한 고대역폭 메모리입니다.
  • HBF (High Bandwidth Flash)란?: 낸드 플래시(NAND Flash)를 수직으로 적층하여, HBM보다 처리 속도는 조금 느리지만 압도적으로 큰 대용량을 제공하는 차세대 플래시 메모리입니다.
  • HBS (High Bandwidth SRAM)란?: D램보다 1,000배 이상 빠른 SRAM을 웨이퍼 스케일로 쌓아 초고속·대용량을 동시에 달성하는 미래형 극상위 메모리 기술입니다.
  • 메모리 센트릭 컴퓨팅 (Memory-Centric Computing)이란?: 기존처럼 GPU가 연산을 주도하는 방식이 아니라, HBM/HBF 내부에 GPU·CPU 연산 기능을 탑재하여 메모리가 직접 계산을 수행하는 차세대 컴퓨터 구조입니다.
  • 커스텀 HBM (Custom HBM)이란?: 규격화된 기성품을 양산하는 방식에서 벗어나, 빅테크(NVIDIA, Google 등)의 개별 요구에 맞춰 사전 계약 후 맞춤형으로 생산하는 수주형 반도체 방식입니다.

결국 AI 데이터센터와 AI 스마트폰, AIPC의 가격과 성능을 결정짓는 것은 메모리 반도체입니다. 김정호 교수는 "AI 능력은 곧 메모리 성능과 직결되며, HBM과 HBF를 동시에 제조하고 공급할 수 있는 기업은 전 세계에서 삼성전자와 SK하이닉스가 유일하다"고 강조합니다.

 

2. 기술 변화를 체감하며 느낀 데이터와 메모리의 무게

저 역시 오랫동안 대용량 데이터 처리와 자동화 알고리즘 시스템을 운용하고, 수많은 디지털 장비와 매장을 직접 세팅해 오면서 기술의 병목 현상이 어디서 발생하는지 피부로 체감해 왔습니다. 처음 복잡한 데이터 로직을 돌리거나 대용량 미디어 파일을 다룰 때 가장 먼저 막히는 것은 CPU/GPU의 연산 능력이 아니라, 데이터를 실어 나르고 저장하는 메모리의 과부하와 병목 현상이었습니다.

고성능 컴퓨팅 환경을 구축해 본 사람이라면 누구나 연산 장치가 놀고 있는 ‘메모리 와이팅(Memory Waiting)’ 시간을 경험해 보셨을 것입니다. 현장에서 장비를 직접 다루며 느낀 이 직관적인 한계가, 반도체 최첨단 현장의 HBM 및 3D 적층 기술 개발 이유와 완벽히 궤를 같이한다는 점이 매우 흥미롭습니다.

3. 3D 반도체 최강론 뒤에 숨은 리스크

김정호 교수의 '메모리 센트릭 컴퓨팅' 비전과 한국 반도체 기업의 독점적 우위론은 매우 명쾌하고 희망적입니다. 하지만 현장의 시각에서 냉정하게 바라볼 필요가 있습니다.

발열과 전력 공급(Power Delivery) 한계입니다. 100층 높이의 3D 반도체 구조에서 발생하는 수천 암페어의 전력 공급과 극한의 열을 완벽히 냉각하지 못한다면 이론 수치에 불과할 수 있습니다.
미·중 패권 전쟁과 대체재 리스크입니다. 미국 비테크 기업들이 한국 기업에 대한 의존도를 줄이기 위해 마이크론이나 샌디스크, TSMC 생태계로 물량을 분산시킬 가능성을 배제할 수 없습니다. 장밋빛 전망에만 도취되기보다 기술적 격차를 유지하기 위한 압도적 수율 확보가 선행되어야 합니다.

 

4. 결론

① AI의 중심축이 '학습'에서 '추론'으로 이동하며 HBM, HBF, HBS 등 3D 메모리 적층 기술이 필수불가결해졌습니다.
② DRAM과 NAND 적층 기술을 모두 보유한 삼성전자와 SK하이닉스는 커스텀 HBM 시장에서 강력한 주도권을 쥘 것입니다.
③ 기술적 난제인 전력 공급망과 냉각 기술을 먼저 해결하는 기업이 차세대 AI 컴퓨터 패권을 차지하게 됩니다.