요약: 최근 반도체 시장에서 중앙처리장치(CPU)가 인공지능(AI) 인프라의 핵심 축으로 급부상하고 있다. Arm은 사상 첫 자체 설계 AI용 CPU를 공개하며 기존의 라이선스 모델에서 벗어났고, 인텔(Intel)과 AMD(Advanced Micro Devices)는 CPU 전 제품군에 대해 가격 인상을 예고했다. 메모리 반도체 공급 부족과 병행해 AI 추론 수요의 증가가 CPU 수요를 대폭 끌어올릴 가능성이 커졌다.
2026년 3월 27일, 나스닥닷컴의 보도에 따르면, AI 인프라 시장은 학습(training) 중심에서 추론(inference) 중심으로 빠르게 이동하고 있다. 이 변화 속에서 CPU는 지속적으로 가동되는 AI 에이전트(agentic AI)와 대규모 토큰 생성에 대응하기 위한 핵심 컴퓨팅 자원으로 부각되고 있다.

핵심 사실을 정리하면 다음과 같다. 엔비디아(Nvidia, NASDAQ: NVDA)는 2022년 11월 ChatGPT 등장 이후 주가가 거의 1,000% 가량 상승했고, 시가총액은 4조 달러 이상 증가해 세계에서 가장 가치 있는 기업으로 올라섰다. 반면 최근 6개월 이상 주가가 횡보하면서 투자자 관심이 메모리, CPU 등 다른 반도체 분야로 옮겨가는 징후가 포착된다. Micron 등 메모리 업체의 주가는 고대역폭 메모리(HBM) 공급 부족으로 급등했다.
Arm의 전략 변화
Arm (NASDAQ: ARM)은 이번 주 사상 첫 자체 AI CPU를 출시한다고 발표했다. 이는 Arm이 그간 유지해온 IP 라이선스 중심의 비즈니스 모델에서 벗어나 직접 칩을 설계·출시하는 큰 전환이다. 회사는 발표문에서 agentic AI의 등장으로 AI가 학습 중심에서 연속적으로 가동되는 에이전트의 배치로 이동할 것이라고 설명했다. 이로 인해 생성되는 토큰량이 크게 늘어나 CPU 수요가 급증할 것으로 회사는 전망했다.
시장의 반응은 즉각적이었다. Arm 주가는 발표 당일 16% 상승했다. Arm은 AGI(또는 AI용) CPU를 올해 하반기에 출시할 예정이며, 메타 플랫폼스(Meta Platforms)를 대표적인 런칭 파트너로 확보했다고 발표했다. 회사는 자사의 저전력 설계 아키텍처가 데이터센터용 추론 워크로드에서 경쟁력을 제공할 것으로 내다봤다.
인텔·AMD의 가격 인상과 공급 전망
일본 니케이 아시아(Nikkei Asia) 보도에 따르면, 인텔과 AMD는 이번 달부터 CPU 제품군 전반에 걸쳐 가격을 인상할 계획이라고 투자자들에게 통보했다. 보도는 인상 폭을 최대 15%로 전망했고, 일부 시장에서는 CPU 공급 부족이 발생할 가능성이 있음을 시사했다. 이 소식으로 인텔과 AMD의 주가는 각각 약 7% 상승했다.
이러한 공급·수요 변화는 CPU 제조사 전반에 유리하게 작용할 여지가 크다. 메모리 시장에서 보듯이 특정 기업 하나만이 독식하지 않는 환경에서는 가격 상승과 마진 개선이 업계 전반으로 확산될 가능성이 높다.
엔비디아의 CPU 진출
한편 Nvidia도 처음으로 CPU 제품을 발표하며 AI 추론 시장에 직접 진출했다. 엔비디아는 Groq와의 라이선스 협약을 통해 CPU 영역을 확장했고, CEO 젠슨 황(Jensen Huang)은 AI 추론 기회 확대를 강조하며 회사가 추론 분야에서 추가적인 노출을 확보할 기회를 본다고 밝혔다. 이는 GPU 중심의 생태계에서 CPU가 차지하는 비중이 커지고 있음을 시사한다.
추론 vs 학습(Training vs Inference) 용어 설명
전문 용어에 익숙하지 않은 독자를 위해 간단히 설명한다. 학습(training)은 대규모 데이터로 모델을 학습시키는 작업으로 주로 GPU 같은 병렬 연산에 최적화된 하드웨어가 필요하다. 반면 추론(inference)은 학습된 모델을 실제 서비스에 적용해 입력에 대해 응답을 생성하는 과정으로, 실시간으로 대량의 요청을 처리해야 하므로 CPU의 역할이 상대적으로 중요해진다. Agentic AI는 스스로 의사결정을 내리고 연속적으로 행동하는 AI 에이전트를 뜻하며, 이는 지속적·저지연(compute-on) 연산을 요구해 CPU 의존도를 높일 수 있다.
데이터센터 수요 전망과 시장 영향
기사에 따르면 데이터센터의 CPU 용량은 GW당 현재 수준의 4배 이상으로 성장할 것으로 예측된다. 이는 토큰 생성량 증가와 연속 운영 요구가 맞물린 결과로, 데이터센터 사업자들의 설비 투자(CapEx)가 확대될 가능성이 크다. 설비 투자 증가는 반도체 수요 증가로 이어지며, 특히 전력 효율성이 높은 Arm 아키텍처 기반 칩과 대규모 생산 능력을 보유한 인텔·AMD에 긍정적이다.
메모리(HBM) 공급 부족 사례에서 보듯이 특정 부품의 병목은 전체 시스템 비용을 끌어올릴 수 있으며, CPU 시장에서도 유사한 현상이 발생하면 가격 상승 압력이 장기간 지속될 수 있다. 니케이 아시아의 보도가 사실이라면 CPU 가격 인상(최대 15%)은 제조사 마진 개선으로 이어질 가능성이 높다.
투자와 산업적 시사점(전문가 전망)
시장 구조상 단일 승자(혹은 단일 공급자)가 등장할 가능성은 GPU 시장의 과거처럼 높지 않다. CPU 생태계는 다양한 설계(Arm, x86 등)와 여러 대형 파운드리 및 패키징 업체가 얽혀 있어, 경쟁이 심화되면서도 여러 기업이 동시에 수혜를 볼 수 있다. 따라서 장기적으로는 인텔·AMD·Arm 등 다수 기업의 실적 개선이 기대된다. 다만 단기적으로는 공급 병목, 생산 전환 리스크, 고객 확보 경쟁 등이 변수로 작용할 수 있다.
투자 관점에서 보면 CPU 수요 증가는 관련 업체들의 매출 성장과 이익률 개선을 확대할 수 있으나, 경쟁 심화와 가격 전쟁 가능성은 이러한 기대를 제약할 수 있다. 반대로 공급 부족이 현실화되면 가격 인상은 장기간 유지될 수 있고, 이는 해당 기업의 주가와 이익률에 긍정적으로 작용할 확률이 높다.
결론
요약하면, AI 인프라의 초점이 학습에서 추론으로 이동함에 따라 CPU의 중요성이 부상하고 있다. Arm의 자체 AI CPU 출시, 인텔·AMD의 가격 인상 예고, 엔비디아의 CPU 진출은 모두 이 전환을 반영하는 사건이다. 데이터센터 확장과 토큰 생성량 증가는 CPU 수요를 끌어올릴 전망이며, 이는 반도체 산업 전반의 구조적 변화와 투자 기회를 동반할 가능성이 크다. 다만 공급망 병목, 경쟁 구도, 제품 성능·전력효율성 등 다수의 변수가 존재하므로 업계의 후속 발표와 실제 제품 출시 시점의 성과를 면밀히 관찰할 필요가 있다.
