전체기사 최신뉴스 GAM
KYD 디데이
홈 산업 생활경제

속보

더보기

[김정호의 4차혁명 오딧세이] 인공지능과 GPU

기사입력 :

최종수정 :

※ 본문 글자 크기 조정

  • 더 작게
  • 작게
  • 보통
  • 크게
  • 더 크게

※ 번역할 언어 선택

김정호 교수.

엔비디아 스토리

컴퓨터 구조에서 대표적으로 사용되는 반도체로는 계산 장치인 프로세서(Processor)와 메모리(Memory)가 있다. 그중에서 프로세서로는 개인용 컴퓨터에 많이 사용되는 CPU(Central Processing Unit)가 있고, 스마트폰에는 주로 AP(Application Processor)가 사용되고, 컴퓨터 그래픽 카드에는 GPU(Graphic Process Unit)가 사용된다.

이러한 프로세서 중에서 인공지능 계산을 위한 병렬처리에는 GPU가 가장 많이 사용된다. GPU 내부에는 계산기(Arithmetic Logic Unit, ALU) 코어의 개수가 수천 개 혹은 수만 개에 이른다. 그래서 동시 병렬 계산이 용이하다. 이러한 이유로 인공지능 계산에 GPU가 가장 유용한 프로세서가 된다.

이러한 배경으로 대표적인 GPU 회사인 엔비디아(NVidia)의 성장이 두드러진다. 최근에 GPU는 가상화폐 채굴에 쓰이기도 해서 한때 품절이 나기도 했다. 여기에 그치지 않고 자율주행 자동차의 인공지능 처리에도 GPU가 사용될 전망이다. 그 때문에 지난 10년간 엔비디아의 주가는 꾸준히 상승하고 있다. 이래저래 CPU, AP보다 GPU의 계속된 성장이 기대된다.

2019년 방문한 실리콘밸리의 엔비디아 신사옥 내부. [출처=KAIST]

필자의 연구실에서는 지난 10여년간 GPU와 디램이 3차원적으로 결합한 HBM(High Bandwidth Memory) 모듈을 설계하는 연구를 진행해왔다. 그 과정에서 국내의 삼성전자, SK하이닉스뿐만 아니라 엔비디아와 협력을 지속해 왔다.

HBM에서는 기존의 모듈과는 달리 실리콘 기판을 배선으로 사용해 GPU와 디램 사이의 연결선 개수를 대폭으로 늘린다. 더 빨리 많은 수의 병저렬 계산을 하기 위해서 고안됐다. 이 HBM 모듈은 주로 인공지능 서버에 사용하고 있으며, 그 가격은 1000만원에 가깝다.

이렇게 비용이 많이 드는 것이 단점이지만, 인공지능 시대를 맞아 수요는 계속 증가할 것으로 생각한다. 이러한 이유로 필자의 연구실 졸업생이 엔비디아에 여러 명 진출했다. 대학원 학생들이 인턴으로도 엔비니아에 파견 나가기도 한다.

2019년 방문한 엔비디아에서의 기술 교류 미팅. [출처=KAIST]

인공지능의 기본은 행렬 수학

인공지능에서 지능신경망인 DNN(Deep Neural Network)의 입력은 디지털 데이터이다. 그리고 데이터 입력은 일정 수의 데이터 묶음 형태로 표현된다. 이러한 디지털 데이터의 묶음을 수학 용어로 벡터(Vector)라고 한다.

예를 들어 카메라 이미지 화소점인 픽셀(Pixel) 하나에는 RGB(Red, Green, Blue) 세 가지 색깔의 배합과 밝기가 표현된다. 그러면 이미 4가지 요소를 갖는 벡터가 된다. 거기에 더해 화면 속의 위치 정보가 x, y로 들어가면 6열 벡터가 된다. 언어를 입력 벡터로 쓴다면 그 벡터 크기가 수백만개도 된다. 단어의 개수가 그만큼 많다.

이러한 입력 벡터를 다른 형태로 변환할 필요가 생긴다. 이때 벡터와 행렬(Matrix) 곱셈이 필요하다. 예를 들어 그래픽 처리에서 위치 정보가 포함된 벡터의 좌표를 변환하려고 한다면, 이 벡터에 행렬을 곱하면 된다.

보는 관찰자의 위치를 3차원으로 바꾼다면 새로운 좌표에서 다시 위치를 잡기 위해서 데이터 벡터에 좌표 변환을 하게 되는데, 이때 벡터에 좌표 변환 3x3 행렬을 곱하게 된다.

마찬가지로 인공지능 판단이나 예측에도 벡터와 행렬 계산이 사용된다. DNN에서는 입력이 데이터 벡터가 되고, 그 벡터 신호에 입력층(Input layer), 은닉층(Hidden layer), 출력층(Output layer)으로 지나가면서 계속 행렬 곱셈이 일어난다. 이러한 과정을 전전파 학습(Forward Propagation Training)이라고 한다.

거꾸로 최종 정답과의 차이를 확인하고 반대 방향으로 행렬을 곱해가면서 네트워크를 교정해 가는 과정을 역전파 학습(Backward Propagation Training)이라고 한다.

이처럼 학습과정에서 행렬계산이 수없이 일어난다. 그래서 인공지능 계산에서 가장 빈번히 일어나는 컴퓨터 계산이 행렬 곱셈과 덧셈이다. 그리고 이러한 병렬 계산에 GPU가 가장 적합한 프로세서 구조이다.

인공지능 학습과 판단에 필요한 행렬 계산식들. [출처=KAIST]

인공지능을 위한 GPU 구조

이와 같은 행렬 계산은 하나하나 순차적으로 일어나지 않고 동시에 병렬로 한다. 이렇게 동시에 병렬로 계산하는 방법으로는 컴퓨터를 병렬로 연결해서 수행하는 방법이 있다. 초기 구글 알파고에서 쓰인 방법이다.

그러나 이러한 병렬 계산을 위해서는 컴퓨터끼리 데이터를 주고받아야 한다. 컴퓨터끼리 케이블로 연결돼야 한다. 이러면 데이터를 컴퓨터 간에 이동하는 데 시간이 걸린다. GPU는 반도체 프로세서 내부에서 병렬 계산을 하므로 빠르고 효율적이다.

엔비디아 GPU의 경우, 내부에서 80여개의 SM(Streaming Multiprocessor)이 병렬 계산을 나누어서 한다. 그 SM 속에는 32개의 중간 크기의 계산블록(Warp)이 있고, 각 Warp에는 64개의 계산 코어(Thread)가 있다.

그래서 GPU 내에는 전체적으로 80x64x32=16만3840개의 병렬 계산 코어가 있다. 이들이 동시에 병렬 계산을 한다. 앞으로는 계산 코어의 개수가 100배 이상 증가할 것으로 예상한다. 모두 행렬 계산을 빠르고 효율적으로 하기 위함이다.

GPU에도 단점은 있다. 코어가 많기 때문에 코어 주변에 계산 결과를 임시로 저장하는 캐쉬(Cash) 메모리가 한정돼 있다. 그래서 매번 계산 결과를 낼 때마다 외부의 디램에 저장하고 다시 읽어 와야 하는 번거로움이 있다. GPU 외부 메모리인 디램의 성능이 지원해줘야 한다. GPU의 성능을 위해서는 디램의 성능도 같이 좋아져야 한다.

마지막으로 GPU의 어려운 점은 계산량이 너무 많아서 프로세서에서 열이 많이 발생하고, 그 결과 반도체 온도가 올라간다는 점이다. 그러면 프로세서의 계산 능력이 급속히 감소한다. 그래서 반도체 냉각 기술이 중요해지고 있다.

이처럼 GPU는 더욱 병렬화되고, 메모리와도 병렬화되며, 냉각 기술을 위한 혁신이 계속될 전망이다. 4차 산업혁명이 진행되면서 GPU의 수요와 기술 발전은 더욱 심화할 전망이다.

최신 엔비디아 GPU의 내부 구조도. [출처=KAIST]

 

[김정호 카이스트 전기 및 전자공학과 교수] joungho@kaist.ac.kr

[뉴스핌 베스트 기사]

사진
20일 상암서 '마이 케이팝 스타' 결선 생방송 무대 [서울=뉴스핌] 최문선 기자 = 종합뉴스통신사 뉴스핌이 주최·주관하고 문화체육관광부가 후원하는 글로벌 오디션 '마이 케이팝 스타(MY KPOP STAR)'의 결선 진출자 사전투표가 시작됐다. 지난 12일 시작된 이번 사전투표는 결선에 진출한 국내외 참가자 톱10을 대상으로 진행된다. '마이 케이팝 스타'는 국적과 나이에 제한 없이 누구나 참여할 수 있는 글로벌 오디션으로, 총 60개국에서 참가자가 지원해 글로벌 K팝 오디션으로서 관심을 모았다. [서울=뉴스핌] 최문선 기자 = 종합뉴스통신사의 글로벌 오디션 '마이 케이팝 스타(MY KPOP STAR)'의 결선 진출자 10팀 사전 투표가 시작됐다. 앞서 예선 진출자 200팀 가운데 국내 12팀, 해외 18팀 등 총 30팀이 본선 무대에 올랐으며, 치열한 경쟁 끝에 국내 5팀과 해외 5팀이 최종 결선 진출자로 선정됐다. 국내 결선 진출자는 고도아, 박희주, 황승대, 조하음, 윤근아다. 해외에서는 다니 리베라(Dani Rivera·브라질), 샌디 에고(Sandy Ego·이스라엘), 시리나(Shirina·우즈베키스탄), 메이 칫 뗏(Maye Chit Thet·미얀마), 바흐테(Vachte·이란)가 이름을 올렸다. 사전투표 시작과 함께 톱10 참가자들의 홍보 영상도 공개됐다. 영상에는 참가자들의 자기소개와 오디션 참가 소감, 결선 무대에서 보여주고 싶은 모습, 응원해 주는 팬들에게 전하는 메시지 등이 담겼다. 참가자들은 "결선에 진출했을 때 가장 기뻤다", "무대에 설 때가 가장 행복하다", "결선 무대가 기대되면서도 떨린다" 등의 소감을 전했다. 이어 "보내주신 응원에 보답할 수 있도록 최선을 다하겠다", "많은 기대와 응원 부탁드린다"며 팬들에게 감사와 당부의 메시지를 보냈다. [서울=뉴스핌] 최문선 기자 = 종합뉴스통신사의 글로벌 오디션 '마이 케이팝 스타(MY KPOP STAR)'의 결선 진출자 10팀 사전 투표가 시작됐다. 2026.11.13 moonddo00@newspim.com 결선은 오는 20일 서울 마포구 상암동 큐브컨벤션센터에서 오프라인으로 진행된다. 최종 우승자에게는 1억 원의 상금이 수여되며, 국내 참가자는 2위부터 10위까지 각각 200만원의 상금을 받는다. 해외 참가자에게는 결선 진출 시 왕복 항공권과 숙박비 등 체류 비용 전액을 지원한다. 이와 함께 글로벌 쇼케이스 및 공연 참여 기회, 언론 홍보와 인터뷰, 국내 엔터테인먼트사의 현장 캐스팅 기회 등 다양한 혜택도 마련됐다. K팝 보컬·댄스 트레이닝 프로그램과 K팝 안무를 활용한 숏폼 콘텐츠 제작 지원도 제공된다. '마이 케이팝 스타' 결선 진출자 홍보 영상은 유튜브 뉴스핌TV에서 확인할 수 있으며, 사전투표는 투표 사이트(https://vote.mykpopstar.com/)에서 오는 18일 17시까지 참여할 수 있다. moonddo00@newspim.com 2026-11-13 16:15
사진
EBS "수학, 지난해 수능과 비슷한 수준" [서울=뉴스핌] 황혜영 기자 = 19일 치러진 2027학년도 대학수학능력시험(수능) 수학영역은 지난해 수능과 비슷한 수준으로 출제된 것으로 분석됐다. 공통과목은 지난해보다 평이하고 선택과목은 유사한 수준이었으며 종합적인 사고력을 요구하는 문항으로 중상위권 변별력을 확보했다는 평가다. EBS 현장교사단 수학 대표 강사인 남치열 백석고등학교 교사는 이날 정부세종청사에서 열린 2027학년도 수능 출제 경향 브리핑에서 "작년 수능과 올해 모의평가의 출제 기조와 난이도를 유지했다"며 "EBS 수능 연계교재의 개념과 원리를 깊이 있게 학습한 수험생에게 익숙한 중고난도 문항이 다수 연계됐다"고 밝혔다. [서울=뉴스핌] 사진공동취재단 = 2027학년도 대학수학능력시험(수능)이 실시된 19일 오전 서울특별시 광진구 광남고등학교에서 수험생들이 막바지 시험 준비를 하고 있다. 2026.11.19 photo@newspim.com 이번 수능에서는 6월·9월 모의평가와 마찬가지로 출제 범위 내 여러 단원에서 문항이 고르게 출제됐다. 주어진 상황을 논리적으로 추론하거나 수학의 개념·원리·법칙을 종합적으로 적용하는 문항, 함수의 그래프를 추론하고 해석하는 문항 등이 포함됐다. 남 교사는 "13번, 20번 등 중난도 문항은 조건을 차례로 해석해 해결할 수 있는 문항으로 중위권 학생들을 변별할 수 있도록 출제된 것으로 보인다"며 "종합적 사고력이 필요한 고난도 문항들은 다소 까다롭게 느낄 수 있지만 전반적으로는 작년 수능과 비슷한 수준"이라고 분석했다. 공통과목에서는 수학Ⅰ과 수학Ⅱ에서 각각 11문항이 출제됐다. 수학Ⅰ은 지수함수와 로그함수 4문항, 삼각함수 3문항, 수열 4문항으로 구성됐다. 수학Ⅱ는 함수의 극한과 연속 2문항, 미분 5문항, 적분 4문항으로 지나치게 많은 개념을 복합적으로 사용해야 하는 문항은 배제됐다는 설명이다. 비교적 까다로운 문항으로는 공통과목 22번(수학Ⅰ)과 21번(수학Ⅱ), 확률과 통계 30번, 미적분 30번, 기하 30번 등이 꼽혔다. 특히 공통과목 21번은 가장 까다로웠을 것으로 예상됐다. 삼차함수의 그래프를 바탕으로 최댓값과 최솟값의 곱으로 정의된 함수의 미분가능성을 종합적으로 분석하는 문항이다. 22번은 주어진 조건을 만족하는 수열의 항 사이 규칙을 추론하고 수열의 합을 구하는 문제로 상위권 변별력을 갖춘 것으로 평가됐다. 선택과목에서는 확률과 통계 30번이 조건부확률을 구하기 위해 발생할 수 있는 모든 경우를 꼼꼼하게 구분해야 하는 문항으로 분석됐다. 미적분 30번은 주어진 조건에 맞는 구간별 함수를 찾은 뒤 치환적분법으로 정적분을 구하는 문제다. 기하 30번은 좌표공간에서 조건을 만족하는 점과 도형을 찾아 정사영의 넓이를 구하도록 했다. 선택과목 간 유불리에 대해서는 과목별 특성에 맞는 난도로 변별력을 확보했다고 평가했다. 남 교사는 "특정 과목이 쉽다, 어렵다 이렇게 분석하지는 않았다"며 "그 과목 특성에 맞는 난이도를 통해 충분히 변별력을 확보했다"고 말했다.출제본부는 2015 개정 수학과 교육과정의 내용과 수준에 근거해 수학적 사고력을 측정하는 데 중점을 뒀다고 밝혔다. 복잡한 계산이나 반복 훈련으로 익힌 기술·공식을 단순하게 적용하는 문제보다 기본 개념에 대한 충실한 이해와 종합적인 사고력을 요구하는 문항을 출제했다는 설명이다. 남 교사는 "학교 수업에서 학습한 개념을 바탕으로 문제를 이해하고 해결하는 능력을 측정할 수 있는 문항들로 구성됐다"며 "사교육에서 문제풀이 기술을 익히고 반복적으로 훈련한 학생들에게 유리한 문항은 출제되지 않은 것으로 분석했다"고 밝혔다. 이번 수능 수학영역의 EBS 연계율은 50%로 수험생이 응시하는 30문항 가운데 15문항이 연계됐다. 공통과목에서는 수학Ⅰ 6문항과 수학Ⅱ 5문항 등 총 11문항이, 선택과목인 확률과 통계·미적분·기하에서는 각각 4문항이 연계됐다. 남 교사는 "특정 단원에 치우치지 않고 개념을 고르게 익힌 학습으로 대비할 수 있는 시험"이라며 "개념과 원리를 적용한 대표적인 유형뿐 아니라 종합적인 사고능력과 문제해결능력, 추론능력을 평가하는 문항으로 구성됐다"고 평가했다. hyeng0@newspim.com 2026-11-19 14:52
기사 번역
결과물 출력을 준비하고 있어요.
종목 추적기

S&P 500 기업 중 기사 내용이 영향을 줄 종목 추적

결과물 출력을 준비하고 있어요.

긍정 영향 종목

  • Lockheed Martin Corp. Industrials
    우크라이나 안보 지원 강화 기대감으로 방산 수요 증가 직접적. 미·러 긴장 완화 불확실성 속에서도 방위산업 매출 안정성 강화 예상됨.

부정 영향 종목

  • Caterpillar Inc. Industrials
    우크라이나 전쟁 장기화 시 건설 및 중장비 수요 불확실성 직접적. 글로벌 인프라 투자 지연으로 매출 성장 둔화 가능성 있음.
이 내용에 포함된 데이터와 의견은 뉴스핌 AI가 분석한 결과입니다. 정보 제공 목적으로만 작성되었으며, 특정 종목 매매를 권유하지 않습니다. 투자 판단 및 결과에 대한 책임은 투자자 본인에게 있습니다. 주식 투자는 원금 손실 가능성이 있으므로, 투자 전 충분한 조사와 전문가 상담을 권장합니다.
안다쇼핑
Top으로 이동