전체기사 최신뉴스 GAM
KYD 디데이

[김정호의 4차혁명 오딧세이] 인공지능과 GPU

기사입력 : 2019년09월09일 08:00

최종수정 : 2019년09월09일 08:00

김정호 교수.

엔비디아 스토리

컴퓨터 구조에서 대표적으로 사용되는 반도체로는 계산 장치인 프로세서(Processor)와 메모리(Memory)가 있다. 그중에서 프로세서로는 개인용 컴퓨터에 많이 사용되는 CPU(Central Processing Unit)가 있고, 스마트폰에는 주로 AP(Application Processor)가 사용되고, 컴퓨터 그래픽 카드에는 GPU(Graphic Process Unit)가 사용된다.

이러한 프로세서 중에서 인공지능 계산을 위한 병렬처리에는 GPU가 가장 많이 사용된다. GPU 내부에는 계산기(Arithmetic Logic Unit, ALU) 코어의 개수가 수천 개 혹은 수만 개에 이른다. 그래서 동시 병렬 계산이 용이하다. 이러한 이유로 인공지능 계산에 GPU가 가장 유용한 프로세서가 된다.

이러한 배경으로 대표적인 GPU 회사인 엔비디아(NVidia)의 성장이 두드러진다. 최근에 GPU는 가상화폐 채굴에 쓰이기도 해서 한때 품절이 나기도 했다. 여기에 그치지 않고 자율주행 자동차의 인공지능 처리에도 GPU가 사용될 전망이다. 그 때문에 지난 10년간 엔비디아의 주가는 꾸준히 상승하고 있다. 이래저래 CPU, AP보다 GPU의 계속된 성장이 기대된다.

2019년 방문한 실리콘밸리의 엔비디아 신사옥 내부. [출처=KAIST]

필자의 연구실에서는 지난 10여년간 GPU와 디램이 3차원적으로 결합한 HBM(High Bandwidth Memory) 모듈을 설계하는 연구를 진행해왔다. 그 과정에서 국내의 삼성전자, SK하이닉스뿐만 아니라 엔비디아와 협력을 지속해 왔다.

HBM에서는 기존의 모듈과는 달리 실리콘 기판을 배선으로 사용해 GPU와 디램 사이의 연결선 개수를 대폭으로 늘린다. 더 빨리 많은 수의 병저렬 계산을 하기 위해서 고안됐다. 이 HBM 모듈은 주로 인공지능 서버에 사용하고 있으며, 그 가격은 1000만원에 가깝다.

이렇게 비용이 많이 드는 것이 단점이지만, 인공지능 시대를 맞아 수요는 계속 증가할 것으로 생각한다. 이러한 이유로 필자의 연구실 졸업생이 엔비디아에 여러 명 진출했다. 대학원 학생들이 인턴으로도 엔비니아에 파견 나가기도 한다.

2019년 방문한 엔비디아에서의 기술 교류 미팅. [출처=KAIST]

인공지능의 기본은 행렬 수학

인공지능에서 지능신경망인 DNN(Deep Neural Network)의 입력은 디지털 데이터이다. 그리고 데이터 입력은 일정 수의 데이터 묶음 형태로 표현된다. 이러한 디지털 데이터의 묶음을 수학 용어로 벡터(Vector)라고 한다.

예를 들어 카메라 이미지 화소점인 픽셀(Pixel) 하나에는 RGB(Red, Green, Blue) 세 가지 색깔의 배합과 밝기가 표현된다. 그러면 이미 4가지 요소를 갖는 벡터가 된다. 거기에 더해 화면 속의 위치 정보가 x, y로 들어가면 6열 벡터가 된다. 언어를 입력 벡터로 쓴다면 그 벡터 크기가 수백만개도 된다. 단어의 개수가 그만큼 많다.

이러한 입력 벡터를 다른 형태로 변환할 필요가 생긴다. 이때 벡터와 행렬(Matrix) 곱셈이 필요하다. 예를 들어 그래픽 처리에서 위치 정보가 포함된 벡터의 좌표를 변환하려고 한다면, 이 벡터에 행렬을 곱하면 된다.

보는 관찰자의 위치를 3차원으로 바꾼다면 새로운 좌표에서 다시 위치를 잡기 위해서 데이터 벡터에 좌표 변환을 하게 되는데, 이때 벡터에 좌표 변환 3x3 행렬을 곱하게 된다.

마찬가지로 인공지능 판단이나 예측에도 벡터와 행렬 계산이 사용된다. DNN에서는 입력이 데이터 벡터가 되고, 그 벡터 신호에 입력층(Input layer), 은닉층(Hidden layer), 출력층(Output layer)으로 지나가면서 계속 행렬 곱셈이 일어난다. 이러한 과정을 전전파 학습(Forward Propagation Training)이라고 한다.

거꾸로 최종 정답과의 차이를 확인하고 반대 방향으로 행렬을 곱해가면서 네트워크를 교정해 가는 과정을 역전파 학습(Backward Propagation Training)이라고 한다.

이처럼 학습과정에서 행렬계산이 수없이 일어난다. 그래서 인공지능 계산에서 가장 빈번히 일어나는 컴퓨터 계산이 행렬 곱셈과 덧셈이다. 그리고 이러한 병렬 계산에 GPU가 가장 적합한 프로세서 구조이다.

인공지능 학습과 판단에 필요한 행렬 계산식들. [출처=KAIST]

인공지능을 위한 GPU 구조

이와 같은 행렬 계산은 하나하나 순차적으로 일어나지 않고 동시에 병렬로 한다. 이렇게 동시에 병렬로 계산하는 방법으로는 컴퓨터를 병렬로 연결해서 수행하는 방법이 있다. 초기 구글 알파고에서 쓰인 방법이다.

그러나 이러한 병렬 계산을 위해서는 컴퓨터끼리 데이터를 주고받아야 한다. 컴퓨터끼리 케이블로 연결돼야 한다. 이러면 데이터를 컴퓨터 간에 이동하는 데 시간이 걸린다. GPU는 반도체 프로세서 내부에서 병렬 계산을 하므로 빠르고 효율적이다.

엔비디아 GPU의 경우, 내부에서 80여개의 SM(Streaming Multiprocessor)이 병렬 계산을 나누어서 한다. 그 SM 속에는 32개의 중간 크기의 계산블록(Warp)이 있고, 각 Warp에는 64개의 계산 코어(Thread)가 있다.

그래서 GPU 내에는 전체적으로 80x64x32=16만3840개의 병렬 계산 코어가 있다. 이들이 동시에 병렬 계산을 한다. 앞으로는 계산 코어의 개수가 100배 이상 증가할 것으로 예상한다. 모두 행렬 계산을 빠르고 효율적으로 하기 위함이다.

GPU에도 단점은 있다. 코어가 많기 때문에 코어 주변에 계산 결과를 임시로 저장하는 캐쉬(Cash) 메모리가 한정돼 있다. 그래서 매번 계산 결과를 낼 때마다 외부의 디램에 저장하고 다시 읽어 와야 하는 번거로움이 있다. GPU 외부 메모리인 디램의 성능이 지원해줘야 한다. GPU의 성능을 위해서는 디램의 성능도 같이 좋아져야 한다.

마지막으로 GPU의 어려운 점은 계산량이 너무 많아서 프로세서에서 열이 많이 발생하고, 그 결과 반도체 온도가 올라간다는 점이다. 그러면 프로세서의 계산 능력이 급속히 감소한다. 그래서 반도체 냉각 기술이 중요해지고 있다.

이처럼 GPU는 더욱 병렬화되고, 메모리와도 병렬화되며, 냉각 기술을 위한 혁신이 계속될 전망이다. 4차 산업혁명이 진행되면서 GPU의 수요와 기술 발전은 더욱 심화할 전망이다.

최신 엔비디아 GPU의 내부 구조도. [출처=KAIST]

 

[김정호 카이스트 전기 및 전자공학과 교수] joungho@kaist.ac.kr

[뉴스핌 베스트 기사]

사진
소고기 콕 집은 트럼프...축산농 반발 [세종=뉴스핌] 이정아 기자 = 다음 달 1일 한국에서 생산돼 미국으로 수입되는 모든 제품에 '25% 상호관세' 부과를 앞둔 상황에서 한미 간 막판 협상에 돌입했다. 이번 협상에서 미국은 30개월령 이상 미국산 소고기 수입 제한 철폐를 강하게 요구하며 한국을 압박하고 있다. 정부는 미국 측의 압박으로 30개월령 이상 미국산 소고기 수입 허용 등 농축산물 비관세장벽 카드를 협상테이블에 올리는 방안을 고심 중이다. 다만 농민단체의 반발과 국민 신뢰가 흔들릴 것으로 예상되면서 '제2의 광우병 사태'가 재현되는 것 아니냐는 우려도 제기된다.  ◆ 美, 30개월령 이상 소고기 압박…韓, 농산물 카드 검토 28일 정부에 따르면 도널드 트럼프 미국 대통령은 호주가 미국산 소고기를 개방했다는 점을 연일 언급하며 한국에도 같은 수준의 개방을 요구하고 나섰다.  도널드 트럼프 대통령은 지난 24일(현지시간) 소셜미디어인 트루스소셜에 "호주가 미국산 소고기를 받아들이기로 합의했다"며 "이제 우리는 호주에 (미국산) 소고기를 많이 팔 것"이라고 게시했다. 도널드 트럼프 미국 대통령.[사진=로이터 뉴스핌] 2025.07.25 mj72284@newspim.com 이어 "우리의 훌륭한 소고기를 거부하는 다른 나라들도 (개방) 요구를 받은 상태"라며 "이 좋은 흐름을 이어가자. 지금은 미국의 황금기"라고 덧붙였다. 트럼프 대통령은 소고기 개방을 거부하는 국가를 구체적으로 명시하지는 않았지만, 관세협상을 앞둔 한국을 겨냥한 것 아니냐는 해석이 나왔다. 제이미슨 그리어 미국 무역대표부(USTR) 대표와 브룩 롤린스 미국 농무부 장관 또한 트루스소셜을 통해 "지난 20년간 비과학적인 무역 장벽 때문에 우리 소고기가 호주 소비자들에게 판매되지 못했다는 것은 터무니없다"는 성명을 발표했다. 이들은 "미국 농축산업자들은 세계에서 가장 안전하고 건강한 소고기를 생산하고 있다"며 "USTR은 불공정한 무역 관행을 타파하고 미국 국민이 주요 시장에 배제되지 않도록 미국의 무역 파트너들과 계속 협상할 것"이라고 밝혔다. 미국이 협상을 진행하는 국가를 대상으로 연일 30개월 이상 소고기 개방을 압박하면서, 한국도 소고기 카드를 협상 테이블에 올릴지 여부를 검토 중이다.  김용범 대통령실 정책실장은 지난 25일 한미 관세협상과 관련해 "협상 품목 아래 농산물도 포함돼 있다"며 "농업이나 디지털 분야는 제이미슨 그리어 미 무역대표부(USTR) 대표와 여한구 통상교섭본부장 간 협상이 계속 이어지고 있다"고 전했다. 당초 정부는 한미 관세협상에서 농업분야 보호를 우선으로 두고, 30개월령 이상 미국산 소고기 개방 등 비관세 장벽을 해소할 카드를 협상 테이블에 올리지 않기로 방침을 정한 바 있다. 한 대형마트의 미국산 쇠고기 진열대 모습 <뉴스핌 DB> 그러나 지난 25일(현지시간) 미국 워싱턴DC에서 열릴 예정이었던 한미 고위급 '2+2 통상협의'가 스콧 베센트 미국 재무장관의 일정 사유로 전날 취소되면서 미국이 한국의 협상 태도에 불편을 느낀 것 아니냐는 지적이 나왔다. 앞서 미국은 우리나라에 대해 25%의 상호관세를 부과하는 행정명령에 서명했다. 이는 오는 8월 1일부터 적용되며, 한미 양국은 관세 협상을 진행 중이다. 트럼프 행정부는 한국에 대해 ▲30개월령 이상 미국산 쇠고기 수입 허용 ▲쌀 시장 추가 개방 ▲유전자변형(LMO) 감자·사과 검역 완화 등을 강하게 요구하고 있다. ◆ 농민단체 "관세협상에 농업 희생양 삼지 말아야"…대정부 투쟁 돌입 정부로서는 30개월령 이상 미국산 소고기 수입에 대해 민감하게 반응할 수밖에 없다. 우선 한국은 현재도 미국산 소고기의 최대 수입국이다. 지난해 미국산 쇠고기 수입액은 22억1000만달러로 집계됐다. 전체 수입액(38억4700만달러) 대비 57.4%를 차지한다. 미국산 쇠고기 수입액은 지난 2004년 1억300만달러에서 2012년 5억2200만달러, 2016년 10억3500만달러로 20억달러를 넘기다 2022년에는 26억2400만달러로 역대 최대치를 기록했다. 지난해까지의 연평균 증가율은 17.5%다. 이재명 대통령 [사진=대통령실] 우리나라는 이른바 '광우병 파동' 이후 30개월령 미만 미국산 소고기만 수입하고 있다. 지난 2008년 한미 쇠고기 협상이 타결됐고, 우리 정부가 30개월령 이상 미국산 소고기까지 수입한다는 사실이 알려지자 이에 반대하는 촛불집회가 전국적으로 열렸다. 당시 이명박 정부 지지율은 취임 2개월 만에 20%대로 폭락했고, 결국 정부는 미국과 소고기 협상을 일부 재협상했다. 다시 말해 현재 국내 소비자들은 30개월령 이상 미국산 소고기 섭취에 대해 안전하지 못하다는 인식이 기반에 깔려 있다. 또 우리나라 연간 쌀 저율관세할당(TRQ) 물량은 40만8700톤으로, 미국 물량이 이중 13만2304톤(32%)을 차지한다. 쌀 개방은 WTO 규약에 묶여 있기 때문에 한미 양자 간 협상체계가 불가능하다. 다만 미국이 소고기 등 농산물 개방을 미루는 국가에 더 높은 관세를 부과할 계획이라는 점을 연일 강조하면서 국익 측면에서 조선·철강·반도체 등 산업을 보호하고 농산물을 희생해야 하지 않겠냐는 의견도 나온다. 농민단체는 정부의 기류에 대거 반발하고 있다. 한국농축산연합회, 한국종합농업단체협의회, 축산관련단체협의회, 농민의길 등 농축산업 단체는 이날 용산 대통령실 앞에서 결의대회를 개최하고 대정부 투쟁에 나선다. 이들 단체는 "미국산 농축산물은 이미 한미 FTA로 전면개방을 한 마당에 관세 추가 인하 및 비관세장벽까지 철폐된다면 농민 생존권 말살과 함께 국내 농업생산 기반 붕괴는 시간문제일 것"이라며 강하게 규탄한다. 이어 "미국산 소고기에 대한 수입연령 제한과 사과에 대한 식물검역은 국내법과 WTO 등 국제협정 등에 따른 정당한 조치이며, 국민건강과 직결된 것으로 절대 포기해선 안 되는 문제"라며 "농축산물을 협상대상에서 제외해 식량주권과 국민건강권을 반드시 사수할 것"을 정부에 촉구했다. 단체 관계자는 "한미 관세협상 추이를 예의주시하면서 요구가 묵살될 경우 대대적인 추가 농민항쟁을 벌이겠다"고 예고했다. [서울=뉴스핌] 이형석 기자 = 3일 오후 서울 여의도 국회 본청 계단에서 열린 더불어민주당 쌀값정상화법 공포 촉구 결의대회에서 참석자들이 피켓을 들고 구호를 외치고 있다. 2023.04.03 leehs@newspim.com plum@newspim.com 2025-07-28 12:49
사진
SPC "8시간 넘는 야간근무 없앤다" [서울=뉴스핌] 최원진 기자= SPC그룹이 27일 대표이사 협의체인 'SPC 커미티'를 열고 장시간 야간 근로를 폐지하고, 앞으로 생산직의 야근 시간을 8시간 이내로 제한하기로 했다고 밝혔다. SPC그룹은 야간 생산이 불가피한 일부 필수 품목을 제외하고, 가능하면 야간 가동 자체를 줄여나가겠다는 방침이다. 그룹 관계자는 "8시간 초과 야근 폐지를 위해 △인력 확충 △생산 품목 및 생산량 조정 △라인 재편 등 전반적 생산 구조를 완전히 바꿀 계획이다. 각 (계열)사별 실행 방안을 마련해 10월1일부터 전면 시행한다"고 설명했다. 이재명 대통령이 지난 25일 경기 시흥시 SPC 삼립 시흥 공장에서 열린 산업재해 근절 현장 노사간담회에서 발언을 하는 모습. [사진=대통령실]  주간 근무 시간 역시 단계적으로 단축해 장시간 노동에 따른 피로 누적과 사고 위험을 사전에 차단한다는 계획이다. 또한 이번 근무체계 전환이 현장에서 안정적으로 정착될 수 있도록 노조와 협의를 병행하고, 내부 교육 및 매뉴얼 정비 작업도 함께 추진할 예정이다. SPC는 "생산 현장의 장시간 야간 근로에 대한 지적과 우려를 무겁게 받아들여 근무 형태를 비롯한 생산 시스템 전반에 대한 개혁을 추진하기로 했다"며 "앞으로 근로자 안전이 최우선시되는 일터를 만들 수 있도록 적극 개선하고 투자하겠다"고 밝혔다. 이번 결정은 지난 25일 이재명 대통령이 SPC삼립 시화공장을 직접 찾아 현장 간담회를 주재하며 야간 노동과 과도한 업무 강도를 지적한 데 따른 것이다.  이 대통령은 지난 5월 SPC 시화공장에서 발생한 여성 노동자 사망 사고와 관련해 "수십 년이 흘렀지만 여전히 현장에서 노동자가 죽고 있다"며 "같은 방식의 사고가 반복되는 건 심각한 문제"라고 강하게 비판했다. 이어 "돈과 비용 때문에 안전과 생명을 희생하는 구조라면 반드시 바뀌어야 한다"며 "이번을 계기로 산재 사망률을 줄이기 위한 현실적이고 구체적인 대책이 마련되길 바란다"고 강조했다. 이날 간담회에는 김영훈 고용노동부 장관, 김용범 정책실장, 문진영 사회수석 등 청와대 주요 인사들이 배석했으며, SPC 측에선 허영인 회장과 김범수 SPC삼립 대표, 김지형 컴플라이언스위원장, 김희성 안전보건총괄책임자, 김인혁 노조위원장 등이 참석했다. CJ푸드빌, 크라운제과 등 타 식품업체의 현장 책임자들도 함께 자리를 했다. wonjc6@newspim.com 2025-07-27 13:22
안다쇼핑
Top으로 이동