[김정호의 4차혁명 오딧세이] 인공지능의 소통 방법

기사입력 : 2019년07월22일 08:00

최종수정 : 2019년08월06일 19:35

김정호 교수.

펀치 카드의 추억

필자가 대학 1학년때 배운 컴퓨터 언어가 ‘포트란’이라는 과학기술용 컴퓨터 언어였다. 이러한 컴퓨터 언어란 인간과 컴퓨터의 소통을 가능하게 해주는 도구이다. 그 포트란은 주로 수학과 과학기술 계산에 편리한 컴퓨터 언어였다. 1980년대인 그때 학교에서 포트란 언어를 읽고 실행하는 컴퓨터가 IBM360/380 시리즈로 기억 한다. 그런데 프로그램을 직접 짜면 ‘펀치카드’라는 두꺼운 종이에 구멍이 뚫리는 방식으로 프로그램이 기록이 된다.

지금 생각해 보면 아주 원시적인 기록이며 컴퓨터 입력 방식이다. 타이프 치듯이 프로그램을 입력하면 이 펀치카드 종이에 구멍이 뚫린다. 이렇게 완성된 이 수 십장, 또는 수 백장의 펀치카드 뭉치를 학교 전산실에 제출하고 그 이후 1-2일 후에 계산 결과를 얻는다. 그때 계산 결과는 종이에 숫자 형식의 데이터로 프린트 되어 나온다. 그러니 1980년대초 컴퓨터의 입력은 종이에 구멍이 뚫린 펀치카드였고, 출력은 프린트 용지였다. 종이가 많이 필요했다. 이때 프린트 용지 맨 바깥쪽에는 프린트 기기에 쉽게 연결이 되게 작은 구멍이 아래 위로 쭉 뚫려 있었다. 이 수 백장의 프린트 용지는 추후 전공 관련 수학 수식을 풀때 요긴하게 쓰인 ‘이면지’였다. 종이가 이면지이자 컴퓨터와의 소통 방식이었다.

그런데 한번 포트란 프로그램에서 실수를 하면 몇 일이 지난 후에야 그 결과를 보고, 다시 고치고 입력해야 한다. 디버깅에 시간이 엄청 많이 걸린다. 그래서 프로그램을 짤 때 실수를 최소화해야 한다. 그때 필자는 학교를 전철을 타고 다녔는데, 전철에 앉아 펀치카드에 입력된 프로그램의 오류를 찾기 위해 몇 번이고 다시 검토하고 읽어 보기도 한 기억이 난다. 이처럼 이러한 초기 컴퓨터의 입출력 방식은 수시로 고치고 편집하거나 다시 실행하기 어려웠다. 그리고 종이의 낭비가 심했다고 볼 수 있다. 요즘 말로 ‘copy’, ‘paste’ 가 불가능하다. USB 에 작게 담거나 인터넷으로 파일을 보낼 수도 없다. 그때는 펀치카드 한 개의 박스로 담아 이동했다. 시간과 비용이 많이 드는 소통방식이다.

그 이후 몇 년이 지나 애플 8비트 컴퓨터가 학과에 한 대가 도입이 되었다. 이제는 펀치카드나 프린트 종이 필요 없이 화면을 보고, 프로그램을 편집하고, 입력하고, 그 계산 결과도 바로 화면으로 보았다. 컴퓨터와의 소통에 종이가 사라지기 시작했다. 편집이나 수정은 한 줄, 한 줄 했다. 요즘처럼 화면 전체를 왔다 갔다 하면서 고친 것이 아니라, 한 줄, 한 줄 고쳤다. 그야말로 줄 편집(line editing)이었다. 이 때 사용한 프로그램으로 ‘베이직’이 기억한다. 이후 IBM XT/AT 개인용 컴퓨터가 등장하면서 컴퓨터가 더욱 대중화 되었다. 워드 프로세서도 등장했다. 이제 펀치카드는 사라졌다. 이처럼 컴퓨터가 발전하면서 입력, 출력 장치도, 다르게 말하면 소통 방식도 인간에게 더 편리하게 발전해 왔다. 따라서 인공지능 컴퓨터의 입출력 형태와 소통 방식도, 또 다시 진화할 것으로 기대한다.

인공지능의 입력과 출력

현재 가장 많이 사용되고 있는 대표적인 인공지능 알고리즘이 CNN(Convolution Neural Network)이다. 주로 사진 이미지나 동영상을 판독하고, 이해하는데 사용하는 알고리즘이다. 특히 인터넷과 유튜브에 널린 수많은 사진과 영상 자료가 CNN 학습 데이터가 된다. 이때 컴퓨터가 자동적으로 인터넷에서 읽어서 긁어 모은다. 펀치카드도 필요가 없고 자판기도 필요가 없다. CNN은 이들 사진들을 입력하고, 출력으로는 예를 들어 그 사진 속의 물체를 인식(Classification)하거나 사진(Image) 속의 장면으로 글(Caption)로 쓰거나, 이야기(Text)를 만들 수도 있다. 또는 사진 속의 인물이 다음에 할 행동을 예측(Prediction)하거나 추후 일어날 사건을 예측한다. 또는 화면 속의 상황을 이해(Explain)할 수 있다. 이렇게 CNN의 출력은 ‘Tag(이름), ‘설명문(Caption)’, ‘문학 작품(Text)’이 되기도 한다. 때로는 음성 단어나 스토리로 만들어 출력할 수도 있다. 그리고 더 나아가 그 내용에 맞게 영상도 제작 가능하고, 음악도 창작 가능하고, 그림도 창작 가능하다. 출력으로 창작물을 만들 때 GAN(Generative Adversary Network) 알고리즘이 CNN과 같이 결합될 수 있다. 이 경우 출력은 창작 그림, 시, 문학작품, 음악, 영화도 된다.

입력 ‘사진’을 보고, ‘새’라고 확률(출력)을 제시(Classification)해 주는 CNN의 내부 구조. [출처=KAIST]

인공지능에서 CNN 다음으로 많이 사용하는 알고리즘이 RNN(Recurrent Neural Network)이다. 주로 시간 차이를 두고 순차적으로 입력되는 데이터의 해석과 이를 기초한 미래 예측에 사용된다. 대표적으로 사용하는 말을 알아듣는 인공지능 알고리즘이다. 말은 문법에 따라 순서대로 들어 온다. 그래서 입력의 순서에 따라 의미와 해석이 달라진다. 이 때문에 인공지능이 컴퓨터 내부에서 순차적으로 데이터를 받아 들이고, 순차적으로 학습하고 판단하도록 설계되어 있다. 다른 말로 시간과 순서 개념이 있는 인공지능이다. 그래서 RNN의 입력은 문장 혹은 사람의 말이 된다. 또는 영화의 장면과 장면의 연속이 입력이 될 수 있다.

책 한 권 전체가 RNN의 입력이 될 수도 있다. 그 속에 단어가 순서대로 나열되어 있게 때문이다. 더 나아가 인류가 유사이래 만든 모든 문서, 모든 책이 RNN 의 입력이 될 수 있다. 여기에 전세계 수 백 개 언어의 책과 문서, 녹음 파일 전체가 입력 데이터가 되는 엄청난 분량이 된다. 인공지능 컴퓨터가 책을 모두 쉽고 빠르게 읽는 입력 장치만 개발되면 된다.

전화 상담하면 녹음이 되고, 디지털화되면 그 파일이 바로 RNN의 입력이 된다. 지하철 속에서 주고 받는 대화 모두가 누군가 기록한다면 RNN 입력이 된다. 스마트폰으로 주고 받는 문자와 통화내용도 입력이 된다. 집에 설치된 아마존 인공지능 스피커도 ‘알렉사’도 RNN 입력이 된다. 그래서 CNN의 영상 이미지 이상으로 많은 RNN 입력 데이터가 지구상에 존재한다.

이러한 RNN의 출력은 ‘정답’, ‘독후감’, 설명문’ 또는 ‘다음 문장’이 된다. 입력 데이터를 읽고 이해하고, 그 전체를 요약하거나 문맥을 설명하는 것이 출력도 된다. 또는 그에 해당하는 사진이나 영상을 출력할 수도 있다. 또는 입력 문장에 맞게 음악, 그림, 소설, 영화 등을 창작할 수 있다. 이때는 RNN 과 GAN이 결합해야 한다. 이처럼 RNN의 입력은 문자이나, 녹음, 영상, 책이 되고 출력은 단어, 해설, 또는 창작물이 된다. 이것이 RNN의 소통방식이다.

순서대로 들어오는 입력 문장을 통해 출력으로 해석하거나 단어로 표현하는 RNN 구조. [출처=KAIST]

궁극적인 인공지능의 입출력

결국 인공지능이 사람같이 생각하고, 행동하고 교류하려면 입출력 방식이 인간을 닮은 모습이 아닌가 한다. 결국 인공지능 소통 방식이 인간과 같아야 한다. 그렇게 되면, 인공지능의 입력은 사람처럼 말을 알아 듣고, 눈으로 볼 수 있어야 한다. 그리고 인공지능의 출력은 말을 하거나 글을 쓰거나, 단어로 표현하거나 한 단계 더 나아가, 문장, 소설, 시, 그림, 음악, 영화와 같은 창작물이 될 수 있다. 더 똑똑한 인공지능은 말을 하지 않아도, 문맥이나 표정만 보고 알아서 판단하고 행동을 하면 더 좋다. 궁극적으로 말 끼를 알아듣고, 눈치가 빠른 인공지능이 되어야 한다. 그 때 인공지능은 IQ 뿐만 아니라 EQ 도 좋아 사회성과 도덕성을 가지면 더욱 바람직하다.

미래 자율주행자동차에서는 이런 인공지능의 입출력 방법이 인간과 인공지능 컴퓨터와의 소통과 대화의 방식이 된다. 자율주행자동차의 기능에서 인공지능 자체의 기능도 중요하지만, 인간과의 소통을 위한 입출력 기능도 그에 못지 않게 같이 중요하다. 그래야 완전한 자율주행자동차 시대가 된다. 결국 인공지능이 발전하면서 인공지능의 소통 기술도 함께 발전되어야 한다. 궁극적으로는 소통의 방식은 ‘인간의 모습’을 닮아 간다. 언제인가 인공지능의 소통 방식으로 ‘텔리파시’까지 사용될 수도 있다.

[김정호 카이스트 전기 및 전자공학과 교수] joungho@kaist.ac.kr

사진

[변상문의 화랑담배] "일장기가 내려졌다" 변상문의 '화랑담배'는 6·25전쟁 이야기이다. 6·25전쟁 때 희생된 모든 분에게 감사드리고, 그 위대한 희생을 기리기 위해 제목을 '화랑담배'로 정했다. 미 합참으로부터 일반명령 제1호를 하달받은 맥아더 장군은 일본 오키나와에 주둔하고 있던 미 제10군 예하 미 제24군단장 하지(John R. Hodge) 중장에게 1945년 8월 29일 한국의 38도선 이남 지역에서 일본군 무장을 해제하라고 명령하였다. 1945년 8월 기준 무장해제 대상 한반도 주둔 일본군은 14개 사단 35만여 명이었다. 이 명령에 따라 하지 장군은 예하 미 제7사단, 미 제40사단, 미 제96사단 배치 계획을 수립하였다. 미 제7사단은 서울과 개성을 포함한 38도선 일대 및 경기도, 충청도 일원을 맡도록 했다. 미 제40사단은 강원 및 경상도를, 미 제96사단(나중에 미 제6사단으로 변경)은 전라도를 책임 지역으로 할당하였다. 제주도는 미 제25기지창이 맡았다. 38도선 이남에 진주한 전체 미군 병력은 약 7만7645명이었다. 하지만 오키나와에 상륙함정이 부족하여 미 제7사단을 우선 투입하였다. 1945년 12월 19일 대한민국 임시 정부 환국을 환영하는 국민 행렬. [사진= 국사편찬위원회] 맥아더 장군은 미 제24군단의 한국 진주에 앞서 포고령 제1호를 발표하였다. 이 포고령 제1호에는 북위 38도선 이남 지역에 미군이 진주하여 일본군 무장을 해제하고, 유엔에 가입할 자격을 갖춘 독립된 국가를 수립한다는 내용이 포함되어 있었다. 1945년 9월 8일 13:30 인천항. 미 제7사단 장병들이 상륙정에서 내리기 시작했다. 날씨는 맑았다. 바람은 따뜻했다. 부두 공간은 충분했다. 17:30 상륙을 마쳤다. 다음 날인 9월 9일 아침 철로를 이용하여 서울로 들어왔다. 1945년 9월 9일 일요일 서울 거리는 엄숙한 빛 속에 잠겨있었다. 높고 푸르게 개인 가을 하늘을 이고, 태극기, 성조기, 소련 기, 중화민국 국기 등이 나란히 휘날리고 있었다. 서울역에서 내린 미 제7사단 장병들은 대오를 갖추어 조선총독부를 향하여 행군하기 시작했다. 행군 대열 중간에는 하지 중장과 킨 케이드 제독, 그리고 영관급 이상 장교들이 지프차를 타고 있었다. 장병들의 얼굴은 승리자의 위엄보다는 예의와 신의를 존중하는 겸손한 빛이었다. 한눈을 팔거나 전투화 소리를 크게 내는 군인은 없었다. 서울역에서 조선총독부에 이르는 거리에는 사람들이 담을 쌓고 있었다. 대한국인으로서 체면과 위신을 거룩하게 표현하고 있었다. 미 제7사단 600여 명이 09:00경 조선총독부 광장에 천막을 쳤다. 이어서 16:00 일본군의 항복문서 서명식이 조선총독부 회의실에서 거행되었다. 연합국 측의 노엠 H 무어 중위가 개회사를 했다. 미군 장교 안내로 조선 총독 일본군 육군 대장 아베 노부유키, 쬬오쯔끼 조선주차군사령관, 야마구치 진해 해군경비사령관이 차례로 입장했다. 연합국 측 장교단 13명은 이미 착석한 상태였다. 곧이어 하지 중장과 킨케이드 제독이 수많은 내외 보도진의 플래시를 받으며 미 헌병 호위 속에 입장하였다. 16:06 하지 중장은 앉은 채로 조인식 시작을 선언하였다. 영문과 일문으로 된 항복문서가 파란 천이 덮여있는 일본군 측 책상 위에 놓여 있었다. 쪼오쯔끼가 먼저 서명했다. 뒤를 이어 야마구치와 아베가 서명했다. 하지 중장, 킨케이드 제독 순으로 미국 측이 서명했다. 하지 중장의 간단한 폐식사와 함께 조인식이 끝났다. 아베 총독은 병원에 입원한 상태였으나, 이날 가까스로 나와 항복문서에 서명한 것이었다. 아베가 항복문서에 서명한 것은, 미군 제24사단장 하지 중장에게만 한 것이었다. 소련 측에는 항복문서 서명을 안 했다. 한반도에서 유일한 항복문서인 이것은 한반도 전체를 미국에 인계한다는 의미가 들어있는 것이었다. 이날 1945년 9월 9일 16:00를 기해 38도 선 이남에서 일본 국기 게양이 금지되었다. 16:35 조선총독부 정문에 걸려 있던 일장기가 내려졌다. 대신 성조기가 게양되었다. 미군정의 시작이었다. / 변상문 국방국악문화진흥회 이사장 2025-10-13 08:00