전체기사 최신뉴스 GAM
KYD 디데이
산업 생활경제

속보

더보기

[김정호의 4차혁명 오딧세이] 계룡산에서 배우는 인공지능의 학습 원리

기사입력 : 2019년10월07일 08:00

최종수정 : 2019년10월07일 08:00

김정호 교수.

두 갈래 계룡산 등산로 

지난 주말, 국내 대표적인 반도체 기업의 임원 10여명과 카이스트(KAIST) 교수 10여명이 함께 1박2일로 충남 계룡산에 모여 토론을 겸한 친목 모임을 했다. 모두 바쁜 가운데도 어렵게 귀중한 자리를 같이했다.

앞으로 반도체 산업의 기술 발전 방향, 기술개발, 인력육성과 상호협력 방안도 논의했다. 특히 토론 속에서도 가을 풍경과 냄새가 눈과 코를 즐겁게 했다. 계룡산 정기를 받아 국내 반도체 산업의 계속된 성장을 기원해 본다.

계룡산 동쪽에는 동학사라는 절이 있고, 계룡산 서쪽 공주 방면에는 갑사라는 절이 있다. 그래서 주말에 가끔 산책 겸 등산도 하게 된다. 등산로 입구의 음식점에 들러 맛있는 식사를 해서 말(馬)도 아닌데 가을 살이 찌게 된다. 계룡산은 근처 대청댐과 함께 대전 연구단지의 커다란 자연환경 자산이다. 집에서 30분 이내에 이러한 국립공원이 있다는 사실은 큰 행운이다.

그런데 동학사에서 출발하는 계룡산 등산로에는 대표적인 두 가지 등산로가 있다. 먼저 하나는 동학사 입구 매표소 바로 우측으로 올라가는 등산로이다. 이 등산로를 잡으면 산등성이를 타고 쭉 정상으로 등산하게 된다. 처음에는 조금 가파르지만, 나중에는 완만하게 산꼭대기까지 능선을 타고 간다. 그래서 남매탑을 지나 최종적으로 계룡산 정상에 오르게 된다.

또 다른 등산로는 동학사 절을 지나 계곡을 따라 계속 올라가는 등산로이다. 쭉 계곡을 오르다 보면 물길 흐르는 개울 소리와 바람에 흔들리는 나뭇잎 소리, 낙엽을 밟는 발자국 소리를 듣게 된다.

개울에 가을 단풍 낙엽도 떠다닌다. 이렇게 계속 오르다 보면 은선 폭포를 지나게 된다. 이 등산로의 장점은 물길을 따라가기 때문에 물소리를 들을 수 있다는 점이다. 능선 길에서는 볼 수 없는 풍경이다. 하지만 등산 막바지에 높은 각도의 오르막을 숨이 차게 한참 올라가야 한다. 정상에 오를 때 막판에 힘이 든다.

2019년 9월 말 계룡산 자락의 한옥 마당 앞에 핀 코스모스. [출처=KAIST]

인공지능 학습은 등고선 미분

이처럼 산속에서의 물길은 가파른 계곡을 따라 흐른다. 산의 등고선을 그린다면 산의 등고선이 빽빽한 부분에서 산의 경사가 크고, 그 경사 방향으로 물이 흐르고 계곡이 생긴다.

물이 중력의 힘에 따라 흐르고 중력은 높은 산의 경사를 좋아한다. 산의 등고선과 직각 방향으로 물의 힘이 가해지고, 그에 따라 물길이 생긴다.

그런데 인공지능도 계룡산 물길과 같이 등고선의 직각 방향의 계곡으로 빠르게 '학습(Learning)'해 간다. 인공지능도 경사가 급한 물길을 좋아한다.

인공지능의 핵심은 기존의 해석적 모델이 아니라 데이터를 이용해 학습하는 알고리즘인 '기계학습(Machine Learning)'이다. 이런 이유로 인공지능 학습에 빅데이터가 꼭 필요하다. 그 결과 인공지능과 빅데이터는 서로 떼려야 뗄 수 없는 숙명적인 관계가 된다.

기계학습 중에서 특히 정답을 이용해 학습하는 방법을 '지도학습(Supervised Learning)'이라고 부른다. 그래서 인공지능 기계학습 개발 과정에서 데이터를 이용해서 학습해 나간다. 이 과정을 순방향 학습(Forward Propagation)이라고 한다.

그리고 다시 정답을 비교해 인공지능 신경망 속의 수백만 또는 수천만 변수(Weight)를 보정해 가는 과정을 역전파 학습(Backward Propagation)이라고 부른다. 이러한 역전파 학습 과정에서 최대한 빠른 시간에 학습을 마치고 변수(Weight)들을 확정할 필요가 있다.

이러한 방법 중에 가장 많이 쓰이는 최적화 방법이 경사하강법(Gradient Descent)이다. 쉽게 표현한다면 정답과의 차이를 비용함수(Cost Function)라고 부르는데, 이 비용함수를 미분해서 기울기가 '0'이 되는 지점으로 변수를 조정해 가는 방법이다.

인공지능 기계학습에 사용되는 경사하강법(Gradient Descent) 설명 노트. [출처=KAIST]

등산으로 치면 계곡을 따라 하산하고, 등산로 입구까지 빨리 내려오는 방법이 경사하강법이다. 고등학교와 대학에서 배우는 미분법이 여기에 사용이 된다. 그래서 인공지능 학습과정에서 행렬 다음으로 많이 사용되는 수학이 '미분(Differentiation)'이다.

계룡산을 비롯한 산 주변의 지형의 굴곡은 등고선으로 표현할 수 있다. 수학적으로 보면 이 등고선의 직각 방향으로 가장 가파른 계곡을 만난다. 다르게 이야기하면 어느 지점에서 등고선과 직각 방향이 가장 가파르다. 그 방향으로 물이 흐르고, 인공지능도 그 방향으로 학습 최적화를 한다. 이런 등고선 함수를 미분하면 직각 방향으로 벡터가 만들어진다. 수학적으로 벡터 미분(Gradient)이라고 부른다.

결국 등고선 미분 방향으로 계속 가면 계곡을 만나고, 계곡 따라 물이 흐른다. 인공지능도 마찬가지로 비용함수의 등고선의 미분 벡터 방향을 따라 빠르게 학습해 간다. 물을 만나 계곡의 바닥을 만나면 학습을 멈춘다. 이처럼 계룡산 계곡의 물흐름과 인공지능 학습은 같은 원리를 따른다. 이는 우연의 일치일 수도 있고, 자연의 섭리일 수도 있고, 외계인의 암호 코드일 수도 있다.

인공지능의 최적화

등산으로는 계룡산도 좋고, 속리산도 좋고, 설악산도 좋다. 아울러 외국의 산 중에는 경험상 캐나다 로키산맥 속의 재스퍼 국립공원(Jasper National Park)이 가장 웅장하고 아름답다. 6월 말이면 빙하가 녹아내려 호수를 이루고, 계곡물이 세차게 흐른다.

그 빼어난 산맥이 수백 킬로미터에 걸쳐 병풍처럼 펼쳐져 있다. 빙하가 녹은 물에는 광물이 녹아 있어 햇빛을 받으면 에메랄드 색깔을 나타낸다. 공통적으로 계룡산, 설악산, 안데스 산맥의 마추픽추 계곡, 로키 산맥의 폭포수 모두 산 등고선의 미분 벡터 방향으로 물이 흐른다.

인공지능은 냉정하고 인간미가 없고, 오직 정확성과 효율성만 따진다. 그래서 인공지능에게는 인간미가 없다고 볼 수 있다. 유일하게 위안으로 삼고자 하는 점은, 인공지능도 '산과 계곡의 모습'을 따른다는 점이다. 보통 산을 좋아하고 계곡을 좋아하면 인자한 사람이다.

캐나다 로키 산맥 재스퍼 국립공원(Jasper National Park) 속의 설산과 에메랄드 빛 호수 사진. [출처=KAIST]

 

[김정호 카이스트 전기 및 전자공학과 교수] joungho@kaist.ac.kr

[뉴스핌 베스트 기사]

사진
외교부 1차관 인사 충격파 [서울=뉴스핌] 유신모 외교전문기자 = 국장급에서 일약 차관으로 직행한 박윤주 외교부 1차관 임명에 외교부가 술렁이고 있다. 외교부 조직과 인사를 총괄하는 책임자인 1차관에 현재 실장급(1급)보다 후배 기수인 박 차관을 전격 기용한 배경을 놓고 설왕설래 중이다. 이번 인사는 파격을 넘어 충격에 가깝다. 박 차관은 전임 김홍균 1차관보다 외무고시 기수로 11기 아래이며 나이도 9살이나 어리다. 박 차관이 미국 관련 업무를 오래했다고는 하나 본부 주요 국장도 거치지 않았고 공관장도 특명전권대사가 아닌 총영사를 지냈다. 기수나 나이, 경력 모든 면에서 전례가 없는 인사다. [서울=뉴스핌] 이길동 기자 = 박윤주 신임 외교부 1차관이 11일 오전 서울 종로구 외교부에 첫 출근을 하고 있다. 2025.06.11 gdlee@newspim.com 퇴직한 외교관 출신의 한 인사는 "차관이 실장보다 후배였던 경우는 외교부 역사상 한 번도 없었다"면서 "이 정도 인사면 조직에 미치는 영향이 만만치 않을 것"이라고 말했다. 전남 보성 출신인 박 차관은 민주당 정부에서 요직을 거쳤다. 노무현 정부 출범 때 정권인수위원회를 거쳐 이종석 당시 청와대 국가안전보장회의(NSC) 사무차장 밑에서 일했다. '자주파·동맹파 파동'으로 외교부 북미국장에서 물러난 위성락 현 국가안보실장도 당시 NSC에서 함께 일했으며, 위 실장이 주미 대사관 정무공사일 때도 워싱턴 공관에서 함께 근무했다. 문재인 정부 들어 북미국 심의관과 인사기획관을 거쳐 애틀랜타 총영사로 임명됐지만, 1년여 만에 윤석열 정부 출범과 함께 교체됐다. 외교부가 술렁이는 이유는 단순히 의외의 인물이 발탁됐기 때문만은 아니다. 박 차관 임명이 의미하는 것이 무엇인지에 대한 불안감이 있다. 전례없는 파격 인사로 조직에 충격을 가하고 강도 높은 조직 개편과 체질 개선을 추진하기 위한 인사가 아니냐는 관측이 나오고 있다. 외교부는 민주당 정부가 집권했을 때마다 개혁의 대상이었으며, 실제로 외교부를 '손보려는' 시도도 자주 있었다. 노무현 정부때는 중앙인사위원회·행정자치부 출신의 차관을 임명해 조직 개편을 시도했고, 문재인 정부 때는 주미 대사관의 한·미 정상통화 유출사건을 계기로 외교부 내 '친미 라인'을 제거하기 위해 과도한 징계를 가해 물의를 빚은 적도 있다. 외교부의 한 중견 간부는 "이번 차관 인사가 태풍의 전조일지도 모른다는 불안감이 외교부 내에 있는 것이 사실"이라며 "박 차관 임명이 조직에 활력을 불어넣는 신선한 충격으로 작용하기를 바란다"고 말했다. opento@newspim.com 2025-06-11 16:23
사진
[이재명의 사람들]김현지 총무비서관 [서울=뉴스핌] 지혜진 기자 = 이재명 정부가 출범한 지 1주일이 지난 가운데 비서실장을 비롯해 수석비서관급 인선도 추가로 이뤄지고 있다. 현재까지 드러난 이재명 대통령 인선의 핵심은 '실용'이다. 인수위원회 없이 출발해야 하는 정부인 만큼 기존에 손발을 맞춰온 인사들을 적극적으로 등용하는 모습이다. 특히 이 대통령이 경기 성남시장, 경기도지사 때부터 호흡을 맞춰온 성남·경기라인 인물들은 정부 요직에 내정됐다. 대표적인 인물이 총무비서관으로 내정된 김현지 전 보좌관이다. 이 대통령의 최측근 중 한 명으로 꼽히는 김 전 보좌관은 이 대통령이 성남시장이던 때 시민운동을 하면서 인연이 닿았다. 대학 졸업 직후인 1998년 당시 변호사이던 이 대통령이 설립을 주도한 성남시민모임에 합류했으며 이곳에서 집행위원장, 사무국장 등을 거쳤다. 이 대통령이 정치를 결심하게 된 계기가 됐던 성남시립병원 설립 운동도 함께했다. 성남시립병원추진위원회에서 사무국장을 역임한 것. 이후 이 대통령이 성남시장에 당선된 후에도 시민운동에 방점을 찍었다. 그는 2011년 성남 지역에서 활동하는 환경·도시 전문가 등이 주축이 된 민관 협력 기구 '성남의제21'에서 사무국장으로 활동했다. 그러다 이 대통령이 2018년 경기도지사에 당선된 후에야 도청 비서관직을 맡으며 본격적으로 이 대통령을 보좌하기 시작했다. 김 전 보좌관은 '그림자 보좌'로 유명하다. 본인이 전면에 나서지 않는 성향이다. 시민운동가로 활동할 때는 지역 언론 인터뷰에도 응하는 등 적극적인 모습을 보였으나 이 대통령이 국회에 입성한 이후에는 언론 노출을 지양해왔다. 또한 김 전 보좌관은 이 대통령에게 직언을 아끼지 않는 것으로 알려졌다. 당 관계자는 "김 전 보좌관은 리스크 관리를 중요시하는 사람이다. 문제가 될 만한 것들은 사전에 차단하려고 하고 조심성이 강하다"고 했다. 이 대통령의 최측근으로 꼽히던 정진상 전 당대표실 정무조정실장과 김용 전 민주연구원 부원장이 각각 대장동 사건과 불법 정치자금 수수 혐의 등으로 사법리스크에 휘말리면서 당직을 내려놓은 영향도 있다. 김 전 보좌관이 정 전 실장과 김 전 부원장의 자리를 대체했다는 이야기도 있었다. 김 전 보좌관이 맡게 될 대통령실 총무비서관은 대통령실 예산을 총괄하는 직책으로 공무원 직제상 1급에 해당한다. 특히 대통령실 2급 이하 행정관 등 실무진 인사에 관여할 수 있다. 이 대통령은 수석급 인선에는 강훈식 비서실장, 우상호 정무수석, 강유정 대변인 등 비교적 친명(친이재명) 색채가 옅은 통합형 인재를 등용하는 한편 실무라인에는 김 전 보좌관처럼 오랜 기간 손발을 맞춰온 '복심'들을 배치하고 있다. 대통령실 1부속실장에 내정된 김남준 전 당대표 정무부실장, 의전비서관의 권혁기 당대표 정무기획실장, 인사비서관의 김용채 전 보좌관 등이 대표적이다. 원외에서 이 후보를 후방지원한 더민주전국혁신회의 핵심인물들도 이재명 정부에서 주요 역할을 할 것으로 보인다. 윤용조 혁신회의 집행위원장은 대통령 국가안보실 비서관으로 배치될 가능성이 크다. 강위원 혁신회의 상임고문은 전남 경제부지사에 내정된 것으로 확인됐다. 내년 지방선거를 앞두고 새 정부와 더 긴밀히 호흡을 맞출 수 있는 점을 고려한 것으로 보인다. heyjin@newspim.com 2025-06-11 17:10
안다쇼핑
Top으로 이동