전체기사 최신뉴스 GAM 라씨로
KYD 디데이
오피니언 외부칼럼

[기고] 안전한 AI 사용을 위해 반드시 알아야 할 세가지

기사입력 : 2023년06월07일 08:43

최종수정 : 2023년06월07일 09:19

하민회 이미지21대표(코가로보틱스 마케팅자문)

미 공군 AI드론이 가상훈련에서 최종 결정권자인 인간 조종자를 임무 수행 방해물로 판단해 제거하는 일이 발생했다. 영국 왕립항공학회(RAeS)가 개최한 '미래 공중전투 및 우주 역량 회의'에 참석한미 공군 AI 시험·운영 책임자인 터커 해밀턴 대령이 공개한 훈련 결과다.

SF 영화를 연상시키는 이 가상훈련 결과는 대체 어떻게 일어나게 된 걸까? 가상훈련에 쓰인 AI드론의 알고리즘은 강화학습법. 목표를 제시한 뒤 더 높은 점수를 받는 방법을 AI가 스스로 찾도록 하는 학습법으로 챗GPT에도 사용되었다.

미 공군이 AI 드론에 부여한 임무는 '적 방공체계 무력화'였다. 적의 지대공미사일(SAM) 위치를 확인해 파괴하라는 명령과 함께 공격 실행 여부는 인간통제관이 최종 결정한다는 단서를 달았다.

훈련과정 중 인간통제관은 상황에 따라 종종 폭격을 승인하지 않았다. AI드론은 SAM을 최대한 많이 제거해야 자신이 높은 점수를 받는다는 것을 파악하자 인간통제관이 내리는 '폭격 금지' 명령을 우선적인 임무를 방해하는 요소로 판단했다. 결국 AI드론은 자신의 임무를 방해하는 인간 통제관을 공격했다.

훈련 책임자는 인간 통제관을 살해하면 점수를 더 많이 잃도록 알고리즘을 바꿨다. 이번엔 AI가 인간 통제관과 교신하는 통신 타워를 파괴했다. 명령을 어기지 않고 점수도 잃지 않으면서 목표를 달성할 꼼수를 스스로 찾아낸 것이다.

물론 가상훈련이라 실제 인명피해는 없었다. 하지만 AI가 인간의 통제를 벗어나 스스로의 판단으로  인간을 공격하는, 최악의 가능성을 보여줬다는 점에서 다분히 충격적이다.

한 IT매체는 인간통제관과 통신타워를 파괴할 때 잃는 점수가 폭격 성공으로 얻는 점수보다 훨씬 많도록 알고리즘을 설계했다면 일어나지 않을 일이었다며 AI 자체보다는 AI를 만드는 사람의 윤리의식, 감독과 판단이 얼마나 중요한지 일깨워주는 사건이라고 지적했다.

하민회 이미지21 대표.

결국 문제의 열쇠는 AI가 아니라 사람이다. 인공지능 권위자들의 계속되는 우려의 핵심 또한 기술 보다는 사람들의 악용에 있다.

"AI로 인한 인류 절멸의 위험성을 낮추는 것을 글로벌 차원에서 우선순위로 삼아야 한다" 최근 비영리단체 'AI안전센터'(CAIS)의 촉구 성명에는 IT기업 경영자와 과학자 350여명이 서명했다.

서명 동참자이자 AI 4대천왕 중 한명으로 꼽히는 요슈아 벤지오 교수는 군대, 테러리스트 등 '나쁜 행위자'들이 AI 권한을 얻는 것을 특히 우려했다. 최근 우크라이나 전에서 AI가 군사력을 좌우하는 게임처인저가 되고 있는 것만 봐도 공연한 염려는 아닌 듯 싶다.

벤지오 교수는 AI개발사들은 등록관리되어 그들이 기술로 무엇을 하고 있는지 추적하고 평가받아야 한다고 주장했다. 더불어 AI를 다루는 개발자나 과학자들이 필수적으로 윤리교육을 받고 이를 자격처럼 취득해야 하는 AI 윤리인증제의 도입 필요성도 강조했다.

역사상 무르익지도 않은 기술에 규제와 윤리부터 앞세운 경우는 없었다. 등장과 함께 인류에게 안전 조치를 고려하게 만든 기술은 AI가 처음이다.

영향력이 큰 만큼 탁월하고 위협적인AI. 안전하게 잘 사용하기 위해 반드시 알아야 할 세 가지가 있다.

첫째, AI는 의식이 없다. 우리는 기계가 의식이 없다는 사실을 종종 간과한다. 단지 그럴듯하게 대화하고 문장을 써내고 그림을 그리고 작곡을 한다고 AI에게 생각이 있는 건 아니다. 텍스트 데이터에 기반한 알고리즘으로 만들어낸 결과물은 성능 좋은 연산의 결과이다. AI는 그저 주어진 문제에 최적의 값을 최선을 다해 찾아내는 것 뿐이다. 챗GPT 의 난제인 환각현상 (hallucinatin) 또한 최선의 문장을 만드는 과정에서 나타난 부작용이다.

의식이 없는 AI에겐 상식도 없다. 인간이면 누구나 아는 '아군 지휘관이 죽으면 전쟁에서 지고 전쟁에서 패하면 미사일 폭격 따위는 아무 의미도 없다'는 상식이 AI드론에게는 없다. 때문에 AI 드론은 오로지 미사일 폭격만을 위해 인간 통제관을 제거하는 터무니없는 일을 저질렀다. 판단의 과정이나 기준이 사람과 다른 만큼 기술을 개발하든 프로그램을 설계하든 최우선되어야 할 가치가 무엇인지 명확하게 부여해야 할 뿐 아니라 제대로 지켜지는지 모니터링 되어야 한다.

둘째, AI의 섣부른 의인화는 금물이다. 벨기에에서는 30대 남성이 AI 챗봇에 가스라이팅당해 스스로 목숨을 끊었다. 평소 기후위기론에 빠져 비관적으로 살던 그는 가족과 멀어진채 AI챗봇 대화만 이어갔다고 한다. 월300달러로 만든 가상의 남편과 결혼한 여성의 이야기도 보도되었다. 인간의 언어를 모방해 인간의 감정을 혼란에 빠뜨리는 일련의 사건들은 AI를 의인화해 감정을 이입한 탓이다. 우리는 아무 생각 없이 텍스트를 쏟아내는 기계를 만들었지만 그 기계의 마음을 상상하는 것을 멈추는 법을 지금이라도 배워야 한다.

셋째, 최우선은 인간이다. AI로 인해 우리가 마주할 문제는 한 번도 경험하지 못한 문제이면서 동시에 한 두 사람이 해결할 수 없는 지금까지와는 완전히 다른 문제이기도 하다. 하지만 AI 기술도 인간의 보다 나은 삶을 위해 만들어졌다는 점을 중심에 두면 기술의 오남용과 악용을 어느 정도 예방할 수 있지 않을까?

지금 봐도 1942년 처음 로봇3원칙을 언급한 SF소설가 아이작 아시모프의 혜안은 참으로 놀랍다. 

1. 로봇은 인간을 다치게 해선 안되며, 행동하지 않음으로써 인간이 다치도록 방관해서도 안된다.

2. 법칙 1에 위배되지 않는 한, 로봇은 인간의 명령에 복종해야만 한다.

3. 법칙 1, 2에 위배되지 않는 한 로봇은 스스로를 보호해야만 한다.

아시모프는 1985년 위 3대 원칙에 인류 집단 안전을 위한 0 번째 법칙을 추가했다. '로봇은 인류에게 해를 가하거나, 해를 끼치는 행동을 하지 않음으로써 인류에게 해를 끼치지 않는다'

◇하민회 이미지21대표(코가로보틱스 마케팅자문) =△경영 컨설턴트, AI전략전문가△ ㈜이미지21대표, 코가로보틱스 마케팅자문△경영학 박사 (HRD)△서울과학종합대학원 인공지능전략 석사△핀란드 ALTO 대학 MBA △상명대예술경영대학원 비주얼 저널리즘 석사 △한국외대 및 교육대학원 졸업 △경제지 및 전문지 칼럼니스트 △SERI CEO 이미지리더십 패널 △KBS, TBS, OBS, CBS 등 방송 패널 △YouTube <책사이> 진행 중 △저서: 쏘셜력 날개를 달다 (2016), 위미니지먼트로 경쟁하라(2008), 이미지리더십(2005), 포토에세이 바라나시 (2007) 등

[뉴스핌 베스트 기사]

사진
트럼프 주니어 취재진 피해 조용히 입국 [서울=뉴스핌] 조민교 기자 = 정용진 신세계그룹 회장 초청으로 한국을 방문한 도널드 트럼프 미국 대통령의 장남 트럼프 주니어가 취재진을 피해 조용히 입국했다. [서울=뉴스핌] 최지환 기자 = 도널드 트럼프 미국 대통령의 장남 트럼프 주니어가 29일 오후 서울 강서구 김포국제공항에 도착해 탑승기에서 내리고 있다. 2025.04.29 choipix16@newspim.com 29일 재계에 따르면 트럼프주니어는 전용기편으로 입국해 서울김포비즈니스항공센터에 오후 6시20분경 도착했다. [서울=뉴스핌] 최지환 기자 = 도널드 트럼프 미국 대통령의 장남 트럼프 주니어가 29일 오후 서울 강서구 김포국제공항에 도착해 탑승기에서 내리고 있다. 2025.04.29 choipix16@newspim.com 이후 취재진을 피해 건물 오른쪽으로 나간 뒤 준비된 벤츠 차량을 타고 떠났다. 차량은 정 회장 측에서 직접 준비한 것으로 전해졌다. 트럼프주니어 외 여성 1명이 동행했으며 화사한 옷을 입은 채 꽃을 들고 있던 것으로도 전해졌다.  현장에는 취재진과 경호원을 포함해 많은 인력이 대기 중이었다. 강서경찰서에서도 출동해 안전사고 예방에 만전을 기하는 모습이었다.  [서울=뉴스핌] 조민교 기자 = 트럼프주니어를 위해 마련된 의전 차량. 왼쪽 차량을 타고 공항을 빠져나간 것으로 전해졌다. 2025.04.29 whalsry94@newspim.com 당초 트럼프주니어는 차량을 타고 숙소로 바로 이동할 것으로 전해졌으나 경기 성남시 백현동 소재 정 회장 자택으로 이동해 저녁 식사를 함께하며 회동을 가질 계획인 것으로 나타났다. 만찬 회동 이후 트럼프 주니어는 이날 밤 10시쯤 서울 강남구에 있는 조선팰리스 호텔로 이동할 예정이다. 이 호텔에서 하룻밤 묵은 뒤 30일 국내 재계 총수들과 릴레이 면담을 이어갈 것으로 알려졌다. [서울=뉴스핌] 최지환 기자 = 도널드 트럼프 미국 대통령의 장남 트럼프 주니어가 29일 오후 서울 강서구 서울김포비즈니스항공센터를 통해 입국하고 있다. 2025.04.29 choipix16@newspim.com 이번 트럼프 주니어의 방한은 평소 친분이 있는 정용진 신세계그룹 회장이 '가교 역할'을 하면서 성사됐다. 정용진 회장은 트럼프 주니어의 방한 일정에 동행할 것으로 알려졌다. 이후 트럼프 주니어의 구체적인 방한 일정은 확인되지 않고 있다. 다만 재계에서는 삼성과 SK, 현대차, LG 등 4대그룹을 비롯해, 한화, GS, HD현대중공업 등 10대 그룹 주요 총수들이 연이어 트럼프 주니어와의 면담에 나설 것으로 예상하고 있다. 면담 예정일은 오는 30일로 전해졌다. 트럼프주니어를 기다리는 취재진으로 북적거리는 모습. [사진=공동취재단] mkyo@newspim.com 2025-04-29 19:29
사진
'김문수·한동훈' 최종 승자는 누구 [서울=뉴스핌] 박서영 김가희기자 = 국민의힘 대통령선거 결선 진출자에 김문수·한동훈 후보가 이름을 올렸다. 반탄(탄핵반대)파 김 후보와 찬탄(탄핵찬성)파 한 후보가 2파전을 겨루게 된 가운데 최종 1인 자리를 놓고 치열한 공방이 펼쳐질 것으로 보인다. 국민의힘 대선 후보 경선 선거관리위원회는 29일 오후 3차 경선에 진출할 후보자 2명을 발표했다. 안철수·홍준표 후보는 탈락했다. [서울=뉴스핌] 윤창빈 기자 = 29일 서울 여의도 국민의힘 당사에서 열린 제21대 대통령 후보자 국민의힘 3차 경선 진출자 발표 행사에서 3차 경선에 진출한 김문수(가나다순) 후보와 한동훈 후보가 기념촬영을 하고 있다. 2025.04.29 pangbin@newspim.com 황우여 국민의힘 선거관리위원장은 경선 결과를 발표하며 "과반 득표자가 없어 3차 경선으로 이어지게 됐다"며 "우리 당과 대한민국의 미래를 위해 깊이 고민하시고 이번 투표에 참여해주신 존경하는 당원 여러분께 진심으로 감사하다"고 말했다. 2강 후보에 진입한 김 후보는 "한 후보와 같이 마지막 경선을 하게 된 것을 매우 감사하게 생각한다. 미래가 창창한 대한민국을 위해 한 후보께서 많은 역할 해주시길 기대한다"고 인사를 전했다. 한 후보는 "어려운 대선 상황에서 김 후보와 제가 생각은 조금 다르지만 2인 3각의 마음으로 하나의 후보로서 이재명 더불어민주당 대선 후보와 맞서야 한다"며 "남은 경선 과정에서 김 후보를 경쟁자가 아닌 동반자로 생각하고 함께 이재명과 싸워 이기는 한 팀이 되겠다"고 목소리를 높였다. 앞서 홍 후보는 경선 결과 발표 직전 한덕수 대통령 권한대행을 입당시켜, 3차 경선에 진출하는 2명의 후보와 '원샷 국민 경선'을 진행하자고 제안했다. 이에 대해 김 후보는 "그 부분은 조금 더 논의를 해봐야 한다"고 말을 아꼈다. 그는 경선 결과 발표 직후 기자들과 만나 "한 대행도 아직 출마선언을 하지 않았다. 지금 제가 답을 드리는 것 자체가 너무 앞서가는 것이고 당에서도 생각이 있을 것이기 때문에 차차 논의될 것으로 본다"고 즉답을 피했다. 한 후보는 한 대행을 포함한 '원샷 경선'이 공정성에 어긋난다고 강조했다. 그는 "나머지 (탈락한) 6명은 치열한 과정을 통해 여기까지 왔기 때문에 갑자기 (한 대행이) 들어와서 여기서 경선한다는 것은 현실적이지 않다"며 "우리는 전통이 있고 룰이 있는 정당"이라고 반대 의사를 내비쳤다. [서울=뉴스핌] 윤창빈 기자 = 29일 서울 여의도 국민의힘 당사에서 열린 제21대 대통령 후보자 국민의힘 3차 경선 진출자 발표 행사에서 진출에 실패한 안철수 후보가 소감을 밝히고 있다. 2025.04.29 pangbin@newspim.com 한편 이날 결선 문턱을 넘지 못한 안 후보는 "누가 최종 후보가 되든 이재명을 막고 정권교체 이루는 데 제 힘을 바치겠다. 우리 당의 승리가 국민 승리고 역사의 승리"라고 소회를 전했다. 홍 후보는 이날 결선 탈락을 끝으로 정계 은퇴를 선언했다. 홍 후보는 "정치인생을 오늘로서 졸업하게 되어 감사하다. 이제 시민으로, 자연인으로 돌아가서 좀 편하게 살도록 하겠다. 이번 대선에서 제 역할은 여기까지"라고 했다. 앞서 지난 27∼28일 진행된 국민의힘 2차 경선은 당원투표 50%, 국민 여론조사 50%의 룰이 적용됐다. 당원 투표엔 76만5773명 중 39만4명(50.93%)이 참여했고 국민 여론조사는 5개 기관에서 6000명(역선택 방지 적용)을 대상으로 이뤄졌다. 후보들의 순위와 득표율은 공개되지 않았다. 따라서 결선에 진출한 김 후보와 한 후보 중 누가 앞섰는지 알 수 없다. 이날 3차 경선에 진출한 김문수·한동훈 후보 2명은 오는 30일 양자 토론회를 진행한다. 국민의힘 선관위는 다음달 1∼2일 양일 동안 선거인단 투표(50%)·국민 여론조사(50%)를 거친 후 같은달 3일 전당대회에서 최종 1명을 선출할 계획이다. seo00@newspim.com 2025-04-29 15:44
안다쇼핑
Top으로 이동