전체기사 최신뉴스 GAM 라씨로
KYD 디데이
산업 ICT

속보

더보기

업스테이지-NIA 'Open Ko-LLM 리더보드', 2주 만에 100개 모델 돌파

기사입력 : 2023년10월12일 08:53

최종수정 : 2023년10월12일 08:53

[서울=뉴스핌] 양태훈 기자 = 업스테이지와 한국지능정보사회진흥원(NIA)이 구축한 한국어 거대언어모델(LLM) 평가 리더보드에 등록된 모델이 2주 만에 100개를 넘어섰다.

업스테이지는 지난달 27일 개설한 한국어 LLM 평가 리더보드 'Open Ko-LLM 리더보드'가 공개 2주 만에 등록 모델 100개를 돌파하는 성과를 거뒀다고 12일 밝혔다. 

업스테이지가 NIA와 함께 구축한 Open Ko-LLM 리더보드는 누구나 자신이 개발한 한국어 LLM을 등록하고 다른 모델과 경쟁할 수 있는 공개 플랫폼이다. 특히, 한국어의 특성과 문화를 반영한 고품질의 데이터를 자체 구축해 한국어 특화 리더보드로서의 강점을 갖는다.

[사진=업스테이지]

Open Ko-LLM 리더보드는 개시 2주 만에 100여 개의 모델이 등록, 추석 연휴에도 불구하고 가파른 확장세를 보였다. 개인 연구자부터 SKT, 마음AI, 포티투마루(42Maru), 한국전자통신연구원(ETRI), 고려대학교 등 다양한 기업과 학계 조직들이 각축을 벌여, 일 단위로 순위 등락을 거듭하며 이목을 집중시키고 있다.

특히, Open Ko-LLM 리더보드에는 'Ko-Alpaca', 고려대학교 'KULLM(구름)', 'Polyglot-Ko' 등 기존에 유명한 한국어 오픈소스 모델들이 총집결하는 양상으로, 업계 내에서 한국어 특화 LLM 성능 평가의 바로미터로 자리 잡고 있다는 평가다. 특히, 허깅페이스의 아태지역 총괄이 직접 SNS에 업스테이지 리더보드를 언급하는 등 글로벌에서도 관심을 받았다.

앞으로 업스테이지는 월별 리더보드 순위를 결산해 상위권 모델을 조명하는 한편, 해당 모델을 개발한 연구자들을 초빙해 오픈 세미나를 개최하는 등 국내 LLM 생태계 활성화를 위한 다양한 활동들을 전개할 계획이다. 리더보드 참여에 관심 있는 연구자들은 허깅페이스의 Open Ko-LLM 리더보드 스페이스에서 자세한 정보를 확인하고 참여할 수 있다. 

업스테이지는 Open Ko-LLM 리더보드 운영을 통해 한국의 AI 경쟁력 강화를 위한 청사진을 제시한다는 구상이다. 특히, 영어 위주의 기존 평가체제에 더해 한국어 데이터를 기반으로 한 리더보드를 운영함으로써 한국어 LLM 생태계 확장을 위한 밑거름을 다진다. 또한, 다양한 연구자들이 서로의 모델을 자유롭게 공유하고, 공동 연구와 교류를 통해 기술을 더욱 고도화함으로써 국내 오픈소스 LLM 진영의 구심점 역할을 할 것으로 기대를 모으고 있다.

업스테이지 김성훈 대표는 "Open Ko-LLM 리더보드가 2주 만에 100개 모델 돌파라는 뜻깊은 이정표를 세우며 순항하게 되어 기쁘다"라며 "앞으로 업스테이지는 한국어 특화 LLM 성능의 기준점을 제시함으로써 국내 AI 생태계의 성장 및 글로벌 경쟁력 강화에 힘쓸 것"이라고 밝혔다.

dconnect@newspim.com

[뉴스핌 베스트 기사]

사진
헌법재판관들 "공정" 49.3% "불공정" 44.9% [서울=뉴스핌] 이바름 기자 = 윤석열 대통령의 탄핵 심판을 맡은 헌법재판관들의 공정성을 묻는 질문에 '공정하다' 49.3%, '공정하지 않다' 44.9%로 팽팽했다. 종합뉴스통신사 뉴스핌이 미디어리서치에 의뢰해 지난 18~19일 전국 만 18세 이상 남녀 1000명을 대상으로 진행해 20일 발표한 ARS(자동응답 시스템) 조사에서 윤 대통령 탄핵 심판 헌법재판관들의 공정성을 묻는 질문에 49.3%가 '공정하다'고 응답했다. '불공정하다'는 답변은 44.9%로 오차범위 내였다. 5.8%는 '잘모름'이었다. 연령별로 보면 30·40·50대는 '공정'이 우세했고, 만18세~29세·60대·70대 이상은 '불공정' 응답이 많았다. 만18세~29세는 공정하다 44.7%, 불공정하다 47.8%, 잘모름은 7.5%였다. 30대는 공정하다 52.2%, 불공정하다 40.4%, 잘모름 7.3%였다. 40대는 공정하다 61.3%, 불공정하다 34.8%, 잘모름 3.9%였다. 50대는 공정하다 61.3%, 불공정하다 35.2%, 잘모름 3.6%였다. 60대는 공정하다 40.7%, 불공정하다 53.8%, 잘모름 5.5%였다. 70대 이상은 공정하다 31.6%, 불공정하다 60.4%, 잘모름은 8.0%였다. 지역별로는 서울과 경기·인천, 광주·전남·전북은 '공정'으로 기울었다. 대전·충청·세종과 강원·제주, 부산·울산·경남, 대구·경북은 '불공정'하다고 봤다. 서울은 공정하다 52.9%, 불공정하다 41.5%, 잘모름 5.6%였다. 경기·인천은 공정하다 50.8%, 불공정하다 44.0%, 잘모름 5.1%였다. 대전·충청·세종은 공정하다 41.8%, 불공정하다 50.7%, 잘모름은 7.4%였다. 강원·제주는 공정하다 44.6%, 불공정하다 48.6%, 잘모름 6.8%였다. 부산·울산·경남은 공정하다 43.8%, 불공정하다 49.3%, 잘모름 6.9%였다. 대구·경북은 공정하다 37.7%, 불공정하다 56.4%, 잘모름은 5.9%였다. 광주·전남·전북은 공정하다 28.2%, 불공정하다 67.6%, 잘모름 4.2%였다. 지지정당별로는 더불어민주당 지지자들은 88.7%가 공정하다고 답했다. 반면 국민의힘 지지자들은 90.0%가 불공정하다고 응답했다. 조국혁신당 지지자들은 84.4%가 공정하다고 봤다. 개혁신당 지지자들은 공정하다 48.0%, 불공정하다 46.9%로 팽팽했다. 진보당 지지자들은 59.5%가 공정하다, 잘모름 27.0%, 불공정하다는 13.5%였다. 무당층은 51.8%가 공정하다, 32.9%는 불공정하다. 잘모름은 15.3%였다. 성별로는 남성 53.6%는 공정하다, 42.1%는 불공정하다였다. 여성은 45.1%가 공정하다, 47.7%는 불공정하다고 답했다. 박상병 정치평론가는 "우리사회의 마지막 성역이었던 헌법재판관의 양심까지도 공격하는 시대"라며 "대통령 탄핵 인용 또는 기각 이후 다음 정권에도 이러한 갈등은 더 심해질 것으로 예상한다"고 전했다. 김대은 미디어리서치 대표는 "지지층에 따라 서로 상반된 입장이 나오고 있어 향후 헌재에서 대통령 탄핵 기각과 인용중 어떠한 판결을 내리더라도 상당한 혼란이 있을 것으로 보인다"고 말했다. 이번 여론조사는 무선 RDD(무작위 전화 걸기)를 활용한 ARS를 통해 진행됐다. 신뢰 수준은 95%, 표본 오차는 ±3.1%p. 응답률은 7.2%다. 자세한 조사 개요 및 내용은 미디어리서치 홈페이지와 중앙선거여론조사심의위원회 홈페이지를 참조하면 된다. right@newspim.com 2025-02-20 11:00
사진
민주 42.3%·국힘 39.7%…오차 범위 내 역전 [서울=뉴스핌] 한태희 기자 = 더불어민주당의 지지율이 청년층·수도권 등 보수 결집으로 힘을 받았던 국민의힘 지지율을 오차 범위 안에서 역전한 것으로 조사됐다. 20~30대 청년층과 서울·경기·인천 등 수도권에서 집권 여당에 대한 호감도가 줄어든 영향으로 분석된다. 종합뉴스통신사 뉴스핌이 여론조사 전문기관 미디어리서치에 의뢰해 지난 18일부터 19일까지 이틀 동안 전국 만 18세 이상 남녀 1000명을 대상으로 진행해 20일 발표한 자동 응답시스템(ARS) 조사에서 '어느 정당을 지지하거나 약간이라도 더 호감을 가지고 있냐'는 질문에 민주당 지지율은 직전 조사(41.4%) 대비 0.9%포인트(p) 오른 42.3%로 나타났다. 국민의힘 지지율은 직전 조사(43.2%) 대비 3.5%p 하락한 39.7%다. 같은 기간 조국혁신당은 4.5%에서 3.5%로 1%p 떨어졌다. 개혁신당은 1.5%에서 2.3%로 0.8%p 올랐다. 진보당은 0.7%로 지지율에 변동이 없었다. '지지 정당 없음'은 5.9%에서 7.6%로 1.7%p 늘었다. '기타 다른 정당'은 2.3%에서 3.1%로 0.8%p 상승했다. '잘모름'은 0.5%에서 0.6%로 0.1%p 올랐다. [서울=뉴스핌] 한태희 기자 = 2025.02.20 ace@newspim.com 연령별로 보면 만 18~29세와 60대 이상은 국민의힘에 대한 지지도가 높았다. 30~50대는 민주당을 더 지지했다. 만 18~29세 정당 지지도를 보면 국민의힘 39.6%, 민주당 36.9%, 개혁신당 7.9%, 조국혁신당 3.6%, 기타 다른 정당 1.9%, 지지 정당 없음 9.5%, 잘모름 0.6%등이다. 직전 조사와 비교하면 민주당은 35.5%에서 36.9%로 1.4%p 올랐고 국민의힘은 46.3%에서 39.6%로 6.7%p 떨어졌다. 30대는 민주당 41.3%, 국민의힘 35.2%, 개혁신당 2.7%, 조국혁신당 1.4%, 진보당 1.3%, 기타 다른 정당 5.3%, 지지 정당 없음 11.4%, 잘모름 1.3% 등이다. 직전 조사 대비 민주당은 39.9%에서 41.3%로 1.4%p 상승했고 국민의힘은 41.1%에서 35.2%로 5.9%p 하락했다. 40대는 민주당 52.2%, 국민의힘 32.9%, 조국혁신당 3.8%, 개혁신당 2.9%, 진보당 0.5%, 기타 다른 정당 1.1%, 지지 정당 없음 1.1% 등이다. 50대는 민주당 50.2%, 국민의힘 27.8%, 조국혁신당 6.4%, 진보당 1.4%, 기타 다른 정당 4.5%, 지지 정당 없음 9.7% 등이다. 60대는 국민의힘 51%, 민주당 38.4%, 조국혁신당 3.2%, 개혁신당 0.5%, 기타 다른 정당 2.7%, 지지 정당 없음 3.7%, 잘모름 0.5% 등이다. 70대 이상은 국민의힘 54.7%, 민주당 31.5%, 조국혁신당 1.8%, 진보당 1.3%, 개혁신당 0.7%, 기타 다른 정당 3.2%, 지지 정당 없음 5.1%, 잘모름 1.7% 등이다. 지역별로 보면 직전 조사와 비교해 서울과 경기·인천 등 수도권에서 민주당이 국민의힘을 역전했다. 반대로 대전·충청·세종에서는 국민의힘이 민주당보다 앞섰다. 서울은 민주 42.5%, 국민의힘 37.4%, 조국혁신당 3.0%, 개혁신당 2.2%, 진보당 2.0%, 기타 다른 정당 3.5%, 지지 정당 없음 9.5% 등이다. 경기·인천은 민주 43.5%, 국민의힘 36.9%, 조국혁신당 4.1%, 개혁신당 3.2%, 진보당 0.3%, 기타 다른 정당 2.5%, 지지 정당 없음 8.6%, 잘모름 0.9% 등이다. 대전·충청·세종은 국민의힘 45.2%, 민주당 41.7%, 개혁신당 1.9%, 조국혁신당 0.8%, 기타 다른 정당 4.4%, 지지 정당 없음 6.0% 등이다. 강원·제주는 민주당 42%, 국민의힘 31.4%, 개혁신당 7.3%, 조국혁신당 4.3%, 진보당 2.4%, 기타 다른 정당 8.1%, 지지 정당 없음 4.4% 등이다. 부산·울산·경남은 국민의힘 47.1%, 민주당 34.7%, 조국혁신당 4.2%, 개혁신당 2.0%, 기타 다른 정당 2.1%, 지지 정당 없음 8.8%, 잘모름 1.1% 등이다. 대구·경북은 국민의힘 57.3%, 국민의힘 29.1%, 조국혁신당 3.8%, 기타 다른 정당 3.1%, 지지 정당 없음 6.7% 등이다. 광주·전남·전북은 민주당 63.7%, 국민의힘 22.1%, 조국혁신당 3.9%, 진보당 1.9%, 개혁신당 1.0%, 기타 다른 정당 2.3%, 지지 정당 없음 3.1%, 잘모름 2.0% 등이다. 성별로 보면 남성은 민주당 41.1%, 국민의힘 38.7%, 조국혁신당 4.2%, 개혁신당 3.3%, 진보당 1.1%, 기타 다른 정당 2.4%, 지지 정당 없음 8.6%, 잘모름 0.6% 등이다. 여성은 민주당 43.5%, 국민의힘 40.7%, 조국혁신당 2.9%, 개혁신당 1.4%, 진보당 0.4%, 기타 다른 정당 3.8%, 지지 정당 없음 6.7%, 잘모름 0.7% 등이다. 박상병 정치평론가는 "윤석열 대통령에 대한 탄핵이 기각될 수 있다는 예상과 극우 인사 준동, 국민의힘까지 힘을 합치며 (보수) 세력이 뭉치는 밴드왜건 효과로 국민의힘 지지율이 상승했으나 이제는 (보수 결집이) 정점에 이르렀다"며 "윤석열 대통령의 헌법재판소 법정 발언에 반감이 생기고 일부 극우 인사들이 밖에서 탄핵 무효를 외치는 게 중도층에는 꼴불견으로 비춰지고 있다"고 분석했다. 이어 "극우 인사들의 준동이 해도 너무 한다는 생각을 하는 사람이 늘며 국민의힘 지지율이 정점에서 하향 추세를 보이고 있다"고 부연했다. 이번 여론조사는 무선 무작위 전화걸기(RDD)를 활용한 ARS를 통해 진행됐다. 신뢰 수준은 95%, 표본 오차는 ±3.1%p. 응답률은 8.1%다. 자세한 조사 개요 및 내용은 미디어리서치 홈페이지와 중앙선거여론조사심의위원회 홈페이지를 참조하면 된다. ace@newspim.com 2025-02-20 11:00
안다쇼핑
Top으로 이동