전체기사 최신뉴스 GAM 라씨로
KYD 디데이

"사람 눈과 가장 가까운 사진"...확 달라진 갤S24 카메라

기사입력 : 2024년01월23일 11:00

최종수정 : 2024년01월23일 11:00

갤럭시S24 "삼성전자의 비주얼 AI 집약체"
정교해진 NPU와 고품질 데이터 학습으로 발전한 AI 모델
시간의 틈까지 AI가 재구성하는 슬로우모션도 제공

[새너제이(캘리포니아)=뉴스핌] 조수빈 기자 = 사람 눈이 보는 것과 최대한 가깝고 자연스럽고 입체감 있는 사진. 갤럭시S24 카메라에 탑재된 모든 인공지능(AI) 기능을 일컫는 '프로비주얼엔진'이 추구하는 목표다.

현지시간 18일 미국 삼성리서치 아메리카(SRA)에서 조성대 삼성전자 MX사업부 비주얼솔루션팀장(부사장)이 새롭게 공개된 '갤럭시 S24' 시리즈의 카메라 우수성을 소개하는 모습. [사진=삼성전자]

조성대 삼성전자 MX사업부 비주얼 솔루션 팀장(부사장)은 18일(현지시간) 미국 캘리포니아 새너제이(산호세)에서 "갤럭시S24 시리즈에는 시간과 공간의 한계를 넘어 빛을 담아 내기 위한 노력의 결정체가 담겨있다"며 "갤럭시의 비주얼 AI는 삼성전자가 개발한 AI 모델, 데이터, NPU가 핵심적으로 작용한 집약체"라고 설명했다.

조 부사장에 따르면 삼성전자의 비주얼 철학은 캡쳐, 뷰, 에딧, 쉐어 4가지로 정리할 수 있다. 조 부사장은 "최대한 많은 정보를 저장하자는 캡쳐, 즐겁게 보게 해드리자는 포토, 상상하는 것을 자유롭게 만들 수 있는 편한 AI 툴 에딧, 마지막으로 만든 것을 편하게 쉐어할 수 있게 하는 쉐어, 이 4가지를 편한 조합으로 제공하는 것이 목표"라고 말했다.

인스턴트 슬로모, 나이토그래피 등 갤럭시S24 신기능에 적용된 AI 기술들. [자료=삼성전자]

◆112개 AI 모델 사용…13배 정교해진 NPU

삼성전자의 AI 모델은 이미지 인식과 화질 개선이라는 두 가지 주요 목적에 사용된다. 하드웨어인 렌즈가 빛을 포착하고 이를 처리하는 과정에서 AI가 이미지와 영상 속 복잡한 이미지 패턴을 분석해 사람, 사물, 장면을 인식하고 거리를 구분한다. 결과적으로 카메라가 갖고 있는 공간적 한계를 개선시키는 원리다. 어둡거나 흐리고 노이즈가 많은 이미지나 영상도 선명하고 밝게 만들 수 있다.

삼성전자가 모바일에 비주일 AI 모델을 사용하기 시작한 것은 2019년부터다. 갤럭시S10에 처음 비주얼 AI 모델을 사용하면서 이를 효율적으로 구동하기 위해 하드웨어 NPU를 스마트폰에 처음 탑재했다. 2019년 갤럭시 S10에는 AI 모델 4개가 처음 탑재 됐고 갤럭시 S24에서는 정확히 28배가 늘어난 112개의 AI 모델이 사용됐다. NPU 성능 역시 S10이 구동하던 4~5테라오퍼레이션 퍼 세컨드(TOPs) 기준에서 약 13배 정도 향상 됐다.

AI 모델을 정확하고 정교하게 만들기 위해선 고품질 데이터 학습이 뒷받침 되어야 한다. 삼성전자는 이를 위해 4억개가 넘는 고품질 이미지 데이터를 기반으로 고도의 AI 모델을 완성했다고 밝혔다. 고도화된 AI 모델을 빠른시간 내 구동하기 위해 고성능 NPU를 탑재해 나이트로그래피, AI 줌, 고해상도 사진, 슬로모 영상 등에 필요한 방대한 양의 데이터를 신속하게 처리할 수 있게 됐다.

데이터가 늘면서 배터리에 영향이 가지는 않을까. 조 부사장은 "이미지 화질은 동일하게 유지하되 파일 사이즈를 줄일 수 있도록 여러가지 압축 기술을 많이 연구했다"며 "일례로 기존 옵션 중 모션포토는 이전 모델 대비 파일 사이즈를 40% 줄였고 자체 장시간 테스트 결과에서도 전작 대비 동등 이상 수준"이라고 답했다.

전작과의 차별점에도 AI가 영향을 미친다. 조 부사장은 "인스턴트 슬로모와 같은 시간적인 줌의 기능을 제공하기 위해선 보강기술이 필요했다. AI 모델 최적화와 개발을 지속하며 타사와 협력없이 자체 개발한 기술을 탑재했다"고 말했다. 5배줌 카메라는 고해상도 5000만화소의 센서를 탑재하고 있는데 이 화소로 찍은 이후 AI가 사진을 합성해 광학 줌 수준의 1200만화소 10배 줌 사진 결과물을 제공받을 수 있어 사용자가 체감하는 화질이 더 나아진 셈이다.

개선된 카메라 성능은 쿼드텔레 시스템, 나이토그래피, 생성형 편집, 인스턴트 슬로모 등 여러 기능에서 확인할 수 있다.

먼저 쿼드텔레 시스템은 2배, 3배, 5배, 10배에서 광학줌 수준의 이미지를 제공해 2배에서 10배 사이의 어떤 구간에서도 좋은 화질의 사진을 얻을 수 있게 한다. 센서 사이즈를 60% 확대하고, 50MP 텔레 렌즈를 처음 적용해 줌 성능 개선에 기여했다.

현지시간 18일 미국 삼성리서치 아메리카(SRA)에서 조성대 삼성전자 MX사업부 비주얼솔루션팀장(부사장)이 새롭게 공개된 '갤럭시 S24' 시리즈의 카메라 우수성을 소개하는 모습. [사진=삼성전자]

◆시간의 틈까지 AI가 연결…부드러운 슬로우모션 제공

인스턴트 슬로모에는 줌 성능을 개선하면서 카메라가 담는 공간적인 한계를 개선하면서 동영상과 같은 시간의 한계를 넘어서기 위한 노력이 담겼다. 조 부사장은 "2년 전부터 더욱 부드러운 프레임을 지원하는 프레임레이트컨버전(FRC) 기술을 AI 기반으로 개발해왔다"며 "연속으로 찍힌 사진 사이사이를 부드럽게 연결하기 위해 AI가 그 사이 이미지를 생성하게 만든 것이 슬로우모션 영상을 제공하는 '인스턴트 슬로모'의 핵심"이라고 설명했다.

실제 프레임 사이에 3개의 추가 프레임을 생성하는 방식으로, 기존 영상이 30초당프레임(fps)이면 120fps 결과물을, 60fps 이면 240fps의 영상을 생성할 수 있어, 사용자는 보다 부드러운 슬로우 모션 영상을 재생할 수 있게 된다. 사용자가 원하는 시점을 꾹 누르면 슬로우모션이 자동생성되며 별도 편집없이 그대로 저장할 수도 있다. 

이어 노이즈와 블러현상이 줄어든 나이토그래피와 안정적인 손떨림 방지, AI를 사용한 생성형 편집 등도 사용자들이 체감할 수 있는 변화다. 구글 클라우드와 협업해 만들어진 생성형 편집은 사람들이 직접 디바이스 내에서 후처리를 할 수 있는 AI 기능으로 서버 없이도 사용이 가능하다. 갤럭시S24는 인스타그램과 최초로 협업해 카메라 화질을 그대로 유지한 슈퍼 HDR 화질 지원 기기이기도 하다.

한편 후처리 기능에 대한 사용자의 선택 권한도 마련했다. 기본적으로는 후처리값을 적용하지만 카메라 설정에서 보정을 약하게 하거나 아예 끄는 옵션도 제공한다.

하반기 출시될 폴더블 시리즈에 탑재될 카메라 성능에 대해 묻자 "개발 중이라 말씀 드릴 수는 없지만 만족할만한 카메라 성능과 화질을 제공할 수 있을 것 같다"고 짧게 답했다. 폴더블 시리즈 중에서도 갤럭시Z플립은 폴드나 S시리즈에 비해 화질이 아쉽다는 지적을 받았었다. 이에 지난해 출시된 갤럭시Z플립5 등은 AI 기반 이미지 보정 기능(ISP)로 개선된 화질을 공개하기도 했다.

조 부사장은 "매년 카메라 화질에 대한 로드맵을 만들지만 그 로드맵이 매번 틀릴 정도로 기술은 빠르게 발전하고 있다"며 "이번 갤럭시S24 내 화질이 눈으로 보는 것과 근사치에 있고 입체감이 충분히 반영됐다는 평가를 받았으면 좋겠다"고 밝혔다.

beans@newspim.com

[뉴스핌 베스트 기사]

사진
첫 미국출신 교황… 즉위명 '레오 14세' [런던=뉴스핌] 장일현 특파원 = 미국 태생의 로버트 프랜시스 프레보스트(70) 추기경이 8일(현지시간) 제267대 교황에 선출됐다.  가톨릭 역사상 미국인 교황이 탄생하기는 이번이 처음이다. 바티칸 교황청은 새 교황의 즉위명을 '레오 14세'라고 발표했다. 가톨릭에서 '레오'는 라틴어로 '사자'를 뜻한다. 강인함과 용기, 리더십을 상징한다. 8일(현지시간) 교황에 선출된 레오 14세. [사진=로이터 뉴스핌] 레오 14세는 선출 공식 발표 직후인 오후 7시 20분쯤 바티칸시티 성베드로 대성당 2층 '강복의 발코니'에 등장해 광장을 가득 메운 군중들을 향해 손을 흔들었다. 감정이 북받힌 듯 울컥하는 모습을 보이기도 했다.  이탈리아어로 말한 그의 첫 마디는 "평화가 여러분 모두와 함께 하기를(La pace sia con tutti voi)"이었다. 그는 이어 "이 평화의 인사가 여러분의 마음속에 스며들어 여러분의 가족과 모든 사람, 어디에 있든, 모든 민족, 그리고 온 세상에 전해지기를 바란다"고 말했다. 레오 14세는 이날 시스티나 예배당에서 실시된 콘클라베 이틀째 투표에서 교황으로 선출됐다.  전 세계 70개국에서 모인 133명의 추기경들은 전날에 이어 이날도 참석자의 3분의 2 이상의 지지를 얻는 후보를 탄생시키기 위해 투표를 계속했다.  오전에 실시된 두 차례 투표에서는 선출이 무산됐다. 오전 11시 50분쯤 시스티나 예배당 굴뚝에서 검은 연기가 피어올랐다. 추기경단은 오후 4시 투표를 재개했다. 오후 두 차례 투표가 끝나고 결과가 나왔을 것이라는 관측이 제기되던 오후 6시 8분쯤 굴뚝에서 흰 연기가 피어올랐다. 이어 성베드로 대성당에서 장엄한 종소리가 울려 퍼졌다. 오후 7시 10분쯤 선임 부제 도미니크 맘베르티 추기경이 성베드로 대성전 발코니에 나와 "하베무스 파팜(Habemus Papam·우리에게 교황이 있다)"을 외치며 새 교황의 탄생을 알렸다.  1955년 미국 시카고에서 태어난 레오 14세는 1982년 사제로 서품했다. 이후 성직자로서의 경력 기간 대부분을 남미 페루에서 보냈다. 2015~2023년까지 페루 북서부 치클라요에서 주교로 재직했다. 2015년에 페루 시민권을 취득했기 때문에 이중 국적을 갖고 있다.  그는 성 아우구스티노 수도회 소속이다. 이 수도회가 교황을 배출한 것은 이번이 처음이다.  전임 프란치스코 교황은 지난 2023년 그를 추기경으로 임명하고 교황청 주교성 장관에 앉혔다. 신임 주교 선발을 관리·감독하는 자리이다. 그는 프란치스코 교황을 가까이서 보좌하며 그의 개혁정책 추진을 도운 것으로 알려졌다. 그는 신학적으로는 중도 성향으로 분류된다. 프란치스코 교황 시절 갈등이 심했던 보수와 진보 세력 사이에서 균형을 잡을 것이란 기대를 받고 있다. 도널드 트럼프 미국 대통령은 트루스소셜에 "그가 첫번째 미국인 교황이라는 사실을 알게 된 것은 정말로 영광"이라고 밝혔다. 그러면서 "얼마나 흥분되는 일이고, 우리나라에 얼마나 큰 영광인가"라며 "교황 레오 14세를 만나길 고대한다. 매우 의미있는 순간이 될 것"이라고 했다. ihjang67@newspim.com   2025-05-09 04:20
사진
김문수,대선후보 지위 확인 가처분 신청 [서울=뉴스핌] 최수아 인턴기자 = 김문수 국민의힘 대선 후보가 8일 오전 법원에 대통령후보자 지위 인정 가처분 신청서를 제출했다.  김 후보는 이날 KBS에 출연해 "대통령후보 지위 확인 가처분 신청을 서울남부지법에 냈다"고 말했다. 그는 "이미 합법적인, 정당한 절차를 거친 국민의힘 대통령 후보인 제가 있는데 지금 무소속 한덕수 후보하고 빨리 단일화를 하라고 한다"며 이유를 밝혔다. [서울=뉴스핌] 김학선 기자 = 김문수 국민의힘 대선 후보가 8일 서울 중구 프레스센터에서 열린 관훈토론회에 참석해 기조연설을 하고 있다. 2025.05.08 yooksa@newspim.com 국민의힘 지도부는 오는 10일 또는 11일 제6차 전당대회를 소집한다고 공고했다. 당 지도부는 오는 11일 중앙선거관리위원회 대선 후보 등록이 마감되기 전 단일화를 마쳐야 한다는 입장이다. 이날 서울남부지법에서는 국민의힘 책임당원이 신청한 '전당대회 개최 금지 가처분 신청' 심문기일이 진행됐다. 이들은 국민의힘이 김 후보에 한 후보와의 단일화에 대한 압력을 행사하기 위해 전당대회를 연다고 보고 있다.  김 후보는 현재 단일화 문제로 당 지도부와 갈등하고 있다. 김 후보는 이날 서울 중구 프레스센터에서 열린 관훈클럽 토론회에 참가해 "무소속 등록도 안하겠다는, 입당도 안하겠다는 그런 사람을 상대로, 유령과 단일화하라는 이것은 올바른 정당민주주의냐, 저는 알 수 없다"고 비판했다. geulmal@newspim.com 2025-05-08 17:17
안다쇼핑
Top으로 이동