전체기사 최신뉴스 GAM 라씨로
KYD 디데이
산업 ICT

속보

더보기

"사람 눈과 가장 가까운 사진"...확 달라진 갤S24 카메라

기사입력 : 2024년01월23일 11:00

최종수정 : 2024년01월23일 11:00

갤럭시S24 "삼성전자의 비주얼 AI 집약체"
정교해진 NPU와 고품질 데이터 학습으로 발전한 AI 모델
시간의 틈까지 AI가 재구성하는 슬로우모션도 제공

[새너제이(캘리포니아)=뉴스핌] 조수빈 기자 = 사람 눈이 보는 것과 최대한 가깝고 자연스럽고 입체감 있는 사진. 갤럭시S24 카메라에 탑재된 모든 인공지능(AI) 기능을 일컫는 '프로비주얼엔진'이 추구하는 목표다.

현지시간 18일 미국 삼성리서치 아메리카(SRA)에서 조성대 삼성전자 MX사업부 비주얼솔루션팀장(부사장)이 새롭게 공개된 '갤럭시 S24' 시리즈의 카메라 우수성을 소개하는 모습. [사진=삼성전자]

조성대 삼성전자 MX사업부 비주얼 솔루션 팀장(부사장)은 18일(현지시간) 미국 캘리포니아 새너제이(산호세)에서 "갤럭시S24 시리즈에는 시간과 공간의 한계를 넘어 빛을 담아 내기 위한 노력의 결정체가 담겨있다"며 "갤럭시의 비주얼 AI는 삼성전자가 개발한 AI 모델, 데이터, NPU가 핵심적으로 작용한 집약체"라고 설명했다.

조 부사장에 따르면 삼성전자의 비주얼 철학은 캡쳐, 뷰, 에딧, 쉐어 4가지로 정리할 수 있다. 조 부사장은 "최대한 많은 정보를 저장하자는 캡쳐, 즐겁게 보게 해드리자는 포토, 상상하는 것을 자유롭게 만들 수 있는 편한 AI 툴 에딧, 마지막으로 만든 것을 편하게 쉐어할 수 있게 하는 쉐어, 이 4가지를 편한 조합으로 제공하는 것이 목표"라고 말했다.

인스턴트 슬로모, 나이토그래피 등 갤럭시S24 신기능에 적용된 AI 기술들. [자료=삼성전자]

◆112개 AI 모델 사용…13배 정교해진 NPU

삼성전자의 AI 모델은 이미지 인식과 화질 개선이라는 두 가지 주요 목적에 사용된다. 하드웨어인 렌즈가 빛을 포착하고 이를 처리하는 과정에서 AI가 이미지와 영상 속 복잡한 이미지 패턴을 분석해 사람, 사물, 장면을 인식하고 거리를 구분한다. 결과적으로 카메라가 갖고 있는 공간적 한계를 개선시키는 원리다. 어둡거나 흐리고 노이즈가 많은 이미지나 영상도 선명하고 밝게 만들 수 있다.

삼성전자가 모바일에 비주일 AI 모델을 사용하기 시작한 것은 2019년부터다. 갤럭시S10에 처음 비주얼 AI 모델을 사용하면서 이를 효율적으로 구동하기 위해 하드웨어 NPU를 스마트폰에 처음 탑재했다. 2019년 갤럭시 S10에는 AI 모델 4개가 처음 탑재 됐고 갤럭시 S24에서는 정확히 28배가 늘어난 112개의 AI 모델이 사용됐다. NPU 성능 역시 S10이 구동하던 4~5테라오퍼레이션 퍼 세컨드(TOPs) 기준에서 약 13배 정도 향상 됐다.

AI 모델을 정확하고 정교하게 만들기 위해선 고품질 데이터 학습이 뒷받침 되어야 한다. 삼성전자는 이를 위해 4억개가 넘는 고품질 이미지 데이터를 기반으로 고도의 AI 모델을 완성했다고 밝혔다. 고도화된 AI 모델을 빠른시간 내 구동하기 위해 고성능 NPU를 탑재해 나이트로그래피, AI 줌, 고해상도 사진, 슬로모 영상 등에 필요한 방대한 양의 데이터를 신속하게 처리할 수 있게 됐다.

데이터가 늘면서 배터리에 영향이 가지는 않을까. 조 부사장은 "이미지 화질은 동일하게 유지하되 파일 사이즈를 줄일 수 있도록 여러가지 압축 기술을 많이 연구했다"며 "일례로 기존 옵션 중 모션포토는 이전 모델 대비 파일 사이즈를 40% 줄였고 자체 장시간 테스트 결과에서도 전작 대비 동등 이상 수준"이라고 답했다.

전작과의 차별점에도 AI가 영향을 미친다. 조 부사장은 "인스턴트 슬로모와 같은 시간적인 줌의 기능을 제공하기 위해선 보강기술이 필요했다. AI 모델 최적화와 개발을 지속하며 타사와 협력없이 자체 개발한 기술을 탑재했다"고 말했다. 5배줌 카메라는 고해상도 5000만화소의 센서를 탑재하고 있는데 이 화소로 찍은 이후 AI가 사진을 합성해 광학 줌 수준의 1200만화소 10배 줌 사진 결과물을 제공받을 수 있어 사용자가 체감하는 화질이 더 나아진 셈이다.

개선된 카메라 성능은 쿼드텔레 시스템, 나이토그래피, 생성형 편집, 인스턴트 슬로모 등 여러 기능에서 확인할 수 있다.

먼저 쿼드텔레 시스템은 2배, 3배, 5배, 10배에서 광학줌 수준의 이미지를 제공해 2배에서 10배 사이의 어떤 구간에서도 좋은 화질의 사진을 얻을 수 있게 한다. 센서 사이즈를 60% 확대하고, 50MP 텔레 렌즈를 처음 적용해 줌 성능 개선에 기여했다.

현지시간 18일 미국 삼성리서치 아메리카(SRA)에서 조성대 삼성전자 MX사업부 비주얼솔루션팀장(부사장)이 새롭게 공개된 '갤럭시 S24' 시리즈의 카메라 우수성을 소개하는 모습. [사진=삼성전자]

◆시간의 틈까지 AI가 연결…부드러운 슬로우모션 제공

인스턴트 슬로모에는 줌 성능을 개선하면서 카메라가 담는 공간적인 한계를 개선하면서 동영상과 같은 시간의 한계를 넘어서기 위한 노력이 담겼다. 조 부사장은 "2년 전부터 더욱 부드러운 프레임을 지원하는 프레임레이트컨버전(FRC) 기술을 AI 기반으로 개발해왔다"며 "연속으로 찍힌 사진 사이사이를 부드럽게 연결하기 위해 AI가 그 사이 이미지를 생성하게 만든 것이 슬로우모션 영상을 제공하는 '인스턴트 슬로모'의 핵심"이라고 설명했다.

실제 프레임 사이에 3개의 추가 프레임을 생성하는 방식으로, 기존 영상이 30초당프레임(fps)이면 120fps 결과물을, 60fps 이면 240fps의 영상을 생성할 수 있어, 사용자는 보다 부드러운 슬로우 모션 영상을 재생할 수 있게 된다. 사용자가 원하는 시점을 꾹 누르면 슬로우모션이 자동생성되며 별도 편집없이 그대로 저장할 수도 있다. 

이어 노이즈와 블러현상이 줄어든 나이토그래피와 안정적인 손떨림 방지, AI를 사용한 생성형 편집 등도 사용자들이 체감할 수 있는 변화다. 구글 클라우드와 협업해 만들어진 생성형 편집은 사람들이 직접 디바이스 내에서 후처리를 할 수 있는 AI 기능으로 서버 없이도 사용이 가능하다. 갤럭시S24는 인스타그램과 최초로 협업해 카메라 화질을 그대로 유지한 슈퍼 HDR 화질 지원 기기이기도 하다.

한편 후처리 기능에 대한 사용자의 선택 권한도 마련했다. 기본적으로는 후처리값을 적용하지만 카메라 설정에서 보정을 약하게 하거나 아예 끄는 옵션도 제공한다.

하반기 출시될 폴더블 시리즈에 탑재될 카메라 성능에 대해 묻자 "개발 중이라 말씀 드릴 수는 없지만 만족할만한 카메라 성능과 화질을 제공할 수 있을 것 같다"고 짧게 답했다. 폴더블 시리즈 중에서도 갤럭시Z플립은 폴드나 S시리즈에 비해 화질이 아쉽다는 지적을 받았었다. 이에 지난해 출시된 갤럭시Z플립5 등은 AI 기반 이미지 보정 기능(ISP)로 개선된 화질을 공개하기도 했다.

조 부사장은 "매년 카메라 화질에 대한 로드맵을 만들지만 그 로드맵이 매번 틀릴 정도로 기술은 빠르게 발전하고 있다"며 "이번 갤럭시S24 내 화질이 눈으로 보는 것과 근사치에 있고 입체감이 충분히 반영됐다는 평가를 받았으면 좋겠다"고 밝혔다.

beans@newspim.com

CES 2025 참관단 모집

[뉴스핌 베스트 기사]

사진
코스트코, 한국 순이익 67% 미국 본사로 [서울=뉴스핌] 남라다 기자 = 미국계 창고형 할인점 코스트코가 한국에서 거둔 연간 순이익의 60% 이상을 배당금으로 챙긴 것으로 나타났다. 19일 코스트코 한국 법인인 코스트코코리아가 공시한 감사보고서에 따르면 이 회사는 이번 회계연도(2023년 9월∼2024년 8월) 영업이익이 2186억원으로 집계됐다. 지난 회계연도보다 16%가량 늘어난 수준이다. 미국 대형 유통 업체 코스트코 매장 앞에 생필품을 구매하려는 소비자들이 대기 중이다. [사진=로이터 뉴스핌] 같은 기간 매출은 6조5301억원으로 8%가량 증가했고 당기순이익은 58% 급증한 2240억원을 기록했다. 이번 회계연도 코스트코코리아의 배당금은 1500억원으로, 당기순이익의 67%에 이른다. 지난 회계연도에서도 코스트코코리아는 당기순이익(1416억원)을 뛰어넘는 2000억원(배당 성향 141.2%)의 배당금을 지급한 바 있다. 코스트코코리아는 미국 본사인 코스트코 홀세일 인터내셔널이 100% 지분을 보유하고 있다. 서울, 인천, 경기 등 전국에 19개 매장을 운영하고 있으며, 임직원 수는 7351명이다. 미국 본사가 챙기는 배당금은 1000억원이 넘지만, 정작 한국 기여도는 낮은 수준에 불과하다. 이번 회계연도 코스트코코리아의 기부액은 12억2000만원으로 지난 회계연도(11억8000만원)보다 3.5% 증가하는 데 그쳤다. 미국 본사가 가져갈 배당액의 1%에도 못 미치는 액수다. nrd@newspim.com  2024-11-19 14:32
사진
해임이라더니…김용만 김가네 회장 복귀 [서울=뉴스핌] 전미옥 기자 = 성범죄 혐의로 입건된 분식프랜차이즈 '김가네'의 김용만 회장이 대표이사직에서 해임됐다가 다시 복귀했다. 18일 업계에 따르면 김용만 회장은 지난 8일 아들인 김정현 대표를 해임하고 대표이사직에 올랐다. 김 회장의 아내인 박은희씨도 사내이사 등록이 말소됐다. 해당 내용은 지난 11일 등기가 완료됐다. 김가네 김용만 회장. [사진= 뉴스핌DB] 김 회장은 직원 성범죄 사건으로 인해 지난 3월 대표이사 자리에서 물러나고 아들인 김정현씨가 대표이사를 지냈다. 그런데 최근 아들인 김 전 대표와 아내 박씨와 김 회장 간 경영권 분쟁이 촉발되면서 스스로 대표이사직에 다시 오른 것으로 관측된다. 김 회장은 김가네 지분 99%를 소유하고 있다. 이에 대해 김가네 관계자는 "아직 정리가 되지 않아 드릴 말씀이 없다"고 말했다.  앞서 김용만 회장은 지난 7월 준강간치상과 업무상 위력 등에 의한 추행(성폭력처벌법 위반) 혐의로 입건돼 경찰의 조사를 받고 있다. 또한 김 회장은 사내 경리 담당 직원을 통해 회사명의 계좌에서 수억 원 상당을 자신을 대리하는 법무법인 계좌로 빼돌렸다는 횡령 의혹도 받고 있다. 이번 사건은 김 회장과 이혼소송을 진행 중인 아내인 박 씨의 고발로 알려졌다. romeok@newspim.com 2024-11-18 16:59
안다쇼핑
Top으로 이동