본문 바로가기
삼성전자

삼성전자의 아이소셀 센서, 2억 화소 초고해상도, AI 컴퓨팅

by 인사이드필기장 2026. 1. 11.

삼성전자의 카메라 혁명은 단순히 수치적인 경쟁이 아니라, ISOCELL 센서 아키텍처, 2억 화소 초고해상도, 그리고 AI 기반 컴퓨팅 사진 기술이 정교하게 결합한 결과물입니다. 핵심은 독자적인 ISOCELL 기술로, 픽셀 사이에 물리적 장벽을 만들어 색상 간섭을 획기적으로 줄여 마이크로미터 이하 크기에서도 광자가 원래의 순도를 유지하며 포착되도록 합니다. 이러한 구조적 안정성 덕분에 200MP 센서는 해상도 한계를 뛰어넘을 수 있으며, Tetra²픽셀 기술을 활용하여 인접한 16개의 픽셀을 하나의 거대한 2.4μm 픽셀로 묶어 저조도 환경에서 탁월한 광 흡수율을 구현합니다. 하지만 하드웨어는 단지 캔버스일 뿐입니다. 진정한 걸작은 디지털 암실 역할을 하는 딥러닝 NPU인 AI ProVisual Engine에 의해 완성됩니다. 이 엔진은 RAW 데이터를 실시간으로 분석하여 그림자의 노이즈를 제거하고, 손실된 질감을 복원하며, 다이내믹 레인지를 최적화하여 스마트폰 센서를 촬영하기 전에 '생각하는' 컴퓨팅 DSLR를 효과적으로 변모시킵니다.

삼성전자의 아이소셀 센서, 2억 화소 초고해상도, AI 컴퓨팅
삼성전자의 아이소셀 센서, 2억 화소 초고해상도, AI 컴퓨팅

빛의 한계를 뛰어넘는 아이소셀 센서 혁명

ISOCELL 기술의 탄생은 반도체 물리학의 근본적인 역설에서 비롯되었습니다. 시장에서는 더 높은 해상도를 요구했고, 이는 픽셀 크기를 줄여야 한다는 것을 의미했지만, 픽셀 크기가 작아지면 필연적으로 "광자 간섭"이 발생하여 빛이 인접한 센서로 새어 들어가 색상이 탁해지고 노이즈가 유입되는 문제가 있었습니다. 이 혁명 이전에는 후면 조명(BSI)이 업계 표준이었지만, 픽셀 크기가 1.0 마이크로미터(μm) 미만으로 작아지면서 BSI 방식으로는 전자를 지정된 영역 내에 가둘 수 없게 되었습니다. 이에 삼성은 각 픽셀 사이에 물리적인 수직 장벽을 설치하여 포토다이오드를 효과적으로 분리하는 해결책을 제시했습니다. 이 3D 벽은 광자가 빨간색 픽셀에 부딪혀 생성된 전자가 인접한 파란색 픽셀로 이동하는 것을 방지합니다. ISOCELL은 색상 채널을 물리적으로 분리함으로써 기존 BSI 센서에 비해 픽셀이 포화하기 전에 저장할 수 있는 최대 광량인 "풀웰 용량(FWC)"을 약 30% 향상했습니다. 이러한 구조적 변화 덕분에 픽셀 크기가 미세해지더라도 하이라이트가 과다 노출되지 않고 높은 다이내믹 레인지를 포착할 수 있게 되었으며, 이는 이전에는 더 높은 메가픽셀 경쟁을 가로막았던 물리적 한계를 해결한 것입니다. 하지만 물리적 장벽의 도입은 또 다른 문제를 초래했습니다. 벽에 사용된 금속 재질이 초기에는 입사광의 일부를 흡수하여 전체적인 감도를 약간 저하했습니다. 이러한 광학적 손실을 극복하기 위해 "ISOCELL Plus"로, 그리고 그 후 "ISOCELL 2.0"으로의 발전 과정에서는 재료 과학에 있어 근본적인 변화가 필요했습니다. 삼성은 기존의 금속 격자를 후지필름과 공동 개발한 혁신적인 신소재로 교체했는데, 이 소재는 굴절률이 훨씬 낮습니다. 이 소재는 빛을 흡수하는 벽처럼 작용하기보다는 거울처럼 작용합니다. 빛이 특정 각도로 이 장벽에 부딪히면 흡수되거나 산란하는 대신 광다이오드로 반사됩니다. 이 "광학적 밀폐"는 마이크로 렌즈에 들어오는 거의 모든 광자가 센서로 향하도록 하여 빛 감도(민감도)와 색 재현력을 크게 향상합니다. 이러한 소재 혁신은 최신 0.6μm 및 0.5μm 픽셀을 실현할 수 있게 하는 핵심 기술입니다. 이 기술이 없었다면 108MP 또는 200MP와 같은 센서는 실제 저조도 환경에서 사용하기에는 너무 어둡고 노이즈가 심했을 것입니다. 단순한 빛 포착을 넘어, ISOCELL 아키텍처는 "듀얼 픽셀 프로" 기술을 통해 자동 초점 성능을 근본적으로 재정의했습니다. 기존 센서에서 위상 검출 자동 초점(PDAF)은 초점 전용으로 사용되는 "마스크 된" 픽셀에 의존했는데, 이는 해당 픽셀이 이미지 데이터를 캡처하지 않아 센서에 사각지대를 만들었다는 것을 의미합니다. ISOCELL의 듀얼 픽셀 설계는 모든 픽셀을 두 개의 포토다이오드(좌우)로 나누어 센서 전체가 위상 검출 시스템으로 작동할 수 있도록 합니다. "Pro" 버전은 여기서 한 단계 더 나아가 녹색 픽셀을 수직이 아닌 대각선으로 나눴습니다. 이를 통해 센서는 수평축뿐만 아니라 수직축에서도 위상 차이를 감지할 수 있습니다. 이는 표준 PDAF가 블라인드나 수평선과 같은 수평 패턴에 초점을 맞추는 데 어려움을 겪는 경우가 많기 때문에 매우 중요합니다. 픽셀 수준에서 크로스 타입 초점을 지원함으로써 센서는 사람의 눈이 거리를 즉시 삼각측량하는 능력을 모방하여 빠르게 움직이는 피사체도 초점을 맞추는 데 어려움을 겪지 않고, 구형 스마트폰 카메라에서 흔히 볼 수 있는 "초점 찾기" 현상 없이 정확하게 초점을 유지할 수 있습니다.

2억 화소를 구현하는 초고해상도 기술

삼성전자의 200MP 카메라는 기술력의 정점을 보여주는 제품으로, 단순한 수치 적분을 넘어 소프트웨어 알고리즘을 통해 픽셀의 물리적 한계를 극복한 공학적 걸작입니다. 이 기술의 핵심에는 "테트라픽셀"로 알려진 가변 픽셀 비닝 기술이 있습니다. 이 기술의 핵심은 각각 0.6마이크로미터(μm) 크기의 매우 미세한 픽셀 16개를 가로 4개, 세로 4개씩 묶어 하나의 거대한 2.4m 픽셀처럼 작동하게 하는 것입니다. 어둡고 빛이 부족한 환경에서는 이 16개의 픽셀이 협력하여 빛을 받는 영역을 극대화함으로써 밝고 선명한 12.5메가픽셀 이미지를 생성하고, 빛이 충분한 낮에는 각 픽셀이 개별적으로 작동하여 머리카락 한 올까지도 표현할 수 있는 200메가픽셀의 초고해상도 이미지를 구현합니다. 이는 하드웨어의 물리적 크기를 변경하지 않고 상황에 따라 센서의 특성을 180도 바꾸는 '카멜레온' 기술로, 노이즈 감소와 해상도 향상이라는 두 가지 목표를 동시에 달성합니다. 삼성전자는 2억 화소에 달하는 방대한 데이터를 처리하기 위해 딥러닝 기술을 자사의 "리모자이크 알고리즘"에 적용했습니다. 일반적으로 베이어 패턴과 달리, 동일한 컬러 필터를 공유하는 16개의 인접 화소의 구조적 특성 때문에 각 화소를 개별 색상 정보로 재분리하는 과정이 필수적입니다. 과거에는 이러한 과정에서 색상 간섭이나 디테일 손실이 발생했지만, 최신 ISOCELL 센서는 AI 엔진을 통해 실시간으로 패턴을 분석하고 재배열함으로써 색 재현성을 획기적으로 향상했습니다. 또한, 이 고밀도 센서는 "슈퍼 QPD(쿼드 위상 검출)" 자동 초점 기술과 결합하여 2억 화소 전체를 초점 검출에 활용합니다. 하나의 마이크로 렌즈가 인접한 네 개의 화소를 덮어 위상차를 감지함으로써 수평축뿐 아니라 수직축을 따라서도 위상차를 감지하여 저조도 환경에서도 빠르고 정확한 피사체 포착이 가능합니다. 게다가 이 초고해상도 센서는 디지털 줌의 패러다임을 "크롭 줌"으로 바꿉니다. 기존의 디지털 줌은 이미지를 강제로 늘려 화질 저하를 초래하는 반면, 2억 화소 센서는 센서 중앙의 1250만 화소 영역만 잘라내어 1:1 비율로 확대합니다. 이를 통해 2배 또는 4배 줌을 사용하더라도 렌즈를 물리적으로 교체한 것과 동일한 수준의 무손실 이미지 품질을 얻을 수 있습니다. 여기에 스마트 ISO 프로 기술이 더해져 저감도 및 고감도 이미지를 동시에 읽고 합성하여 풍부한 14비트 다이내믹 레인지를 제공함으로써, 명암 대비가 심한 역광 상황에서도 밝은 부분이 과다 노출되거나 어두운 부분이 뭉개지는 것을 방지합니다.

하드웨어를 뛰어넘는 AI 컴퓨팅

광학 공학에서 "컴퓨터 사진술"로의 전환은 삼성전자의 이미지 처리 역사상 가장 중요한 패러다임 전환을 의미하며, 카메라의 역할을 단순히 빛을 수동적으로 기록하는 장치에서 현실을 능동적으로 합성하는 장치를 근본적으로 변화시켰습니다. 이러한 발전은 초당 수조 개의 연산(TOPS)을 수행하기 위해 이미지 신호 처리기(ISP)와 함께 작동하는 전용 실리콘 두뇌인 신경 처리 장치(NPU) 때문에 주도됩니다. 핵심 메커니즘은 "다중 프레임 처리"(MFP) 기술로, 카메라가 셔터를 누르는 순간 다양한 노출 수준으로 최대 20장의 RAW 이미지를 연속 촬영하는 방식입니다. AI 엔진은 손 떨림을 보정하기 위해 프레임을 정렬한 다음 통계 분석을 수행하여 신호와 노이즈를 분리합니다. 여러 프레임의 데이터를 비교함으로써 AI는 프레임마다 변하는 무작위 노이즈 패턴을 식별하고 제거하는 동시에 피사체의 일관된 세부 정보를 강화할 수 있습니다. 이를 통해 초소형 센서를 탑재한 스마트폰이 풀프레임 DSLR의 깨끗하고 노이즈 없는 결과물을 시뮬레이션할 수 있으며, 수학적 방법을 사용하여 광자 산란 노이즈의 물리적 한계를 극복할 수 있습니다. 삼성의 AI는 기본적인 이미지 합성 외에도 "의미론적 분할"이라는 딥러닝 기술을 활용하여 카메라가 단순히 색깔 있는 픽셀 격자를 보는 것이 아니라 장면의 내용을 "이해"할 수 있도록 합니다. "객체 인식 엔진"은 뷰파인더 이미지를 여러 레이어로 분해하여, 이 픽셀 덩어리는 사람 얼굴, 저 픽셀 덩어리는 푸른 하늘, 그리고 저것들은 풀잎이라고 식별합니다. 이렇게 분할된 후, AI는 각 요소에 특화된 로컬 이미지 처리 파이프라인을 적용합니다. 예를 들어, 애완동물의 털에 질감 향상 필터를 적용하여 세부적인 부분을 드러내는 동시에, 사람의 피부에는 매끄러운 알고리즘을 적용하고 배경의 일몰에는 진동을 증폭시킬 수 있습니다. 이러한 선택적 최적화는 AI가 고해상도 심도 맵을 계산하여 합성 보케 효과를 적용하는 "인물 모드"와 같은 기능에 매우 중요합니다. 알고리즘은 피사체의 흩날리는 머리카락과 배경 사이의 미세한 경계를 구분하여 자연스러운 흐림 효과가 적용되도록 해야 하는데, 이는 순수 계산을 통해 밝은 조리개 렌즈의 물리적 원리를 모방하는 과정입니다. 이 기술의 영역은 이제 "생성형 인공지능"으로 확장되어, 카메라가 단순히 존재하는 것을 포착하는 데 그치지 않고 존재해야 할 것을 재구성할 수 있게 되었습니다. "생성형 편집"과 같은 기능을 통해 NPU는 단순한 이미지 향상을 넘어 "인페인팅"과 "아웃페인팅"을 수행합니다. 사용자가 사진 속 피사체를 이동하거나 기울어진 수평선을 회전시키려고 하면 AI는 주변의 질감, 조명, 기하학적 선을 분석하여 공간을 채우는 완전히 새로운 픽셀을 생성합니다. 단순히 주변 픽셀을 복제하는 것이 아니라, 센서에 실제로 포착되지 않았던 맥락에 맞는 배경(벤치 확장, 건물 완성, 잔디밭 확장 등)을 만들어냅니다. 나아가 이러한 생성 능력은 "즉시 슬로우 모션" 기능을 통해 비디오에도 적용되어, AI가 모션 보간을 사용하여 기존 비디오 프레임 사이에 중간 프레임을 생성합니다. 이를 통해 표준 30fps 비디오를 슬로우 모션으로 부드럽게 재생할 수 있으며, 최신 삼성 카메라가 단순한 기계식 셔터가 아니라 확률과 예측을 활용하여 시각적 스토리를 완성하는 창의적인 엔진에 가깝다는 것을 입증합니다.