KR20190021725A - 복수 개의 카메라들 간의 시차를 감소시키는 방법 및 이를 지원하는 전자 장치 - Google Patents
복수 개의 카메라들 간의 시차를 감소시키는 방법 및 이를 지원하는 전자 장치 Download PDFInfo
- Publication number
- KR20190021725A KR20190021725A KR1020170106849A KR20170106849A KR20190021725A KR 20190021725 A KR20190021725 A KR 20190021725A KR 1020170106849 A KR1020170106849 A KR 1020170106849A KR 20170106849 A KR20170106849 A KR 20170106849A KR 20190021725 A KR20190021725 A KR 20190021725A
- Authority
- KR
- South Korea
- Prior art keywords
- camera module
- lens
- processor
- image
- parallax
- Prior art date
Links
- 238000000034 method Methods 0.000 title claims abstract description 59
- 230000008859 change Effects 0.000 claims description 21
- 230000004044 response Effects 0.000 claims description 4
- 238000006243 chemical reaction Methods 0.000 abstract 1
- 238000004891 communication Methods 0.000 description 35
- 230000008569 process Effects 0.000 description 19
- 230000006870 function Effects 0.000 description 17
- 238000012937 correction Methods 0.000 description 11
- 238000012545 processing Methods 0.000 description 10
- 230000007423 decrease Effects 0.000 description 9
- 238000003860 storage Methods 0.000 description 8
- 238000003384 imaging method Methods 0.000 description 6
- 238000006073 displacement reaction Methods 0.000 description 5
- 230000003287 optical effect Effects 0.000 description 5
- 238000004590 computer program Methods 0.000 description 4
- 238000010586 diagram Methods 0.000 description 4
- 230000014509 gene expression Effects 0.000 description 4
- 238000004519 manufacturing process Methods 0.000 description 4
- 238000000926 separation method Methods 0.000 description 3
- 230000000694 effects Effects 0.000 description 2
- 206010044565 Tremor Diseases 0.000 description 1
- 230000001133 acceleration Effects 0.000 description 1
- 230000008901 benefit Effects 0.000 description 1
- 238000004364 calculation method Methods 0.000 description 1
- 230000010267 cellular communication Effects 0.000 description 1
- 230000001413 cellular effect Effects 0.000 description 1
- 239000000470 constituent Substances 0.000 description 1
- 230000003247 decreasing effect Effects 0.000 description 1
- 238000001514 detection method Methods 0.000 description 1
- 238000009826 distribution Methods 0.000 description 1
- 230000009977 dual effect Effects 0.000 description 1
- 238000005516 engineering process Methods 0.000 description 1
- 230000007613 environmental effect Effects 0.000 description 1
- 239000000446 fuel Substances 0.000 description 1
- 238000005286 illumination Methods 0.000 description 1
- 230000010354 integration Effects 0.000 description 1
- 230000003155 kinesthetic effect Effects 0.000 description 1
- 238000010295 mobile communication Methods 0.000 description 1
- 238000012986 modification Methods 0.000 description 1
- 230000004048 modification Effects 0.000 description 1
- 230000002093 peripheral effect Effects 0.000 description 1
- 230000035807 sensation Effects 0.000 description 1
- 230000005236 sound signal Effects 0.000 description 1
- 230000007480 spreading Effects 0.000 description 1
- 238000003892 spreading Methods 0.000 description 1
- 239000003381 stabilizer Substances 0.000 description 1
- 230000000638 stimulation Effects 0.000 description 1
Images
Classifications
-
- H04N5/23296—
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
- H04N23/60—Control of cameras or camera modules
- H04N23/69—Control of means for changing angle of the field of view, e.g. optical zoom objectives or electronic zooming
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
- H04N23/80—Camera processing pipelines; Components thereof
- H04N23/81—Camera processing pipelines; Components thereof for suppressing or minimising disturbance in the image signal generation
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
- H04N23/45—Cameras or camera modules comprising electronic image sensors; Control thereof for generating image signals from two or more image sensors being of different type or operating in different modes, e.g. with a CMOS sensor for moving images in combination with a charge-coupled device [CCD] for still images
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
- H04N23/50—Constructional details
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
- H04N23/50—Constructional details
- H04N23/54—Mounting of pick-up tubes, electronic image sensors, deviation or focusing coils
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
- H04N23/50—Constructional details
- H04N23/55—Optical parts specially adapted for electronic image sensors; Mounting thereof
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
- H04N23/57—Mechanical or electrical details of cameras or camera modules specially adapted for being embedded in other devices
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
- H04N23/60—Control of cameras or camera modules
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
- H04N23/60—Control of cameras or camera modules
- H04N23/63—Control of cameras or camera modules by using electronic viewfinders
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
- H04N23/60—Control of cameras or camera modules
- H04N23/63—Control of cameras or camera modules by using electronic viewfinders
- H04N23/631—Graphical user interfaces [GUI] specially adapted for controlling image capture or setting capture parameters
- H04N23/632—Graphical user interfaces [GUI] specially adapted for controlling image capture or setting capture parameters for displaying or modifying preview images prior to image capturing, e.g. variety of image resolutions or capturing parameters
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
- H04N23/60—Control of cameras or camera modules
- H04N23/68—Control of cameras or camera modules for stable pick-up of the scene, e.g. compensating for camera body vibrations
- H04N23/682—Vibration or motion blur correction
- H04N23/685—Vibration or motion blur correction performed by mechanical compensation
- H04N23/687—Vibration or motion blur correction performed by mechanical compensation by shifting the lens or sensor position
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
- H04N23/90—Arrangement of cameras or camera modules, e.g. multiple cameras in TV studios or sports stadiums
-
- H04N5/2258—
-
- H04N5/23293—
Landscapes
- Engineering & Computer Science (AREA)
- Multimedia (AREA)
- Signal Processing (AREA)
- Human Computer Interaction (AREA)
- Cameras In General (AREA)
- Studio Devices (AREA)
Abstract
전자 장치에 있어서, 디스플레이, 제1 렌즈 및 상기 제1 렌즈를 구동하기 위한 제1 렌즈 구동부를 포함하는 제1 카메라 모듈, 제2 렌즈 및 상기 제2 렌즈를 구동하기 위한 제2 렌즈 구동부를 포함하고, 상기 제1 카메라 모듈과 인접하여 배치된 제2 카메라 모듈, 및 프로세서를 포함하고, 상기 프로세서는 상기 제1 카메라 모듈을 통해 획득된 제1 이미지를 상기 디스플레이를 통해 표시하고, 상기 제1 이미지가 상기 디스플레이를 통해 표시되는 동안에, 상기 제1 카메라 모듈에서 상기 제2 카메라 모듈로의 전환과 관련된 입력을 수신하고, 상기 입력에 적어도 기반하여, 상기 제2 렌즈 구동부를 이용하여 상기 제1 카메라 모듈과의 시차가 감소할 수 있는 방향으로 상기 제2 렌즈를 이동시키고, 상기 입력에 적어도 기반하여, 상기 제2 렌즈가 이동된 상태로 상기 제2 카메라 모듈을 통해 획득된 제2 이미지를 상기 디스플레이를 통해 표시하도록 설정된 전자 장치가 개시된다. 이 외에도 명세서를 통해 파악되는 다양한 실시 예가 가능하다.
Description
본 문서에서 개시되는 실시 예들은, 복수 개의 카메라들 간의 시차를 감소시키는 기술과 관련된다.
최근 들어, 디지털 카메라, 디지털 캠코더, 또는 스마트 폰 등과 같이 카메라를 포함하는 전자 장치의 보급이 활발히 이루어지고 있다. 카메라를 포함하는 전자 장치는 촬영 기능을 제공할 수 있다. 예를 들어, 전자 장치는 카메라로부터 획득한 프리뷰 이미지를 디스플레이에 출력할 수 있으며, 셔터가 동작하면서 카메라로부터 촬영 이미지를 획득할 수 있다.
전자 장치는 듀얼 카메라와 같이 복수 개의 카메라들을 구비할 수 있다. 예를 들어, 전자 장치는 서로 다른 화각을 가지고 일정 거리 이격되어 배치된 복수 개의 카메라들을 구비할 수 있다. 상기 복수 개의 카메라들은 각각 동일한 피사체에 대하여, 서로 다른 화각으로 이미지를 캡쳐할 수 있다. 또한, 전자 장치는 서로 다른 화각으로 캡쳐된 이미지를 이용하여, 하나의 카메라를 통해 캡쳐한 이미지와는 다른 특성 예컨대, 고품질, 광시야각, 또는 입체성 등을 가지는 이미지를 생성할 수 있다.
그러나, 복수 개의 카메라들을 포함하는 전자 장치는 카메라들 간의 이격 거리, 또는 카메라들의 조립 편차(예: 카메라들 간의 상대적 회전 각도, 또는 카메라들 내의 이미지 센서의 중심과 렌즈의 중심이 틀어져 있는 정도) 등에 의해 시차(parallax)가 발생할 수 있다. 시차가 발생하게 되면, 카메라들 간의 전환 시점에서 사용자에게 보여지는 프리뷰 이미지의 시야 예컨대, FOV(field of view) 또는 FOV의 중심이 급격히 변하게 되어, 프리뷰 이미지의 품질이 떨어지고 사용자에게 위화감을 줄 수 있다.
본 문서에서 개시되는 실시 예들은, 복수 개의 카메라들로부터 획득한 이미지들 간의 FOV의 변화 또는 FOV의 중심 위치의 변화가 최대한 억제되도록 카메라들 간의 시차를 감소시키는 방법 및 이를 지원하는 전자 장치를 제공할 수 있다.
본 문서에 개시되는 일 실시 예에 따른 전자 장치는, 디스플레이, 제1 렌즈 및 상기 제1 렌즈를 구동하기 위한 제1 렌즈 구동부를 포함하는 제1 카메라 모듈, 제2 렌즈 및 상기 제2 렌즈를 구동하기 위한 제2 렌즈 구동부를 포함하고, 상기 제1 카메라 모듈과 인접하여 배치된 제2 카메라 모듈, 및 프로세서를 포함하고, 상기 프로세서는 상기 제1 카메라 모듈을 통해 획득된 제1 이미지를 상기 디스플레이를 통해 표시하고, 상기 제1 이미지가 상기 디스플레이를 통해 표시되는 동안에, 상기 제1 카메라 모듈에서 상기 제2 카메라 모듈로의 전환과 관련된 입력을 수신하고, 상기 입력에 적어도 기반하여, 상기 제2 렌즈 구동부를 이용하여 상기 제1 카메라 모듈과의 시차가 감소할 수 있는 방향으로 상기 제2 렌즈를 이동시키고, 상기 입력에 적어도 기반하여, 상기 제2 렌즈가 이동된 상태로 상기 제2 카메라 모듈을 통해 획득된 제2 이미지를 상기 디스플레이를 통해 표시할 수 있다.
또한, 본 문서에 개시되는 일 실시 예에 따른 전자 장치는, 디스플레이, 제1 렌즈 및 상기 제1 렌즈를 구동하기 위한 제1 렌즈 구동부를 포함하는 제1 카메라 모듈, 제2 렌즈 및 상기 제2 렌즈를 구동하기 위한 제2 렌즈 구동부를 포함하는 제2 카메라 모듈, 및 프로세서를 포함하고, 상기 프로세서는 상기 제1 카메라 또는 상기 제2 카메라와 관련된 입력을 수신하고, 상기 입력에 반응하여, 상기 제2 렌즈 구동부를 이용하여 상기 제2 렌즈를 상기 제1 카메라 모듈과의 시차가 감소할 수 있는 방향으로 이동시키고, 상기 제2 렌즈가 이동된 상태로 상기 제2 카메라 모듈을 통해 이미지를 획득하고, 상기 이미지를 상기 디스플레이를 통해 표시할 수 있다.
또한, 본 문서에 개시되는 일 실시 예에 따른 전자 장치는, 디스플레이, 제1 렌즈를 포함하는 제1 카메라 모듈, 제2 렌즈 및 상기 제2 렌즈를 구동하기 위한 렌즈 구동부를 포함하고, 상기 제1 카메라 모듈과 인접하여 배치된 제2 카메라 모듈, 프로세서를 포함하고, 상기 프로세서는 상기 제1 카메라 모듈을 통해 획득된 제1 이미지를 상기 디스플레이를 통해 표시하고, 상기 제1 이미지가 상기 디스플레이를 통해 표시되는 동안에, 상기 제1 카메라 모듈에서 상기 제2 카메라 모듈로의 전환과 관련된 입력을 수신하고, 상기 입력에 적어도 기반하여, 상기 렌즈 구동부를 이용하여 상기 제1 카메라 모듈과의 시차가 감소할 수 있는 방향으로 상기 제2 렌즈를 이동시키고, 상기 입력에 적어도 기반하여, 상기 제2 렌즈가 이동된 상태로 상기 제2 카메라 모듈을 통해 획득된 제2 이미지를 상기 디스플레이를 통해 표시할 수 있다.
본 문서에 개시되는 실시 예들에 따르면, 복수 개의 카메라들 간의 시차를 감소시킴으로써, 카메라들 간의 전환 동작 시에 카메라들로부터 획득되는 이미지들 간의 시야가 급격히 변하는 현상을 방지할 수 있고, 이에 따라 보다 고품질의 이미지를 제공할 수 있다.
이 외에, 본 문서를 통해 직접적 또는 간접적으로 파악되는 다양한 효과들이 제공될 수 있다.
도 1은 일 실시 예에 따른 카메라 어셈블리를 나타낸 도면이다.
도 2는 일 실시 예에 따른 복수 개의 카메라들을 포함하는 전자 장치의 블록도이다.
도 3은 일 실시 예에 따른 복수 개의 카메라들 간의 시차를 설명하기 위한 도면이다.
도 4a는 일 실시 예에 따른 복수 개의 카메라들 간의 시차를 감소시키는 방법을 설명하기 위한 도면이다.
도 4b는 일 실시 예에 따른 복수 개의 카메라들 간의 시차를 감소시키는 다른 방법을 설명하기 위한 도면이다.
도 5는 일 실시 예에 따른 렌즈의 이동을 통해 복수 개의 카메라들 간의 시차를 감소시키는 방법을 설명하기 위한 도면이다.
도 6은 일 실시 예에 따른 이미지 센서의 이동을 통해 복수 개의 카메라들 간의 시차를 감소시키는 방법을 설명하기 위한 도면이다.
도 7은 일 실시 예에 따른 이미지 센서의 크롭(crop) 과정에서 크롭 영역의 중심점 이동을 통해 복수 개의 카메라들 간의 시차를 보상하는 방법을 설명하기 위한 도면이다.
도 8은 다양한 실시 예에 따른 네트워크 환경 내의 전자 장치의 블록도이다.
도면의 설명과 관련하여, 동일 또는 유사한 구성 요소에 대해서는 동일 또는 유사한 참조 부호가 사용될 수 있다.
도 2는 일 실시 예에 따른 복수 개의 카메라들을 포함하는 전자 장치의 블록도이다.
도 3은 일 실시 예에 따른 복수 개의 카메라들 간의 시차를 설명하기 위한 도면이다.
도 4a는 일 실시 예에 따른 복수 개의 카메라들 간의 시차를 감소시키는 방법을 설명하기 위한 도면이다.
도 4b는 일 실시 예에 따른 복수 개의 카메라들 간의 시차를 감소시키는 다른 방법을 설명하기 위한 도면이다.
도 5는 일 실시 예에 따른 렌즈의 이동을 통해 복수 개의 카메라들 간의 시차를 감소시키는 방법을 설명하기 위한 도면이다.
도 6은 일 실시 예에 따른 이미지 센서의 이동을 통해 복수 개의 카메라들 간의 시차를 감소시키는 방법을 설명하기 위한 도면이다.
도 7은 일 실시 예에 따른 이미지 센서의 크롭(crop) 과정에서 크롭 영역의 중심점 이동을 통해 복수 개의 카메라들 간의 시차를 보상하는 방법을 설명하기 위한 도면이다.
도 8은 다양한 실시 예에 따른 네트워크 환경 내의 전자 장치의 블록도이다.
도면의 설명과 관련하여, 동일 또는 유사한 구성 요소에 대해서는 동일 또는 유사한 참조 부호가 사용될 수 있다.
도 1은 일 실시 예에 따른 카메라 어셈블리를 나타낸 도면이다.
도 1을 참조하면, 카메라 어셈블리(100)는 하우징(110), 제1 카메라 모듈(또는 제1 카메라), 및 제2 카메라 모듈(또는 제2 카메라)을 포함할 수 있다. 그러나, 카메라 어셈블리(100)의 구성이 이에 한정되는 것은 아니다. 다양한 실시 예에 따르면, 카메라 어셈블리(100)는 상술한 구성요소들 외에 적어도 하나의 다른 구성요소를 더 포함할 수 있다. 예를 들어, 카메라 어셈블리(100)는 제3 카메라 모듈을 더 포함할 수도 있다.
하우징(110)은 상기 제1 카메라 모듈 및 상기 제2 카메라 모듈을 수용할 수 있다. 일 실시 예에 따르면, 하우징(110)은 전면, 후면, 및 상기 전면과 상기 후면 사이의 공간을 적어도 일부 둘러싸는 측면을 포함할 수 있다. 하우징(110)의 전면은 적어도 하나의 개구부를 포함할 수 있고, 상기 개구부를 통해 상기 제1 카메라 모듈 및 상기 제2 카메라 모듈이 삽입되어 상기 공간 내에 안착될 수 있다.
상기 제1 카메라 모듈은 제1 렌즈 유닛(131), 제1 렌즈 구동부(133a, 133b), 및 제1 이미지 센서(135)를 포함할 수 있다. 제1 렌즈 유닛(131)은 제1 이미지 센서(135)의 상층에 위치하는 경통부일 수 있다. 제1 렌즈 유닛(131)과 제1 이미지 센서(135)는 서로의 광축이 평행하도록 하우징(110)의 개구부에 수용될 수 있다. 일 실시 예에서, 제1 렌즈 유닛(131)은 내부에 이미지 촬영을 위한 적어도 하나의 제1 렌즈를 포함할 수 있다. 상기 적어도 하나의 제1 렌즈는 제1 초점 거리와 제1 화각을 가질 수 있다.
제1 렌즈 구동부(133a, 133b)는 제1 렌즈 유닛(131)을 구동시키기 위한 구조를 가질 수 있다. 일 예로, 제1 렌즈 구동부(133a, 133b)는 손 떨림 방지를 위한 구동력을 제공하는 OIS(optical image stabilizer) 구동부 역할을 할 수 있다. 일 실시 예에 따르면, 제1 렌즈 구동부(133a, 133b)는 적어도 두 쌍의 코일과 자성체를 포함할 수 있다. 두 쌍의 코일과 자성체는 예를 들어, 제1 코일과 제1 자성체로 구성된 제1 액츄에이터(133a) 및 제2 코일과 제2 자성체로 구성된 제2 액츄에이터(133b)를 포함할 수 있다. 제1 액츄에이터(133a)와 제2 액츄에이터(133b)는 서로 수직으로 배치될 수 있다. 각 액츄에이터를 구성하는 코일과 자성체는 서로 대면하도록 위치할 수 있다. 예컨대, 상기 제1 코일과 상기 제1 자성체는 서로 대면되는 위치에 구비될 수 있다. 마찬가지로, 상기 제2 코일과 상기 제2 자성체도 서로 대면되는 위치에 구비될 수 있다.
일 실시 예에 따르면, 상기 제1 코일에 전원이 인가되면, 상기 제1 코일과 상기 제1 자성체 사이에 형성된 전자기력에 의해 제1 렌즈 유닛(131)은 제1 방향(예: y축 방향)으로 이동할 수 있다. 또한, 상기 제2 코일에 전원이 인가되면, 상기 제2 코일 및 상기 제2 자성체 사이에 형성된 전자기력에 의해 제1 렌즈 유닛(131)은 제2 방향(예: x축 방향)으로 이동할 수 있다.
제1 이미지 센서(135)는 도시되지는 않았지만 인쇄회로기판 상에 장착되어, 카메라 어셈블리(100)가 장착된 전자 장치, 예컨대, 디지털 카메라, 이동통신 단말기, 태플릿 PC 등의 이미지 처리 장치와 연결될 수 있다. 상기 인쇄회로기판은 복수의 이미지 센서들(예: 제1 이미지 센서(135) 및 제2 이미지 센서(155))을 모두 실장하도록 하나로 구비될 수도 있고, 복수의 이미지 센서들(예: 제1 이미지 센서(135) 및 제2 이미지 센서(155))을 각기 실장하도록 복수 개가 구비될 수도 있다. 어떤 실시 예에서, 카메라 어셈블리(100)는 제1 이미지 센서(135) 또는 제2 이미지 센서(155) 중 적어도 하나가 상기 제1 방향(예: x축 방향) 또는 상기 제2 방향(예: y축 방향)으로 이동될 수 있도록 하는 구조를 더 포함할 수도 있다.
상기 제2 카메라 모듈은 제2 렌즈 유닛(151), 제2 렌즈 구동부(153a, 153b), 및 제2 이미지 센서(155)를 포함할 수 있다. 제2 렌즈 유닛(151)은 상기 제1 카메라 모듈의 제1 렌즈 유닛(131)과 동일 또는 유사한 구조를 가질 수 있다. 예를 들어, 제2 렌즈 유닛(151)은 제2 이미지 센서(155)의 상층에 위치하는 경통부일 수 있다. 또한, 제2 렌즈 유닛(151)과 제2 이미지 센서(155)는 서로의 광축이 평행하도록 하우징(110)의 개구부에 수용될 수 있다. 일 실시 예에서, 제2 렌즈 유닛(151)은 내부에 이미지 촬영을 위한 적어도 하나의 제2 렌즈를 포함할 수 있다. 상기 적어도 하나의 제2 렌즈는 상기 제1 렌즈의 제1 초점 거리와 상이한 제2 초점 거리 및 상기 제1 렌즈의 제1 화각과 상이한 제2 화각을 가질 수 있다. 예를 들어, 상기 제1 렌즈는 상기 제2 렌즈와 비교하여 상대적으로 넓은 화각(즉, 제1 화각 > 제2 화각)과 상대적으로 짧은 초점 거리(즉, 제1 초점 거리 < 제2 초점 거리)를 갖는 광각 렌즈(wide-angle lens)일 수 있다. 또한, 상기 제2 렌즈는 상기 제1 렌즈에 비해 상대적으로 좁은 화각과 상대적으로 긴 초점 거리를 갖는 망원 렌즈(telephoto lens)일 수 있다.
제2 렌즈 구동부(153a, 153b)는 제2 렌즈 유닛(151)을 구동시키기 위한 구조를 가질 수 있다. 예컨대, 제2 렌즈 구동부(153a, 153b)도 손 떨림 방지를 위한 구동력을 제공하는 OIS 구동부 역할을 할 수 있다. 일 실시 예에 따르면, 제2 렌즈 구동부(153a, 153b)는 적어도 두 쌍의 코일과 자성체를 포함할 수 있다. 두 쌍의 코일과 자성체는 예를 들어, 제3 코일과 제3 자성체로 구성된 제3 액츄에이터(153a) 및 제4 코일과 제4 자성체로 구성된 제4 액츄에이터(153b)를 포함할 수 있다. 제3 액츄에이터(153a)와 제4 액츄에이터(153b)는 서로 수직으로 배치될 수 있다. 각 액츄에이터를 구성하는 코일과 자성체는 서로 대면하도록 위치할 수 있다. 예컨대, 상기 제3 코일과 상기 제3 자성체는 서로 대면되는 위치에 구비될 수 있다. 마찬가지로, 상기 제4 코일과 상기 제4 자성체도 서로 대면되는 위치에 구비될 수 있다.
일 실시 예에 따르면, 상기 제3 코일에 전원이 인가되면, 상기 제3 코일과 상기 제3 자성체 사이에 형성된 전자기력에 의해 제2 렌즈 유닛(151)은 제1 방향(예: y축 방향)으로 이동할 수 있다. 또한, 상기 제4 코일에 전원이 인가되면, 상기 제4 코일 및 상기 제4 자성체 사이에 형성된 전자기력에 의해 제2 렌즈 유닛(151)은 제2 방향(예: x축 방향)으로 이동할 수 있다.
제2 이미지 센서(135)는 제1 이미지 센서(155)와 마찬가지로, 인쇄회로기판 상에 장착될 수 있고, 카메라 어셈블리(100)가 장착된 전자 장치의 이미지 처리 장치와 연결될 수 있다.
일 실시 예에 따르면, 렌즈 구동부(예: 제1 렌즈 구동부(133a, 133b) 또는 제2 렌즈 구동부(153a, 153b))는 상기 렌즈 구동부의 변위, 위치를 감지하는 구동 회로부와 위치 감지 센서를 구비할 수 있다. 일 예로, 상기 위치 감지 센서와 상기 구동 회로부는 각 코일(예: 제1 코일, 제2 코일, 제3 코일, 또는 제4 코일)의 중심에 위치할 수 있다. 상기 위치 감지 센서는 홀 센서(hall sensor)로 구성될 수 있으며, 광학식 또는 기계식 엔코더 등을 이용하여 구성될 수도 있다. 별도의 경로를 통해 제공된 초점 조절 상태 정보와, 상기 위치 감지 센서로부터 검출된 상기 렌즈 구동부의 위치 정보 등을 토대로, 상기 구동 회로부는 손 떨림 방지를 위한 구동 신호를 각 코일에 인가할 수 있다.
도 2는 일 실시 예에 따른 복수 개의 카메라들을 포함하는 전자 장치의 블록도이다.
도 2를 참조하면, 전자 장치(200)는 제1 카메라 모듈(210), 제2 카메라 모듈(230), 프로세서(250), 디스플레이(270), 및 메모리(290)를 포함할 수 있다. 그러나, 전자 장치(200)의 구성이 이에 한정되는 것은 아니다. 다양한 실시 예에 따르면, 전자 장치(200)는 상술한 구성요소 외에 적어도 하나의 다른 구성요소를 더 포함할 수 있다. 예를 들어, 전자 장치(200)는 사용자로부터 입력을 수신하기 위한 입력 장치, 또는 외부 전자 장치와의 통신을 위한 통신 회로를 더 포함할 수도 있다.
일 실시 예에 따르면, 제1 카메라 모듈(210) 및 제2 카메라 모듈(230)은 카메라 어셈블리(예: 도 1의 카메라 어셈블리(100))에 포함된 상태로 전자 장치(200)에 구비될 수 있다.
카메라 모듈(예: 제1 카메라 모듈(210) 및 제2 카메라 모듈(230))은 정지 영상 및 동영상을 촬영할 수 있다. 일 실시 예에 따르면, 상기 카메라 모듈은 촬상 소자를 포함할 수 있다. 상기 촬상 소자는 예를 들어, 피사체의 영상 광을 받아들여 화상으로 결상시키는 렌즈(예: 제1 렌즈(211) 및 제2 렌즈(231)), 상기 렌즈를 통과하는 광의 양을 조절하는 조리개, 상기 렌즈를 통과하는 광에 의해 이미지 센서가 일정 시간 동안 노출되는 기능을 하는 셔터, 상기 렌즈에 결상된 화상을 광신호로서 수광하는 이미지 센서, 및 내부 메모리 중 적어도 하나를 포함할 수 있다. 상기 내부 메모리는 촬영된 이미지를 임시로 저장할 수 있다. 일 실시 예에 따르면, 상기 내부 메모리는 상기 셔터를 조작하기 전, 상기 이미지 센서를 통해 촬상된 이미지를 저장할 수 있다.
상기 카메라 모듈은 일부 구성요소가 유동(또는 이동)될 수 있다. 일 예로, 상기 카메라 모듈에 포함된 렌즈(예: 제1 렌즈(211) 또는 제2 렌즈(231))는 렌즈 구동부(예: 제1 렌즈 구동부(213) 또는 제2 렌즈 구동부(233))에 의해 이동될 수 있다. 제1 렌즈(211)는 제1 렌즈 구동부(213)에 의해 제1 방향 또는 제2 방향으로 이동될 수 있고, 제2 렌즈(231)는 제2 렌즈 구동부(233)에 의해 제1 방향 또는 제2 방향으로 이동될 수 있다. 일 실시 예에 따르면, 제1 렌즈 구동부(213)는 제1 렌즈(211)를 상기 제1 방향으로 이동시키는 제1 액츄에이터(예: 도 1의 제1 액츄에이터(133a)) 및 제1 렌즈(211)를 상기 제2 방향으로 이동시키는 제2 액츄에이터(예: 도 1의 제2 액츄에이터(133b))를 포함할 수 있다. 또 다른 예로, 제2 렌즈 구동부(233)는 제2 렌즈(231)를 상기 제1 방향으로 이동시키는 제3 액츄에이터(예: 도 1의 제3 액츄에이터(153a)) 및 제2 렌즈(211)를 상기 제2 방향으로 이동시키는 제4 액츄에이터(예: 도 1의 제4 액츄에이터(153b))를 포함할 수 있다.
일 실시 예에 따르면, 제1 렌즈(211) 및 제2 렌즈(231)는 서로 다른 초점 거리 및 화각을 가질 수 있다. 일 예로, 제1 렌즈(211)는 제2 렌즈(231)와 비교하여 상대적으로 넓은 화각과 상대적으로 짧은 초점 거리를 갖는 광각 렌즈일 수 있다. 또한, 제2 렌즈(231)는 제1 렌즈(211)에 비해 상대적으로 좁은 화각과 상대적으로 긴 초점 거리를 갖는 망원 렌즈일 수 있다.
프로세서(250)는 중앙처리장치(Central Processing Unit(CPU)), 어플리케이션 프로세서(Application Processor(AP)), 또는 커뮤니케이션 프로세서(Communication Processor(CP)) 중 하나 또는 그 이상을 포함할 수 있다. 프로세서(250)는 예를 들면, 전자 장치(200)의 적어도 하나의 다른 구성요소들의 제어 및/또는 통신에 관한 연산이나 데이터 처리를 실행할 수 있다. 프로세서(250)는, 예를 들면, 운영 체제 또는 응용 프로그램을 구동하여 프로세서(250)에 연결된 다수의 하드웨어 또는 소프트웨어 구성요소들을 제어할 수 있고, 각종 데이터 처리 및 연산을 수행할 수 있다. 프로세서(250)는, 예를 들면, SoC(system on chip)로 구현될 수 있다. 일 실시 예에 따르면, 프로세서(250)는 GPU(graphic processing unit) 및/또는 이미지 신호 프로세서(image signal processor)를 더 포함할 수 있다.
프로세서(250)는 카메라 모듈(예: 제1 카메라 모듈(210) 및 제2 카메라 모듈(230))에 포함된 렌즈(예: 제1 렌즈(211) 및 제2 렌즈(231)), 렌즈 구동부(예: 제1 렌즈 구동부(213) 및 제2 렌즈 구동부(233)), 조리개, 이미지 센서, 및 셔터 등과 전기적으로 연결되어 상기 카메라 모듈과 관련된 기능을 제어할 수 있다. 프로세서(250)는 예컨대, 자동 초점, 자동 노출, 커스텀 화이트 밸런스, 줌 인, 줌 아웃, 촬영, 연속 촬영, 타이머 촬영, 플래시 온/오프, 또는 필터 등의 기능을 제어할 수 있다. 또 다른 예로, 프로세서(250)는 촬영된 이미지를 상기 내부 메모리 또는 메모리(290)에 저장할 수 있으며, 촬영된 이미지를 디스플레이(270)에 출력할 수 있다. 일 예로, 프로세서(250)는 상기 내부 메모리에 저장된 이미지를 프리뷰 또는 라이브뷰 등으로 제공할 수 있다. 어떤 실시 예에서, 프로세서(250)는 상기 셔터가 조작되어 촬상된 촬영 이미지를 상기 내부 메모리에 저장하고, 지정된 사용자 입력이 발생하거나 또는 설정된 정보에 의해 상기 촬영 이미지를 메모리(290)에 저장할 수 있다.
일 실시 예에 따르면, 프로세서(250)는 결정된 줌 배율에 기반하여 디스플레이(270)에 출력할 이미지를 제1 카메라 모듈(210)을 통해 획득한 제1 이미지 또는 제2 카메라 모듈(230)을 통해 획득한 제2 이미지 중 어느 하나, 또는 두 이미지(제1 이미지 및 제2 이미지)를 기반으로 제공할지를 결정할 수 있다. 일 예로, 프로세서(250)는 줌 배율이 고배율로 결정되면, 상대적으로 긴 초점 거리를 갖는 제2 렌즈(231)를 포함하는 제2 카메라 모듈(230)을 통해 획득된 상기 제2 이미지를 기반으로 디스플레이(270)에 출력할 이미지를 결정할 수 있다. 다른 예로, 프로세서(250)는 줌 배율이 저배율로 결정되면, 상대적으로 짧은 초점 거리를 갖는 제1 렌즈(211)를 포함하는 제1 카메라 모듈(210)을 통해 획득된 상기 제1 이미지를 기반으로 디스플레이(270)에 출력할 이미지를 결정할 수 있다. 또 다른 예로, 프로세서(250)는 줌 배율이 상기 고배율에서 상기 저배율로 변경되는 과정, 또는 상기 저배율에서 상기 고배율로 변경되는 과정 중 적어도 일부에서는 상기 제1 이미지 및 상기 제2 이미지를 기반으로 디스플레이(270)에 출력할 이미지를 결정할 수 있다.
일 실시 예에 따르면, 프로세서(250)는 결정된 줌 배율에 적어도 기반하여 각 이미지 속성(예: 이미지 사이즈 등)을 변경할 수 있다. 일 실시 예에 따르면, 프로세서(250)는 결정된 줌 배율에 기반하여 각 카메라 모듈의 전원 사양(예: on/off/sleep 모드 등)을 제어할 수 있다.
일 실시 예에 따르면, 프로세서(250)는 제1 카메라 모듈(210) 및 제2 카메라 모듈(230) 각각의 화질(예: 색감, 밝기, 초점 등)이 동일 또는 유사해지도록 제1 카메라 모듈(210) 및 제2 카메라 모듈(230) 중 적어도 하나의 설정을 변경할 수 있다. 일 예로, 프로세서(250)는 어느 하나의 카메라 모듈(예: 제1 카메라 모듈(210))의 화질을 기준으로 하여 다른 카메라 모듈(예: 제2 카메라 모듈(230))의 화질을 변경할 수 있다. 또 다른 예로, 프로세서(250)는 모든 카메라 모듈(예: 제1 카메라 모듈(210) 및 제2 카메라 모듈(230))의 화질을 변경하여 각각의 화질이 서로 동일 또는 유사해지도록 할 수 있다.
일 실시 예에 따르면, 프로세서(250)는 사용자의 손 떨림 정보에 반응하여 렌즈 구동부(예: 제1 렌즈 구동부(213) 또는 제2 렌즈 구동부(233))를 구동시켜 렌즈(예: 제1 렌즈(211) 또는 제2 렌즈(231))의 위치를 변경함으로써, 카메라 모듈(예: 제1 카메라 모듈(210) 또는 제2 카메라 모듈(230))에서 생성하는 이미지에 흔들림(예: 상 흐림)이 발생하는 것을 방지할 수 있다. 또한, 프로세서(250)는 카메라 모듈의 전환(예: 제1 카메라 모듈(210)에서 제2 카메라 모듈(230)로의 전환, 또는 제2 카메라 모듈(230)에서 제1 카메라 모듈(210)의 전환) 시에 발생할 수 있는 이미지들(예: 제1 카메라 모듈(210)을 통해 획득한 제1 이미지, 및 제2 카메라 모듈(230)을 통해 획득한 제2 이미지) 간의 FOV의 변화 또는 FOV의 중심 위치의 변화가 최대한 억제되도록 각 카메라의 구성요소들을 제어할 수 있다. 일 예로, 프로세서(250)는 제1 렌즈(211) 또는 제2 렌즈(231) 중 적어도 하나의 위치를 이동시킬 수 있다. 다른 예로, 프로세서(250)는 제1 카메라 모듈(210)에 포함된 제1 이미지 센서 또는 제2 카메라 모듈(230)에 포함된 제2 이미지 센서 중 적어도 하나의 위치를 이동시킬 수 있다. 또 다른 예로, 프로세서(250)는 제1 카메라 모듈(210)의 제1 이미지 센서 또는 제2 카메라 모듈(230)의 제2 이미지 센서 중 적어도 하나의 크롭 과정에서, 이미지 센서의 크롭 영역의 중심점을 이동시켜 해당 이미지의 일부를 추출(또는 선택)할 수 있다.
일 실시 예에 따르면, 프로세서(250)는 상기 제1 이미지 센서에 포함된 복수의 픽셀들 중 상기 카메라들 간의 시차가 감소할 수 있는 방향에 대응하는 하나 이상의 픽셀들을 선택하고, 선택된 하나 이상의 픽셀들을 이용하여 상기 제1 이미지를 획득할 수 있다. 즉, 프로세서(250)는 상기 제1 이미지 센서의 일부 영역(상기 선택된 하나 이상의 픽셀들)에 대해서만 리드아웃(readout)하여 상기 제1 이미지를 획득할 수 있다. 마찬가지로 프로세서(250)는 상기 제2 이미지 센서에 포함된 복수의 픽셀들 중 상기 카메라들 간의 시차가 감소할 수 있는 방향에 대응하는 하나 이상의 픽셀들을 선택하고, 선택된 하나 이상의 픽셀들을 이용하여 상기 제2 이미지를 획득할 수 있다. 즉, 프로세서(250)는 상기 제2 이미지 센서의 일부 영역에 대해서만 리드아웃하여 상기 제2 이미지를 획득할 수 있다.
일 실시 예에 따르면, 프로세서(250)는 상기 크롭 영역(예: 상기 선택된 하나 이상의 픽셀들)의 중심점이 이미지 센서(예: 상기 제1 이미지 센서 또는 상기 제2 이미지 센서)의 중앙 영역, 상단 영역, 하단 영역, 좌측 영역, 우측 영역, 좌상단 영역, 좌하단 영역, 우상단 영역, 또는 우하단 영역 등의 지정된 복수 개의 영역들 중 어느 하나의 중심점이 되도록 설정할 수 있으며, 상기 중심점과 관련된 설정 정보를 메모리(290)에 저장할 수 있다.
일 실시 예에 따르면, 프로세서(250)는 카메라 모듈(예: 제1 카메라 모듈(210) 또는 제2 카메라 모듈(230))을 통해 획득된 이미지 중 카메라들 간의 시차가 감소할 수 있는 방향에 대응하는 적어도 일부 영역을 상기 제1 이미지(또는 상기 제2 이미지)로 선택할 수 있다. 일 예로, 프로세서(250)는 상기 카메라 모듈의 이미지 센서에 포함된 전체 픽셀들을 리드아웃하고, 리드아웃한 정보(또는 신호값)를 기반으로 로(raw) 이미지를 생성할 수 있다. 상기 로 이미지는 예를 들어, 레이어(layer) 및 각 픽셀의 데이터(예: YUV 값)를 포함할 수 있다. 이 후, 프로세서(250)는 카메라들 간의 시차가 감소할 수 있는 방향에 대응하도록 상기 로 이미지에서 적어도 일부 영역을 선택하고, 선택된 영역을 이용해 jpeg 등과 같은 이미지 형식의 상기 제1 이미지(또는 상기 제2 이미지)를 생성할 수 있다. 또 다른 예로, 프로세서(250)는 상기 카메라 모듈의 이미지 센서에 포함된 전체 픽셀들을 리드아웃하고, 리드아웃한 정보(또는 신호값) 중 적어도 일부를 기반으로 로 이미지를 생성할 수 있다. 상기 리드아웃한 정보 중 적어도 일부는 예를 들어, 카메라들 간의 시차가 감소할 수 있는 방향에 대응하도록 선택된 영역에 대한 정보일 수 있다. 이 후, 프로세서(250)는 상기 선택된 영역에 대응되는 로 이미지를 이용해 jpeg 등과 같은 이미지 형식의 상기 제1 이미지(또는 상기 제2 이미지)를 생성할 수 있다.
일 실시 예에 따르면, 프로세서(250)는 렌즈 구동부(예: 제1 렌즈 구동부(213) 또는 제2 렌즈 구동부(233))를 이용해 제1 카메라 모듈(210) 및 제2 카메라 모듈(230) 간의 시차를 보정할 수 있다. 또한, 프로세서(250)는 제1 카메라 모듈(210)의 제1 이미지 센서 또는 제2 카메라 모듈(230)의 제2 이미지 센서 중 적어도 하나의 크롭 과정에서, 크롭 영역의 중심점을 제1 카메라 모듈(210) 및 제2 카메라 모듈(230)의 시차가 감소되는 방향으로 이동시켜 해당 이미지의 일부를 추출(또는 선택)할 수 있다. 또 다른 예로, 프로세서(250)는 상술한 두 가지의 방법 중 어느 하나의 방법 또는 두 가지의 방법을 조합하여 제1 카메라 모듈(210) 및 제2 카메라 모듈(230) 간의 시차를 보정할 수도 있다. 예컨대, 프로세서(250)는 렌즈 구동부(예: 제1 렌즈 구동부(213) 또는 제2 렌즈 구동부(233))를 이용해 제1 카메라 모듈(210) 및 제2 카메라 모듈(230) 간의 시차를 보정한 후, 1 카메라 모듈(210)의 제1 이미지 센서 또는 제2 카메라 모듈(230)의 제2 이미지 센서 중 적어도 하나의 크롭 과정에서, 크롭 영역의 중심점을 제1 카메라 모듈(210) 및 제2 카메라 모듈(230)의 시차가 감소되는 방향으로 이동시켜 해당 이미지의 일부를 추출(또는 선택)함으로써, 상기 카메라들 간의 시차 보정을 보완할 수 있다.
디스플레이(270)는 사용자에게 각종 컨텐츠(예: 텍스트, 이미지, 비디오, 아이콘, 또는 심볼 등)를 표시할 수 있다. 일 실시 예에 따르면, 디스플레이(270)는 상기 카메라 모듈을 통해 촬영된 이미지를 출력할 수 있다. 예컨대, 디스플레이(270)는 상기 카메라 모듈에 포함된 내부 메모리에 저장된 이미지, 또는 전자 장치(200)의 메모리(290)에 저장된 이미지를 출력할 수 있다. 일 실시 예에 따르면, 디스플레이(270)는 터치 스크린을 포함할 수 있으며, 전자 펜 또는 사용자의 신체 일부를 이용한 터치, 제스처, 근접, 또는 호버링(hovering) 입력을 수신할 수 있다.
메모리(290)는 전자 장치(200)의 적어도 하나의 다른 구성요소에 관계된 명령 또는 데이터를 저장할 수 있다. 일 실시 예에 따르면, 메모리(290)는 소프트웨어 및/또는 프로그램을 저장할 수 있다. 예를 들어, 메모리(290)는 제1 카메라 모듈(210) 또는 제2 카메라 모듈(230)을 이용하여 촬영을 지원하는 어플리케이션(예: 카메라 어플리케이션) 등을 저장할 수 있다. 다른 예로, 메모리(290)는 제1 카메라 모듈(210) 또는 제2 카메라 모듈(230)을 통해 촬영된 이미지를 저장할 수 있다. 메모리(290)는, 예를 들어, 휘발성 및/또는 비휘발성 메모리를 포함할 수 있다.
일 실시 예에 따르면, 메모리(290)는 제1 카메라 모듈(210) 및 제2 카메라 모듈(230)의 조립 편차에 의한 카메라 모듈들 간의 시차를 보정하기 위한 정보를 저장할 수 있다. 이 경우, 프로세서(250)는 제1 카메라 모듈(210) 또는 제2 카메라 모듈(230)의 실행 시에, 메모리(290)에 저장된 상기 정보를 이용하여, 제1 카메라 모듈(210) 및 제2 카메라 모듈(230) 간의 시차를 보정할 수 있다. 즉, 프로세서(250)는 조립 편차로 인한 제1 카메라 모듈(210) 및 제2 카메라 모듈(230) 간의 시차를 보정한 상태에서, 제1 카메라 모듈(210) 또는 제2 카메라 모듈(230)을 실행시킬 수 있다.
일 실시 예에 따르면, 제1 카메라 모듈(210) 및 제2 카메라 모듈(230)의 조립 편차에 의한 카메라 모듈들 간의 시차는 카메라 어셈블리(예: 카메라 어셈블리(100))의 제작 공정 중 카메라 캘리브레이션(calibration) 공정 중에 측정될 수 있으며, 시차를 보정하기 위한 정보(예: 캘리브레이션 값)가 메모리(290)(예: FROM)에 저장될 수 있다. 이 경우, 전자 장치(200)는 카메라 모듈(예: 제1 카메라 모듈(210) 및 제2 카메라 모듈(230))마다 렌즈 구동부의 구동 특성이 다르기 때문에 메모리(290)에 저장된 캘리브레이션 값을 이용하여 카메라 모듈 별로 특성에 맞게 시차 보정을 할 수 있다.
일 실시 예에 따르면, 제1 카메라 모듈(210) 및 제2 카메라 모듈(230)의 조립 편차에 의한 카메라 모듈들 간의 시차는 카메라 어셈블리(예: 카메라 어셈블리(100))의 제작 공정 중에 보정될 수 있다. 일 예로, 조립 편차에 의한 카메라 모듈들 간의 시차는 카메라 캘리브레이션 공정을 통해 측정된 캘리브레이션 값을 이용해 카메라 캘리브레이션 공정 후에 보정될 수 있고, 이 경우 카메라들 간의 시차 보정 후 카메라 캘리브레이션 공정이 재수행될 수 있다.
일 실시 예에 따르면, 프로세서(250)는 제1 카메라 모듈(210) 및 제2 카메라 모듈(230) 각각에 포함된 제1 렌즈 구동부(213) 및 제2 렌즈 구동부(233)가 손 떨림 방지를 위한 OIS 구동부 역할을 수행함에 있어서, 제1 카메라 모듈(210) 및 제2 카메라 모듈(230) 간의 시차가 보정된 상태에서 수행될 수 있도록 할 수 있다. 예컨대, 프로세서(250)는 제1 렌즈 구동부(213) 및 제2 렌즈 구동부(233) 중 적어도 하나를 이용하여 제1 카메라 모듈(210) 및 제2 카메라 모듈(230) 간의 시차를 보정하고, 시차가 보정된 상태에서의 제1 렌즈 구동부(213) 및 제2 렌즈 구동부(233)의 구동 상태를 OIS 구동의 초기 상태로 설정할 수 있다. 즉, 제1 렌즈 구동부(213) 및 제2 렌즈 구동부(233)를 이용한 OIS의 동작 중심점(또는 기준점) 또는 초기 위치가 시차가 보정된 상태에서 설정될 수 있다.
상술한 바와 같이, 다양한 실시 예에 따르면, 전자 장치(예: 전자 장치(200))는 디스플레이(예: 디스플레이(270)), 제1 렌즈(예: 제1 렌즈(211)) 및 상기 제1 렌즈를 구동하기 위한 제1 렌즈 구동부(예: 제1 렌즈 구동부(213))를 포함하는 제1 카메라 모듈(예: 제1 카메라 모듈(210)), 제2 렌즈(예: 제2 렌즈(231)) 및 상기 제2 렌즈를 구동하기 위한 제2 렌즈 구동부(예: 제2 렌즈 구동부(233))를 포함하고, 상기 제1 카메라 모듈과 인접하여 배치된 제2 카메라 모듈(예: 제2 카메라 모듈(230)), 및 프로세서(예: 프로세서(250))를 포함하고, 상기 프로세서는 상기 제1 카메라 모듈을 통해 획득된 제1 이미지를 상기 디스플레이를 통해 표시하고, 상기 제1 이미지가 상기 디스플레이를 통해 표시되는 동안에, 상기 제1 카메라 모듈에서 상기 제2 카메라 모듈로의 전환과 관련된 입력을 수신하고, 상기 입력에 적어도 기반하여, 상기 제2 렌즈 구동부를 이용하여 상기 제1 카메라 모듈과의 시차가 감소할 수 있는 방향으로 상기 제2 렌즈를 이동시키고, 상기 입력에 적어도 기반하여, 상기 제2 렌즈가 이동된 상태로 상기 제2 카메라 모듈을 통해 획득된 제2 이미지를 상기 디스플레이를 통해 표시하도록 설정될 수 있다.
다양한 실시 예에 따르면, 상기 프로세서는, 상기 입력에 적어도 기반하여, 상기 제1 렌즈 구동부를 이용하여 상기 제2 카메라 모듈과의 시차가 감소할 수 있는 방향으로 상기 제1 렌즈를 이동시키도록 설정될 수 있다.
다양한 실시 예에 따르면, 상기 프로세서는, 상기 입력의 적어도 일부로, 지정된 배율 이상의 줌 입력, 또는 상기 제1 카메라 모듈과 상기 제2 카메라 모듈 간의 전환이 가능한 기능으로 진입하는 입력을 수신하도록 설정될 수 있다.
다양한 실시 예에 따르면, 상기 제1 렌즈는 제1 화각 및 제1 초점 거리를 가지고, 상기 제2 렌즈는 상기 제1 화각보다 좁은 제2 화각 및 상기 제1 초점 거리보다 긴 제2 초점 거리를 가질 수 있다.
다양한 실시 예에 따르면, 상기 방향은, 상기 제2 화각의 중심축 방향이 상기 제1 화각의 중심축 방향과 평행해지도록 하는 제1 방향, 또는 상기 제2 화각의 중심축 방향이 상기 제1 화각의 중심축 방향에 위치한 특정 피사체를 향하도록 하는 제2 방향일 수 있다.
다양한 실시 예에 따르면, 상기 프로세서는, 상기 제2 카메라 모듈의 이미지 센서에 포함된 복수의 픽셀들 중 상기 제1 카메라 모듈과의 시차가 감소할 수 있는 방향에 대응하는 하나 이상의 픽셀들을 선택하고, 상기 선택된 하나 이상의 픽셀들을 이용하여 상기 제 2 이미지를 획득하도록 설정될 수 있다.
다양한 실시 예에 따르면, 상기 프로세서는, 상기 제1 카메라 모듈의 이미지 센서에 포함된 복수의 픽셀들 중 상기 제2 카메라 모듈과의 시차가 감소할 수 있는 방향에 대응하는 하나 이상의 픽셀들을 선택하고, 상기 선택된 하나 이상의 픽셀들을 이용하여 상기 제1 이미지를 획득하도록 설정될 수 있다.
다양한 실시 예에 따르면, 상기 프로세서는, 상기 제2 카메라 모듈을 통해 획득된 이미지 중 상기 제1 카메라 모듈과의 시차가 감소할 수 있는 방향에 대응하는 적어도 일부 영역을 상기 제 2 이미지로 선택하도록 설정될 수 있다.
다양한 실시 예에 따르면, 상기 프로세서는, 상기 제1 카메라 모듈을 통해 획득된 이미지 중 상기 제2 카메라 모듈과의 시차가 감소할 수 있는 방향에 대응하는 적어도 일부 영역을 상기 제1 이미지로 선택하도록 설정될 수 있다.
다양한 실시 예에 따르면, 상기 전자 장치는 센서를 더 포함하고, 상기 프로세서는, 상기 센서를 통해 측정된 온도 또는 온도 변화량에 기초하여, 상기 제1 렌즈를 이동시키는 이동량 또는 상기 제2 렌즈를 이동시키는 이동량을 결정하도록 설정될 수 있다.
상술한 바와 같이, 다양한 실시 예에 따르면, 전자 장치(예: 전자 장치(200))는 디스플레이(예: 디스플레이(270)), 제1 렌즈(예: 제1 렌즈(211)) 및 상기 제1 렌즈를 구동하기 위한 제1 렌즈 구동부(예: 제1 렌즈 구동부(213))를 포함하는 제1 카메라 모듈(예: 제1 카메라 모듈(210)), 제2 렌즈(예: 제2 렌즈(231)) 및 상기 제2 렌즈를 구동하기 위한 제2 렌즈 구동부(예: 제2 렌즈 구동부(233))를 포함하는 제2 카메라 모듈(예: 제2 카메라 모듈(230)), 및 프로세서(예: 프로세서(250))를 포함하고, 상기 프로세서는 상기 제1 카메라 또는 상기 제2 카메라와 관련된 입력을 수신하고, 상기 입력에 반응하여, 상기 제2 렌즈 구동부를 이용하여 상기 제2 렌즈를 상기 제1 카메라 모듈과의 시차가 감소할 수 있는 방향으로 이동시키고, 상기 제2 렌즈가 이동된 상태로 상기 제2 카메라 모듈을 통해 이미지를 획득하고, 상기 이미지를 상기 디스플레이를 통해 표시하도록 설정될 수 있다.
다양한 실시 예에 따르면, 상기 프로세서는, 상기 입력에 반응하여, 상기 제1 렌즈 구동부를 이용하여 상기 제1 렌즈를 상기 제2 카메라 모듈과의 시차가 감소할 수 있는 방향으로 이동시키도록 설정될 수 있다.
다양한 실시 예에 따르면, 상기 프로세서는, 상기 입력의 적어도 일부로, 상기 제1 카메라 모듈 및 상기 제2 카메라 모듈 중 적어도 하나를 실행시키는 입력, 또는 상기 제1 카메라 모듈과 상기 제2 카메라 모듈 간의 전환이 가능한 기능으로 진입하는 입력을 수신하도록 설정될 수 있다.
다양한 실시 예에 따르면, 상기 프로세서는, 상기 제2 카메라 모듈의 이미지 센서에 포함된 복수의 픽셀들 중 상기 제1 카메라 모듈과의 시차가 감소할 수 있는 방향에 대응하는 하나 이상의 픽셀들을 선택하고, 상기 선택된 하나 이상의 픽셀들을 이용하여 상기 이미지를 획득하도록 설정될 수 있다.
상술한 바와 같이, 다양한 실시 예에 따르면, 전자 장치(예: 전자 장치(200))는 디스플레이(예: 디스플레이(270)), 제1 렌즈(예: 제1 렌즈(211))를 포함하는 제1 카메라 모듈(예: 제1 카메라 모듈(210)), 제2 렌즈(예: 제2 렌즈(231)) 및 상기 제2 렌즈를 구동하기 위한 렌즈 구동부(예: 제2 렌즈 구동부(233))를 포함하고, 상기 제1 카메라 모듈과 인접하여 배치된 제2 카메라 모듈(예: 제2 카메라 모듈(230)), 프로세서(예: 프로세서(250))를 포함하고, 상기 프로세서는 상기 제1 카메라 모듈을 통해 획득된 제1 이미지를 상기 디스플레이를 통해 표시하고, 상기 제1 이미지가 상기 디스플레이를 통해 표시되는 동안에, 상기 제1 카메라 모듈에서 상기 제2 카메라 모듈로의 전환과 관련된 입력을 수신하고, 상기 입력에 적어도 기반하여, 상기 렌즈 구동부를 이용하여 상기 제1 카메라 모듈과의 시차가 감소할 수 있는 방향으로 상기 제2 렌즈를 이동시키고, 상기 입력에 적어도 기반하여, 상기 제2 렌즈가 이동된 상태로 상기 제2 카메라 모듈을 통해 획득된 제2 이미지를 상기 디스플레이를 통해 표시하도록 설정될 수 있다.
다양한 실시 예에 따르면, 상기 프로세서는, 상기 제2 카메라 모듈의 이미지 센서에 포함된 복수의 픽셀들 중 상기 제1 카메라 모듈과의 시차가 감소할 수 있는 방향에 대응하는 하나 이상의 픽셀들을 선택하고, 상기 선택된 하나 이상의 픽셀들을 이용하여 상기 제2 이미지를 획득하도록 설정될 수 있다.
다양한 실시 예에 따르면, 상기 프로세서는, 상기 제1 카메라 모듈의 이미지 센서에 포함된 복수의 픽셀들 중 상기 제2 카메라 모듈과의 시차가 감소할 수 있는 방향에 대응하는 하나 이상의 픽셀들을 선택하고, 상기 선택된 하나 이상의 픽셀들을 이용하여 상기 제1 이미지를 획득하도록 설정될 수 있다.
다양한 실시 예에 따르면, 상기 프로세서는, 상기 제2 카메라 모듈을 통해 획득된 이미지 중 상기 제1 카메라 모듈과의 시차가 감소할 수 있는 방향에 대응하는 적어도 일부 영역을 상기 제2 이미지로 선택하도록 설정될 수 있다.
다양한 실시 예에 따르면, 상기 프로세서는, 상기 제1 카메라 모듈을 통해 획득된 이미지 중 상기 제2 카메라 모듈과의 시차가 감소할 수 있는 방향에 대응하는 적어도 일부 영역을 상기 제1 이미지로 선택하도록 설정될 수 있다.
다양한 실시 예에 따르면, 상기 전자 장치는 센서를 더 포함하고, 상기 프로세서는, 상기 센서를 통해 측정된 온도 또는 온도 변화량에 기초하여, 상기 제2 렌즈를 이동시키는 이동량을 결정하도록 설정될 수 있다.
도 3은 일 실시 예에 따른 복수 개의 카메라들 간의 시차를 설명하기 위한 도면이다.
도 3을 참조하면, 복수 개의 카메라들(예: 도 2의 제1 카메라 모듈(210) 및 제2 카메라 모듈(230)) 간의 시차는 상기 카메라들 간의 이격 거리, 또는 상기 카메라들의 조립 편차(예: 카메라들 간의 상대적 회전 각도, 또는 카메라들 내의 이미지 센서의 중심과 렌즈의 중심이 틀어져 있는 정도) 등에 의해 발생할 수 있다. 도 3의 제1 상태(301)는 카메라들 간의 이격 거리에 의해 시차가 발생된 상태이고, 제2 상태(303)는 카메라들의 조립 편차에 의해 시차가 발생된 상태이며, 제3 상태(305)는 카메라들 간의 이격 거리 및 카메라들의 조립 편차에 의해 시차가 발생된 상태를 나타낸다.
도 3에 도시된 제1 영역(310)은 제1 초점 거리와 제1 화각에 의해 결정된 제1 카메라(예: 제1 카메라 모듈(210))의 촬영 영역이고, 제2 영역(330)은 제2 초점 거리와 제2 화각에 의해 결정된 제2 카메라(예: 제2 카메라 모듈(230)의 촬영 영역이다.
일 실시 예에 따르면, 상대적으로 짧은 상기 제1 초점 거리(제1 초점 거리 < 제2 초점 거리)와 상대적으로 넓은 상기 제1 화각(제1 화각 > 제2 화각)을 가진 상기 제1 카메라를 이용해 프리뷰를 제공하는 경우, 전자 장치(예: 도 2의 전자 장치(200))는 디스플레이(예: 도 2의 디스플레이(270))의 화면 영역에 맞춰 제1 영역(310)의 일부 영역(311)을 선택하고 선택된 영역(311)에 대응되는 제1 촬영 이미지를 상기 디스플레이에 출력할 수 있다. 반면, 상대적으로 긴 상기 제2 초점 거리와 상대적으로 좁은 상기 제2 화각을 가진 상기 제2 카메라를 이용해 프리뷰를 제공하는 경우, 전자 장치는 상기 디스플레이의 화면 영역에 맞는 제2 영역(330)에 대응되는 제2 촬영 이미지를 상기 디스플레이에 출력할 수 있다.
일 실시 예에 따르면, 전자 장치는 프리뷰로 상기 제1 촬영 이미지를 표시하다가, 줌 배율이 변경되어 상기 제1 카메라에서 상기 제2 카메라로 전환시키는 경우, 상기 제1 촬영 이미지 대신에 상기 제2 촬영 이미지를 상기 디스플레이에 표시할 수 있다. 그 역도 마찬가지다. 예컨대, 전자 장치는 프리뷰로 상기 제2 촬영 이미지를 표시하다가, 줌 배율이 변경되어 상기 제2 카메라에서 상기 제1 카메라로 전환시키는 경우, 상기 제2 촬영 이미지 대신에 상기 제1 촬영 이미지를 상기 디스플레이에 표시할 수 있다
이 경우, 전자 장치는 상기 제1 카메라와 상기 제2 카메라 간의 이격 거리 즉, 상기 제1 카메라의 제1 베이스 라인(313)과 상기 제2 카메라의 제2 베이스 라인(331) 사이의 거리로 인해 발생하는 시차를 감소시킬 수 있다. 또한, 전자 장치는 상기 제1 카메라와 상기 제2 카메라의 조립 편차에 의한 시차도 감소시킬 수 있다. 결과적으로, 전자 장치는 카메라들 간의 이격 거리로 인한 시차 및 조립 편차에 의한 시차를 모두 감소시킬 수 있다. 시차 감소에 대한 방법은 후술하는 실시 예들을 통해 설명하도록 한다.
도 4a는 일 실시 예에 따른 복수 개의 카메라들 간의 시차를 감소시키는 방법을 설명하기 위한 도면이다.
도 4a를 참조하면, 전자 장치(예: 전자 장치(200))의 프로세서(예: 프로세서(250))는 동작 410에서, 제1 카메라 모듈(예: 제1 카메라 모듈(210))을 통해 획득된 제1 이미지를 디스플레이(예: 디스플레이(270))에 표시할 수 있다. 일 실시 예에 따르면, 상기 프로세서는 상기 제1 카메라 모듈을 통해 획득된 상기 제1 이미지를 프리뷰로 제공할 수 있다.
동작 430에서, 상기 프로세서는 카메라 전환 동작과 관련된 입력을 수신할 수 있다. 상기 카메라 전환 동작은 예를 들어, 줌 배율의 변경에 따른 상기 제1 카메라 모듈과 상기 제2 카메라 모듈 간의 전환 동작을 포함할 수 있다. 일 예로, 줌 배율이 저배율에서 고배율로 변경되면, 광각 렌즈를 포함하는 상기 제1 카메라 모듈에서 망원 렌즈를 포함하는 상기 제2 카메로 모듈로 전환될 수 있다. 다른 예로, 줌 배율이 고배율에서 저배율로 변경되면, 망원 렌즈를 포함하는 상기 제2 카메라 모듈에서 광각 렌즈를 포함하는 상기 제1 카메라 모듈로 전환될 수 있다.
일 실시 예에 따르면, 상기 프로세서는 상기 디스플레이의 화면 상에 표시된 줌 배율 변경 객체 또는 전자 장치의 하우징 외측으로 노출된 줌 배율 변경 버튼이 선택되는 경우, 상기 카메라 전환 동작과 관련된 입력을 수신할 수 있다.
동작 450에서, 상기 프로세서는 상기 제2 카메라 모듈의 렌즈(예: 제2 렌즈(231)) 이동을 통해 카메라들 간의 시차를 보정할 수 있다. 예를 들어, 상기 프로세서는 상기 제2 카메라 모듈의 렌즈 구동부(예: 제2 렌즈 구동부(233))를 구동시켜 상기 제2 카메라 모듈의 렌즈의 위치를 카메라들 간의 시차가 감소되는 방향으로 이동시킬 수 있다.
어떤 실시 예에서, 상기 프로세서는 상기 제2 카메라 모듈의 렌즈를 이동시키는 대신에 상기 제2 카메라 모듈의 이미지 센서를 이동시킬 수도 있다. 또는, 상기 프로세서는 상기 제2 카메라 모듈의 렌즈를 이동시키면서 상기 제2 카메라 모듈의 이미지 센서도 함께 이동시킬 수 있다. 이 경우, 시차 보정의 범위가 넓어지는 장점이 있다. 또 다른 예로, 상기 프로세서는 상기 제2 카메라 모듈의 제2 이미지 센서의 크롭 과정에서, 크롭 영역의 중심점을 이동시켜 상기 제2 이미지의 일부를 선택(또는 추출)할 수도 있다.
동작 470에서, 상기 프로세서는 상기 제2 카메라 모듈을 통해 획득된 상기 제2 이미지를 상기 디스플레이에 표시할 수 있다. 예컨대, 상기 프로세서는 상기 제2 이미지를 프리뷰로 제공할 수 있다.
상술한 동작들은, 프리뷰 이미지가 제공되는 상태에서 카메라 전환 동작이 발생되는 경우에 대한 처리 동작들을 나타낼 수 있다. 일 실시 예에 따르면, 전자 장치는 프리뷰 이미지가 제공되기 전 상태에서도 카메라들 간의 시차를 미리 보정하는 동작들을 수행할 수 있다. 이 경우, 상기 프로세서는 상기 제2 카메라 모듈의 렌즈를 이동시키는 대신에 상기 제1 카메라 모듈의 렌즈를 이동시킬 수도 있다. 또는 상기 프로세서는 상기 제2 카메라 모듈의 렌즈를 이동시키면서 상기 제1 카메라 모듈의 렌즈도 함께 이동시킬 수 있다. 또한, 상기 프로세서는 상기 제2 카메라 모듈의 이미지 센서를 이동시키는 대신에 상기 제1 카메라 모듈의 이미지 센서를 이동시킬 수도 있다. 또는 상기 프로세서는 상기 제2 카메라 모듈의 이미지 센서를 이동시키면서 상기 제1 카메라 모듈이 이미지 센서도 함께 이동시킬 수 있다.
도 4b는 일 실시 예에 따른 복수 개의 카메라들 간의 시차를 감소시키는 다른 방법을 설명하기 위한 도면이다.
도 4b를 참조하면, 전자 장치(예: 전자 장치(200))의 프로세서(예: 프로세서(250))는 제1 카메라 모듈(예: 제1 카메라 모듈(210)) 및 제2 카메라 모듈(예: 제2 카메라 모듈(230))의 조립 편차에 의해 발생되는 카메라 모듈들 간의 시차를 감소시킬 수 있다. 예를 들어, 전자 장치의 메모리(예: 메모리(290))는 카메라 어셈블리(예: 카메라 어셈블리(100))의 제작 공정 중 카메라 캘리브레이션 공정 중에 측정된 조립 편차에 의한 카메라 모듈들 간의 시차를 보정하기 위한 정보(예: 캘리브레이션 값)를 저장할 수 있다. 이 경우, 상기 프로세서는 상기 제1 카메라 모듈 또는 제2 카메라 모듈의 실행 시에, 상기 메모리에 저장된 시차 보정을 위한 정보를 이용하여, 상기 제1 카메라 모듈 및 상기 제2 카메라 모듈 간의 시차를 감소시킬 수 있다. 즉, 상기 프로세서는 조립 편차로 인한 상기 제1 카메라 모듈 및 상기 제2 카메라 모듈 간의 시차를 감소시킨 상태에서, 상기 제1 카메라 모듈 또는 상기 제2 카메라 모듈을 실행시킬 수 있다.
동작 491에서, 상기 프로세서는 상기 제1 카메라 모듈 또는 상기 제2 카메라 모듈과 관련된 입력을 수신할 수 있다. 상기 입력은 예를 들어, 상기 제1 카메라 모듈 또는 상기 제2 카메라 모듈을 실행시키는 입력을 포함할 수 있다.
동작 493에서, 상기 프로세서는 상기 제2 카메라 모듈의 제2 렌즈 구동부(예: 제2 렌즈 구동부(233))를 이용하여 상기 제2 카메라 모듈의 제2 렌즈(예: 제2 렌즈(231))를 상기 제1 카메라 모듈과의 시차가 감소할 수 있는 방향으로 이동시킬 수 있다. 일 예로, 프로세서는 상기 제2 카메라 모듈의 화각의 중심축 방향이 상기 제1 카메라 모듈의 화각의 중심축 방향과 평행하도록 상기 제2 렌즈를 이동시킬 수 있다. 또 다른 예로, 프로세서는 상기 제2 카메라 모듈의 화각의 중심축 방향이 상기 제1 카메라 모듈의 화각의 중심축 방향에 위치한 특정 피사체를 향하도록 상기 제2 렌즈를 이동시킬 수 있다.
동작 495에서, 상기 프로세서는 상기 제2 렌즈가 이동된 상태로 상기 제2 카메라 모듈을 통해 이미지를 획득할 수 있다. 예를 들어, 프로세서는 상기 제1 카메라 모듈과 상기 제2 카메라 모듈의 시차가 보정된 상태에서, 상기 제2 카메라 모듈을 통해 촬영 이미지를 획득할 수 있다.
동작 497에서, 상기 프로세서는 획득된 이미지를 디스플레이(예: 디스플레이(270))에 표시할 수 있다. 일 실시 예에 따르면, 상기 프로세서는 상기 제2 카메라 모듈을 통해 획득된 상기 이미지를 프리뷰로 제공할 수 있다.
도 5는 일 실시 예에 따른 렌즈의 이동을 통해 복수 개의 카메라들 간의 시차를 감소시키는 방법을 설명하기 위한 도면이다.
도 5를 참조하면, 전자 장치(예: 전자 장치(200))는 카메라들 간의 시차를 감소시키기 위해 어느 하나의 카메라 또는 복수 개의 카메라들의 렌즈(들)를 이동시킬 수 있다. 예를 들어, 전자 장치는 카메라의 렌즈 구동부(예: OIS 구동부)를 구동시켜 카메라의 렌즈를 이동시킬 수 있다.
일 실시 예에 따르면, 전자 장치는 제1 카메라(510)(예: 제1 카메라 모듈(210))와 제2 카메라(530)(예: 제2 카메라 모듈(230)) 간에 시차가 존재하는 경우, 즉, 제1 카메라(510)의 시야 중심 방향(515)(예: 제1 카메라(510)의 이미지 센서(513)의 중심과 렌즈(511)의 중심을 연결한 방향)과 제2 카메라(530)의 시야 중심 방향(535)(예: 제2 카메라(530)의 이미지 센서(533)의 중심과 렌즈(531)의 중심을 연결한 방향)이 동일한 피사체를 향하지 않거나 또는 평행하지 않은 경우, 제1 카메라(510)의 렌즈(511) 또는 제2 카메라(530)의 렌즈(531) 중 적어도 하나를 이동시킬 수 있다. 도 5에서는, 제2 카메라(530)의 렌즈(531)를 이동(550)시켜 제1 카메라(510)의 시야 중심 방향(515)과 제2 카메라(530)의 시야 중심 방향(535)이 서로 평행하도록 조정한 상태를 나타낸다.
일 실시 예에 따르면, 전자 장치는 가상의 피사체가 전자 장치와 지정된 거리(예: 약 1.2m)만큼 이격되어 있다고 가정하고, 제1 카메라(510)의 시야 중심 방향(515)과 제2 카메라(530)의 시야 중심 방향(535)이 상기 가상의 피사체를 향하도록 제1 카메라(510)의 렌즈(511) 또는 제2 카메라(530)의 렌즈(531) 중 적어도 하나를 이동시킬 수 있다.
일 실시 예에 따르면, 카메라들 간의 시차는 카메라 어셈블리(예: 카메라 어셈블리(100))의 제작 공정 중 카메라 캘리브레이션(calibration) 공정 중에 측정될 수 있으며, 시차에 관한 정보(예: 캘리브레이션 값)는 전자 장치의 메모리(예: FROM)에 저장될 수 있다. 이 경우, 전자 장치는 카메라마다 렌즈 구동부의 구동 특성이 다르기 때문에 상기 메모리에 저장된 캘리브레이션 값을 이용하여 카메라 별로 특성에 맞게 시차 보정을 할 수 있다.
일 실시 예에 따르면, 전자 장치는 카메라의 특정 기능(예: 아웃 포커스 기능)을 사용할 시에는 뎁스 맵(depth map) 계산에 캘리브레이션 값이 중요하게 작용하기 때문에 카메라들 간의 시차 보정을 하지 않을 수 있다.
일 실시 예에 따르면, 전자 장치는 프리뷰 또는 동영상을 제공하는 도중에 카메라 전환 동작이 발생할 수 있는 경우, 카메라들의 조립 편차에 의한 시차만을 보정할 수 있다. 또한, 전자 장치는 주피사체와의 이격 거리에 따른 시차 보정을 추가로 수행할 수 있다.
일 실시 예에 따르면, 전자 장치는 프리뷰를 제공하는 도중에 카메라 전환 동작이 발생하면, 프리뷰를 담당하지 않는 카메라의 렌즈를 이동시켜 프리뷰 상에는 이미지의 이동 현상이 발생하지 않도록 할 수 있다. 또한, 오토포커스(AF) 동작 시, 포커스 코드(focus code)에 대응되는 물체 거리에 맞추어 카메라의 시야 중심 방향을 이동시킴으로써, 사용자가 이미지 쉬프트(shift)를 못느끼게 할 수 있다.
도 6은 일 실시 예에 따른 이미지 센서의 이동을 통해 복수 개의 카메라들 간의 시차를 감소시키는 방법을 설명하기 위한 도면이다.
도 6을 참조하면, 전자 장치(예: 전자 장치(200))는 카메라들 간의 시차를 감소시키기 위해 어느 하나의 카메라 또는 복수 개의 카메라들의 이미지 센서(들)를 이동시킬 수 있다.
일 실시 예에 따르면, 전자 장치는 제1 카메라(610)(예: 제1 카메라 모듈(210))와 제2 카메라(630)(예: 제2 카메라 모듈(230)) 간에 시차가 존재하는 경우, 즉, 제1 카메라(610)의 시야 중심 방향(615)(예: 제1 카메라(610)의 이미지 센서(613)의 중심과 렌즈(611)의 중심을 연결한 방향)과 제2 카메라(630)의 시야 중심 방향(635)(예: 제2 카메라(630)의 이미지 센서(633)의 중심과 렌즈(631)의 중심을 연결한 방향)이 동일한 피사체를 향하지 않거나 또는 평행하지 않은 경우, 제1 카메라(610)의 이미지 센서(613) 또는 제2 카메라(630)의 이미지 센서(633) 중 적어도 하나를 이동시킬 수 있다. 도 6에서는, 제2 카메라(630)의 이미지 센서(633)를 이동(650)시켜 제1 카메라(610)의 시야 중심 방향(615)과 제2 카메라(630)의 시야 중심 방향(635)이 서로 평행하도록 조정한 상태를 나타낸다.
도 7은 일 실시 예에 따른 이미지 센서의 크롭 과정에서 크롭 영역의 중심점 이동을 통해 복수 개의 카메라들 간의 시차를 보상하는 방법을 설명하기 위한 도면이다.
도 7을 참조하면, 전자 장치(예: 전자 장치(200))는 카메라들 간의 시차를 보상하기 위해 어느 하나의 카메라 또는 복수 개의 카메라들의 이미지 센서(들)의 크롭 과정에서, 크롭 영역의 중심점(들)을 이동시켜 이미지(들)의 일부를 선택(또는 추출)할 수 있다. 도 7에서는, 전자 장치가 카메라의 이미지 센서(710)에서 일부 영역의 픽셀들(730)을 크롭하는 과정에서, 크롭 영역(730)의 중심점(731)을 이미지 센서(710)의 중심점(711)에서 이동(750)시켜 카메라들 간의 시차를 보상하는 방법을 나타낸 것이다.
일 실시 예에 따르면, 전자 장치는 복수 개의 카메라들을 사용하는 환경에서는, 카메라를 통해 획득하는 이미지를 이미지 센서(710)에 포함된 복수의 픽셀들(화소) 중 선택된 하나 이상의 픽셀들을 리드아웃하여 생성할 수 있다. 즉, 카메라를 통해 획득하는 이미지는 이미지 센서(710)의 크롭 과정을 통해, 이미지 센서(710)의 화소수보다 적은 수의 픽셀들을 통해 획득할 수 있다. 이때, 이미지 센서(710)의 크롭 영역(730)의 중심점(731)을 카메라들 간의 시차가 감소하는 방향으로 이동(750)시킬 수 있다. 일 예로, 전자 장치는 제1 카메라(예: 제1 카메라 모듈(210))의 이미지 센서의 화소수와 제2 카메라(예: 제2 카메라 모듈(230))의 이미지 센서의 화소수가 다른 경우, 큰 화소수를 가진 이미지 센서를 이용하여 시차를 감소시킬 수 있다. 예를 들어, 전자 장치는 큰 화소수를 가진 이미지 센서를 작은 화소수에 맞추어 크롭할 때, 시차가 감소되도록 크롭 영역(730)의 중심점(731)을 이동(750)시킬 수 있다.
일 실시 예에 따르면, 전자 장치는 이미지 센서의 출력 시 이미지 센서(710)의 크롭 영역(730)의 중심점(731)을 이동해서 출력하거나, 이미지 센서(710)에서는 전체 화소를 출력하고, 프로세서(예: 프로세서(250))의 이미지 신호 처리(ISP) 과정 또는 후에 크롭 영역(730)의 중심점(731)을 이동할 수도 있다.
일 실시 예에 따르면, 전자 장치는 이미지 센서(710)의 크롭 영역(730)의 중심점(731)을 이동하여 시차를 감소시킬 때, 복수 개의 카메라들의 이미지 센서들 모두 크롭 영역의 중심점을 동일하게 이동시킬 수 있다.
일 실시 예에 따르면, 전자 장치는 카메라들 간의 시차를 감소시키기 위해 상술한 모든 방법 즉, 카메라의 렌즈를 이동시키는 방법, 카메라의 이미지 센서를 이동시키는 방법, 및 크롭 영역의 중심점을 이동시켜 이미지 센서를 크롭하는 방법을 조합하여 수행할 수도 있다.
일 실시 예에 따르면, 전자 장치는 카메라의 렌즈 구동부(예: 제1 렌즈 구동부(213) 또는 제2 렌즈 구동부(233))가 자성체와 코일로 이루어진 VCM 구동 방식으로 동작하는 경우, 피드백 제어를 위해 홀 센서와 같은 변위 센서를 사용할 수 있는데, 주변 환경에 의한 온도 변화에 따라 자성체의 자력과 변위 센서의 위치 인식률이 변경될 수 있어, 렌즈 구동부가 온도에 따라 변하게 되고, 이로 인해 카메라들 간의 시차가 달라질 수 있다.
이에 따라, 카메라들 간의 시차의 변화를 최소화하기 위해, 각각의 렌즈 구동부의 온도에 따른 변화량을 최소화시킬 필요가 있다. 이를 위해 전자 장치는 온도에 의한 자성체의 자력과 변위 센서의 위치 인식률의 변화율을 수치화하여 별도의 온도 센싱을 통해 동작 온도 범위 내에서 보정을 함으로써 렌즈 구동부의 온도에 따른 변화량을 최소화시킬 수 있다. 일 예로, 80도의 온도 변화(예: -20~60도)가 생기면, 렌즈 구동부의 구동 각도가 약 3도 변할 수 있는데, 온도 보정을 하는 경우 약 0.3도로 구동 각도의 변화량을 낮출 수 있다.
일 실시 예에 따르면, 렌즈 구동부의 온도 보정 계수는 온도에 의한 자력의 변화, 변위 센서의 위치 인식률의 변화, 렌즈 구동부의 기구적 변화를 포함한 계수일 수 있으며, 이는 실험적으로 온도를 가변시키면서 취득하는 것이 바람직하다. 실험적으로 취득한 온도 보정 계수는 보정 환경에 따라 온도 범위가 세부적으로 가변되어 구분될 수 있다.
도 8은 다양한 실시 예들에 따른, 네트워크 환경(800) 내의 전자 장치(801)의 블럭도이다. 도 8을 참조하면, 네트워크 환경(800)에서 전자 장치(801)(예: 전자 장치(200))는 제1 네트워크(898)(예: 근거리 무선 통신)를 통하여 전자 장치(802)와 통신하거나, 또는 제2 네트워크(899)(예: 원거리 무선 통신)를 통하여 전자 장치(804) 또는 서버(808)와 통신할 수 있다. 일 실시 예에 따르면, 전자 장치(801)는 서버(808)를 통하여 전자 장치(804)와 통신할 수 있다. 일 실시 예에 따르면, 전자 장치(801)는 프로세서(820)(예: 프로세서(250)), 메모리(830)(예: 메모리(290)), 입력 장치(850), 음향 출력 장치(855), 표시 장치(860)(예: 디스플레이(270)), 오디오 모듈(870), 센서 모듈(876), 인터페이스(877), 햅틱 모듈(879), 카메라 모듈(880)(예: 제1 카메라 모듈(210), 제2 카메라 모듈(230)), 전력 관리 모듈(888), 배터리(889), 통신 모듈(890), 가입자 식별 모듈(896), 및 안테나 모듈(897)을 포함할 수 있다. 어떤 실시 예에서는, 전자 장치(801)에는, 이 구성 요소들 중 적어도 하나(예: 표시 장치(860) 또는 카메라 모듈(880))가 생략되거나 다른 구성 요소가 추가될 수 있다. 어떤 실시 예에서는, 예를 들면, 표시 장치(860)(예: 디스플레이)에 임베디드된 센서 모듈(876)(예: 지문 센서, 홍채 센서, 또는 조도 센서)의 경우와 같이, 일부의 구성 요소들이 통합되어 구현될 수 있다.
프로세서(820)는, 예를 들면, 소프트웨어(예: 프로그램(840))를 구동하여 프로세서(820)에 연결된 전자 장치(801)의 적어도 하나의 다른 구성 요소(예: 하드웨어 또는 소프트웨어 구성 요소)을 제어할 수 있고, 다양한 데이터 처리 및 연산을 수행할 수 있다. 프로세서(820)는 다른 구성 요소(예: 센서 모듈(876) 또는 통신 모듈(890))로부터 수신된 명령 또는 데이터를 휘발성 메모리(832)에 로드하여 처리하고, 결과 데이터를 비휘발성 메모리(834)에 저장할 수 있다. 일 실시 예에 따르면, 프로세서(820)는 메인 프로세서(821)(예: 중앙 처리 장치 또는 어플리케이션 프로세서), 및 이와는 독립적으로 운영되고, 추가적으로 또는 대체적으로, 메인 프로세서(821)보다 저전력을 사용하거나, 또는 지정된 기능에 특화된 보조 프로세서(823)(예: 그래픽 처리 장치, 이미지 시그널 프로세서, 센서 허브 프로세서, 또는 커뮤니케이션 프로세서)를 포함할 수 있다. 여기서, 보조 프로세서(823)는 메인 프로세서(821)와 별개로 또는 임베디드되어 운영될 수 있다.
이런 경우, 보조 프로세서(823)는, 예를 들면, 메인 프로세서(821)가 인액티브(예: 슬립) 상태에 있는 동안 메인 프로세서(821)를 대신하여, 또는 메인 프로세서(821)가 액티브(예: 어플리케이션 수행) 상태에 있는 동안 메인 프로세서(821)와 함께, 전자 장치(801)의 구성 요소들 중 적어도 하나의 구성 요소(예: 표시 장치(860), 센서 모듈(876), 또는 통신 모듈(890))와 관련된 기능 또는 상태들의 적어도 일부를 제어할 수 있다. 일 실시 예에 따르면, 보조 프로세서(823)(예: 이미지 시그널 프로세서 또는 커뮤니케이션 프로세서)는 기능적으로 관련 있는 다른 구성 요소(예: 카메라 모듈(880) 또는 통신 모듈(890))의 일부 구성 요소로서 구현될 수 있다.
메모리(830)는, 전자 장치(801)의 적어도 하나의 구성 요소(예: 프로세서(820) 또는 센서 모듈(876))에 의해 사용되는 다양한 데이터, 예를 들어, 소프트웨어(예: 프로그램(840)) 및, 이와 관련된 명령에 대한 입력 데이터 또는 출력 데이터를 저장할 수 있다. 메모리(830)는 휘발성 메모리(832) 또는 비휘발성 메모리(834)를 포함할 수 있다.
프로그램(840)은 메모리(830)에 저장되는 소프트웨어로서, 예를 들면, 운영 체제(842), 미들 웨어(844) 또는 어플리케이션(846)을 포함할 수 있다.
입력 장치(850)는, 전자 장치(801)의 구성 요소(예: 프로세서(820))에 사용될 명령 또는 데이터를 전자 장치(801)의 외부(예: 사용자)로부터 수신하기 위한 장치로서, 예를 들면, 마이크, 마우스, 또는 키보드를 포함할 수 있다.
음향 출력 장치(855)는 음향 신호를 전자 장치(801)의 외부로 출력하기 위한 장치로서, 예를 들면, 멀티미디어 재생 또는 녹음 재생과 같이 일반적인 용도로 사용되는 스피커와 전화 수신 전용으로 사용되는 리시버를 포함할 수 있다. 일 실시 예에 따르면, 리시버는 스피커와 일체 또는 별도로 형성될 수 있다.
표시 장치(860)는 전자 장치(801)의 사용자에게 정보를 시각적으로 제공하기 위한 장치로서, 예를 들면, 디스플레이, 홀로그램 장치, 또는 프로젝터 및 해당 장치를 제어하기 위한 제어 회로를 포함할 수 있다. 일 실시 예에 따르면, 표시 장치(860)는 터치 회로(touch circuitry) 또는 터치에 대한 압력의 세기를 측정할 수 있는 압력 센서를 포함할 수 있다.
오디오 모듈(870)은 소리와 전기 신호를 쌍방향으로 변환시킬 수 있다. 일 실시 예에 따르면, 오디오 모듈(870)은, 입력 장치(850)를 통해 소리를 획득하거나, 음향 출력 장치(855), 또는 전자 장치(801)와 유선 또는 무선으로 연결된 외부 전자 장치(예: 전자 장치(802)(예: 스피커 또는 헤드폰))를 통해 소리를 출력할 수 있다.
센서 모듈(876)은 전자 장치(801)의 내부의 작동 상태(예: 전력 또는 온도), 또는 외부의 환경 상태에 대응하는 전기 신호 또는 데이터 값을 생성할 수 있다. 센서 모듈(876)은, 예를 들면, 제스처 센서, 자이로 센서, 기압 센서, 마그네틱 센서, 가속도 센서, 그립 센서, 근접 센서, 컬러 센서, IR(infrared) 센서, 생체 센서, 온도 센서, 습도 센서, 또는 조도 센서를 포함할 수 있다.
인터페이스(877)는 외부 전자 장치(예: 전자 장치(802))와 유선 또는 무선으로 연결할 수 있는 지정된 프로토콜을 지원할 수 있다. 일 실시 예에 따르면, 인터페이스(877)는 HDMI(high definition multimedia interface), USB(universal serial bus) 인터페이스, SD카드 인터페이스, 또는 오디오 인터페이스를 포함할 수 있다.
연결 단자(878)는 전자 장치(801)와 외부 전자 장치(예: 전자 장치(802))를 물리적으로 연결시킬 수 있는 커넥터, 예를 들면, HDMI 커넥터, USB 커넥터, SD 카드 커넥터, 또는 오디오 커넥터(예: 헤드폰 커넥터)를 포함할 수 있다.
햅틱 모듈(879)은 전기적 신호를 사용자가 촉각 또는 운동 감각을 통해서 인지할 수 있는 기계적인 자극(예: 진동 또는 움직임) 또는 전기적인 자극으로 변환할 수 있다. 햅틱 모듈(879)은, 예를 들면, 모터, 압전 소자, 또는 전기 자극 장치를 포함할 수 있다.
카메라 모듈(880)은 정지 영상 및 동영상을 촬영할 수 있다. 일 실시 예에 따르면, 카메라 모듈(880)은 하나 이상의 렌즈, 이미지 센서, 이미지 시그널 프로세서, 또는 플래시를 포함할 수 있다.
전력 관리 모듈(888)은 전자 장치(801)에 공급되는 전력을 관리하기 위한 모듈로서, 예를 들면, PMIC(power management integrated circuit)의 적어도 일부로서 구성될 수 있다.
배터리(889)는 전자 장치(801)의 적어도 하나의 구성 요소에 전력을 공급하기 위한 장치로서, 예를 들면, 재충전 불가능한 1차 전지, 재충전 가능한 2차 전지 또는 연료 전지를 포함할 수 있다.
통신 모듈(890)은 전자 장치(801)와 외부 전자 장치(예: 전자 장치(802), 전자 장치(804), 또는 서버(808))간의 유선 또는 무선 통신 채널의 수립, 및 수립된 통신 채널을 통한 통신 수행을 지원할 수 있다. 통신 모듈(890)은 프로세서(820)(예: 어플리케이션 프로세서)와 독립적으로 운영되는, 유선 통신 또는 무선 통신을 지원하는 하나 이상의 커뮤니케이션 프로세서를 포함할 수 있다. 일 실시 예에 따르면, 통신 모듈(890)은 무선 통신 모듈(892)(예: 셀룰러 통신 모듈, 근거리 무선 통신 모듈, 또는 GNSS(global navigation satellite system) 통신 모듈) 또는 유선 통신 모듈(894)(예: LAN(local area network) 통신 모듈, 또는 전력선 통신 모듈)을 포함하고, 그 중 해당하는 통신 모듈을 이용하여 제1 네트워크(898)(예: 블루투스, WiFi direct 또는 IrDA(infrared data association) 같은 근거리 통신 네트워크) 또는 제2 네트워크(899)(예: 셀룰러 네트워크, 인터넷, 또는 컴퓨터 네트워크(예: LAN 또는 WAN)와 같은 원거리 통신 네트워크)를 통하여 외부 전자 장치와 통신할 수 있다. 상술한 여러 종류의 통신 모듈(890)은 하나의 칩으로 구현되거나 또는 각각 별도의 칩으로 구현될 수 있다.
일 실시 예에 따르면, 무선 통신 모듈(892)은 가입자 식별 모듈(896)에 저장된 사용자 정보를 이용하여 통신 네트워크 내에서 전자 장치(801)를 구별 및 인증할 수 있다.
안테나 모듈(897)은 신호 또는 전력을 외부로 송신하거나 외부로부터 수신하기 위한 하나 이상의 안테나들을 포함할 수 있다. 일 실시 예에 따르면, 통신 모듈(890)(예: 무선 통신 모듈(892))은 통신 방식에 적합한 안테나를 통하여 신호를 외부 전자 장치로 송신하거나, 외부 전자 장치로부터 수신할 수 있다.
상기 구성 요소들 중 일부 구성 요소들은 주변 기기들간 통신 방식(예: 버스, GPIO(general purpose input/output), SPI(serial peripheral interface), 또는 MIPI(mobile industry processor interface))를 통해 서로 연결되어 신호(예: 명령 또는 데이터)를 상호간에 교환할 수 있다.
일 실시 예에 따르면, 명령 또는 데이터는 제2 네트워크(899)에 연결된 서버(808)를 통해서 전자 장치(801)와 외부의 전자 장치(804)간에 송신 또는 수신될 수 있다. 전자 장치(802, 804) 각각은 전자 장치(801)와 동일한 또는 다른 종류의 장치일 수 있다. 일 실시 예에 따르면, 전자 장치(801)에서 실행되는 동작들의 전부 또는 일부는 다른 하나 또는 복수의 외부 전자 장치에서 실행될 수 있다. 일 실시 예에 따르면, 전자 장치(801)가 어떤 기능이나 서비스를 자동으로 또는 요청에 의하여 수행해야 할 경우에, 전자 장치(801)는 기능 또는 서비스를 자체적으로 실행시키는 대신에 또는 추가적으로, 그와 연관된 적어도 일부 기능을 외부 전자 장치에게 요청할 수 있다. 상기 요청을 수신한 외부 전자 장치는 요청된 기능 또는 추가 기능을 실행하고, 그 결과를 전자 장치(801)로 전달할 수 있다. 전자 장치(801)는 수신된 결과를 그대로 또는 추가적으로 처리하여 요청된 기능이나 서비스를 제공할 수 있다. 이를 위하여, 예를 들면, 클라우드 컴퓨팅, 분산 컴퓨팅, 또는 클라이언트-서버 컴퓨팅 기술이 이용될 수 있다.
본 문서에 개시된 다양한 실시 예들에 따른 전자 장치는 다양한 형태의 장치가 될 수 있다. 전자 장치는, 예를 들면, 휴대용 통신 장치 (예: 스마트폰), 컴퓨터 장치, 휴대용 멀티미디어 장치, 휴대용 의료 기기, 카메라, 웨어러블 장치, 또는 가전 장치 중 적어도 하나를 포함할 수 있다. 본 문서의 실시 예에 따른 전자 장치는 전술한 기기들에 한정되지 않는다.
본 문서의 다양한 실시 예들 및 이에 사용된 용어들은 본 문서에 기재된 기술을 특정한 실시 형태에 대해 한정하려는 것이 아니며, 해당 실시예의 다양한 변경, 균등물, 및/또는 대체물을 포함하는 것으로 이해되어야 한다. 도면의 설명과 관련하여, 유사한 구성 요소에 대해서는 유사한 참조 부호가 사용될 수 있다. 단수의 표현은 문맥상 명백하게 다르게 뜻하지 않는 한, 복수의 표현을 포함할 수 있다. 본 문서에서, "A 또는 B", "A 및/또는 B 중 적어도 하나", "A, B 또는 C" 또는 "A, B 및/또는 C 중 적어도 하나" 등의 표현은 함께 나열된 항목들의 모든 가능한 조합을 포함할 수 있다. "제1", "제2", "첫째" 또는 "둘째" 등의 표현들은 해당 구성 요소들을, 순서 또는 중요도에 상관없이 수식할 수 있고, 한 구성 요소를 다른 구성 요소와 구분하기 위해 사용될 뿐 해당 구성 요소들을 한정하지 않는다. 어떤(예: 제1) 구성 요소가 다른(예: 제2) 구성 요소에 "(기능적으로 또는 통신적으로) 연결되어" 있다거나 "접속되어" 있다고 언급된 때에는, 상기 어떤 구성 요소가 상기 다른 구성 요소에 직접적으로 연결되거나, 다른 구성 요소(예: 제3 구성 요소)를 통하여 연결될 수 있다.
본 문서에서 사용된 용어 "모듈"은 하드웨어, 소프트웨어 또는 펌웨어로 구성된 유닛을 포함하며, 예를 들면, 로직, 논리 블록, 부품, 또는 회로 등의 용어와 상호 호환적으로 사용될 수 있다. 모듈은, 일체로 구성된 부품 또는 하나 또는 그 이상의 기능을 수행하는 최소 단위 또는 그 일부가 될 수 있다. 예를 들면, 모듈은 ASIC(application-specific integrated circuit)으로 구성될 수 있다.
본 문서의 다양한 실시 예들은 기기(machine)(예: 컴퓨터)로 읽을 수 있는 저장 매체(machine-readable storage media)(예: 내장 메모리(836) 또는 외장 메모리(838))에 저장된 명령어를 포함하는 소프트웨어(예: 프로그램(840))로 구현될 수 있다. 기기는, 저장 매체로부터 저장된 명령어를 호출하고, 호출된 명령어에 따라 동작이 가능한 장치로서, 개시된 실시 예들에 따른 전자 장치(예: 전자 장치(801))를 포함할 수 있다. 상기 명령이 프로세서(예: 프로세서(820))에 의해 실행될 경우, 프로세서가 직접, 또는 상기 프로세서의 제어 하에 다른 구성 요소들을 이용하여 상기 명령에 해당하는 기능을 수행할 수 있다. 명령은 컴파일러 또는 인터프리터에 의해 생성 또는 실행되는 코드를 포함할 수 있다. 기기로 읽을 수 있는 저장 매체는, 비일시적(non-transitory) 저장 매체의 형태로 제공될 수 있다. 여기서, '비일시적'은 저장 매체가 신호(signal)를 포함하지 않으며 실재(tangible)한다는 것을 의미할 뿐 데이터가 저장 매체에 반영구적 또는 임시적으로 저장됨을 구분하지 않는다.
일 실시 예에 따르면, 본 문서에 개시된 다양한 실시 예들에 따른 방법은 컴퓨터 프로그램 제품(computer program product)에 포함되어 제공될 수 있다. 컴퓨터 프로그램 제품은 상품으로서 판매자 및 구매자 간에 거래될 수 있다. 컴퓨터 프로그램 제품은 기기로 읽을 수 있는 저장 매체(예: compact disc read only memory (CD-ROM))의 형태로, 또는 어플리케이션 스토어(예: 플레이 스토어TM)를 통해 온라인으로 배포될 수 있다. 온라인 배포의 경우에, 컴퓨터 프로그램 제품의 적어도 일부는 제조사의 서버, 어플리케이션 스토어의 서버, 또는 중계 서버의 메모리와 같은 저장 매체에 적어도 일시 저장되거나, 임시적으로 생성될 수 있다.
다양한 실시 예들에 따른 구성 요소(예: 모듈 또는 프로그램) 각각은 단수 또는 복수의 개체로 구성될 수 있으며, 전술한 해당 서브 구성 요소들 중 일부 서브 구성 요소가 생략되거나, 또는 다른 서브 구성 요소가 다양한 실시 예에 더 포함될 수 있다. 대체적으로 또는 추가적으로, 일부 구성 요소들(예: 모듈 또는 프로그램)은 하나의 개체로 통합되어, 통합되기 이전의 각각의 해당 구성 요소에 의해 수행되는 기능을 동일 또는 유사하게 수행할 수 있다. 다양한 실시 예들에 따른, 모듈, 프로그램 또는 다른 구성 요소에 의해 수행되는 동작들은 순차적, 병렬적, 반복적 또는 휴리스틱하게 실행되거나, 적어도 일부 동작이 다른 순서로 실행되거나, 생략되거나, 또는 다른 동작이 추가될 수 있다.
Claims (20)
- 전자 장치에 있어서,
디스플레이;
제1 렌즈 및 상기 제1 렌즈를 구동하기 위한 제1 렌즈 구동부를 포함하는 제1 카메라 모듈;
제2 렌즈 및 상기 제2 렌즈를 구동하기 위한 제2 렌즈 구동부를 포함하고, 상기 제1 카메라 모듈과 인접하여 배치된 제2 카메라 모듈; 및
프로세서를 포함하고, 상기 프로세서는
상기 제1 카메라 모듈을 통해 획득된 제1 이미지를 상기 디스플레이를 통해 표시하고,
상기 제1 이미지가 상기 디스플레이를 통해 표시되는 동안에, 상기 제1 카메라 모듈에서 상기 제2 카메라 모듈로의 전환과 관련된 입력을 수신하고,
상기 입력에 적어도 기반하여, 상기 제2 렌즈 구동부를 이용하여 상기 제1 카메라 모듈과의 시차가 감소할 수 있는 방향으로 상기 제2 렌즈를 이동시키고,
상기 입력에 적어도 기반하여, 상기 제2 렌즈가 이동된 상태로 상기 제2 카메라 모듈을 통해 획득된 제2 이미지를 상기 디스플레이를 통해 표시하도록 설정된 전자 장치. - 청구항 1에 있어서,
상기 프로세서는,
상기 입력에 적어도 기반하여, 상기 제1 렌즈 구동부를 이용하여 상기 제2 카메라 모듈과의 시차가 감소할 수 있는 방향으로 상기 제1 렌즈를 이동시키도록 설정된 전자 장치. - 청구항 1에 있어서,
상기 프로세서는, 상기 입력의 적어도 일부로,
지정된 배율 이상의 줌 입력, 또는 상기 제1 카메라 모듈과 상기 제2 카메라 모듈 간의 전환이 가능한 기능으로 진입하는 입력을 수신하도록 설정된 전자 장치. - 청구항 1에 있어서,
상기 제1 렌즈는 제1 화각 및 제1 초점 거리를 가지고,
상기 제2 렌즈는 상기 제1 화각보다 좁은 제2 화각 및 상기 제1 초점 거리보다 긴 제2 초점 거리를 가지는 전자 장치. - 청구항 4에 있어서,
상기 방향은,
상기 제2 화각의 중심축 방향이 상기 제1 화각의 중심축 방향과 평행해지도록 하는 제1 방향, 또는
상기 제2 화각의 중심축 방향이 상기 제1 화각의 중심축 방향에 위치한 특정 피사체를 향하도록 하는 제2 방향인 전자 장치. - 청구항 1에 있어서,
상기 프로세서는,
상기 제2 카메라 모듈의 이미지 센서에 포함된 복수의 픽셀들 중 상기 제1 카메라 모듈과의 시차가 감소할 수 있는 방향에 대응하는 하나 이상의 픽셀들을 선택하고,
상기 선택된 하나 이상의 픽셀들을 이용하여 상기 제 2 이미지를 획득하도록 설정된 전자 장치. - 청구항 6에 있어서,
상기 프로세서는,
상기 제1 카메라 모듈의 이미지 센서에 포함된 복수의 픽셀들 중 상기 제2 카메라 모듈과의 시차가 감소할 수 있는 방향에 대응하는 하나 이상의 픽셀들을 선택하고,
상기 선택된 하나 이상의 픽셀들을 이용하여 상기 제1 이미지를 획득하도록 설정된 전자 장치. - 청구항 1에 있어서,
상기 프로세서는,
상기 제2 카메라 모듈을 통해 획득된 이미지 중 상기 제1 카메라 모듈과의 시차가 감소할 수 있는 방향에 대응하는 적어도 일부 영역을 상기 제 2 이미지로 선택하도록 설정된 전자 장치. - 청구항 8에 있어서,
상기 프로세서는,
상기 제1 카메라 모듈을 통해 획득된 이미지 중 상기 제2 카메라 모듈과의 시차가 감소할 수 있는 방향에 대응하는 적어도 일부 영역을 상기 제1 이미지로 선택하도록 설정된 전자 장치. - 청구항 2에 있어서,
센서를 더 포함하고,
상기 프로세서는,
상기 센서를 통해 측정된 온도 또는 온도 변화량에 기초하여, 상기 제1 렌즈를 이동시키는 이동량 또는 상기 제2 렌즈를 이동시키는 이동량을 결정하도록 설정된 전자 장치. - 전자 장치에 있어서,
디스플레이;
제1 렌즈 및 상기 제1 렌즈를 구동하기 위한 제1 렌즈 구동부를 포함하는 제1 카메라 모듈;
제2 렌즈 및 상기 제2 렌즈를 구동하기 위한 제2 렌즈 구동부를 포함하는 제2 카메라 모듈; 및
프로세서를 포함하고, 상기 프로세서는
상기 제1 카메라 또는 상기 제2 카메라와 관련된 입력을 수신하고,
상기 입력에 반응하여, 상기 제2 렌즈 구동부를 이용하여 상기 제2 렌즈를 상기 제1 카메라 모듈과의 시차가 감소할 수 있는 방향으로 이동시키고,
상기 제2 렌즈가 이동된 상태로 상기 제2 카메라 모듈을 통해 이미지를 획득하고,
상기 이미지를 상기 디스플레이를 통해 표시하도록 설정된 전자 장치. - 청구항 11에 있어서,
상기 프로세서는,
상기 입력에 반응하여, 상기 제1 렌즈 구동부를 이용하여 상기 제1 렌즈를 상기 제2 카메라 모듈과의 시차가 감소할 수 있는 방향으로 이동시키도록 설정된 전자 장치. - 청구항 11에 있어서,
상기 프로세서는, 상기 입력의 적어도 일부로,
상기 제1 카메라 모듈 및 상기 제2 카메라 모듈 중 적어도 하나를 실행시키는 입력, 또는 상기 제1 카메라 모듈과 상기 제2 카메라 모듈 간의 전환이 가능한 기능으로 진입하는 입력을 수신하도록 설정된 전자 장치. - 청구항 11에 있어서,
상기 프로세서는,
상기 제2 카메라 모듈의 이미지 센서에 포함된 복수의 픽셀들 중 상기 제1 카메라 모듈과의 시차가 감소할 수 있는 방향에 대응하는 하나 이상의 픽셀들을 선택하고,
상기 선택된 하나 이상의 픽셀들을 이용하여 상기 이미지를 획득하도록 설정된 전자 장치. - 전자 장치에 있어서,
디스플레이;
제1 렌즈를 포함하는 제1 카메라 모듈;
제2 렌즈 및 상기 제2 렌즈를 구동하기 위한 렌즈 구동부를 포함하고, 상기 제1 카메라 모듈과 인접하여 배치된 제2 카메라 모듈;
프로세서를 포함하고, 상기 프로세서는
상기 제1 카메라 모듈을 통해 획득된 제1 이미지를 상기 디스플레이를 통해 표시하고,
상기 제1 이미지가 상기 디스플레이를 통해 표시되는 동안에, 상기 제1 카메라 모듈에서 상기 제2 카메라 모듈로의 전환과 관련된 입력을 수신하고,
상기 입력에 적어도 기반하여, 상기 렌즈 구동부를 이용하여 상기 제1 카메라 모듈과의 시차가 감소할 수 있는 방향으로 상기 제2 렌즈를 이동시키고,
상기 입력에 적어도 기반하여, 상기 제2 렌즈가 이동된 상태로 상기 제2 카메라 모듈을 통해 획득된 제2 이미지를 상기 디스플레이를 통해 표시하도록 설정된 전자 장치. - 청구항 15에 있어서,
상기 프로세서는,
상기 제2 카메라 모듈의 이미지 센서에 포함된 복수의 픽셀들 중 상기 제1 카메라 모듈과의 시차가 감소할 수 있는 방향에 대응하는 하나 이상의 픽셀들을 선택하고,
상기 선택된 하나 이상의 픽셀들을 이용하여 상기 제2 이미지를 획득하도록 설정된 전자 장치. - 청구항 16에 있어서,
상기 프로세서는,
상기 제1 카메라 모듈의 이미지 센서에 포함된 복수의 픽셀들 중 상기 제2 카메라 모듈과의 시차가 감소할 수 있는 방향에 대응하는 하나 이상의 픽셀들을 선택하고,
상기 선택된 하나 이상의 픽셀들을 이용하여 상기 제1 이미지를 획득하도록 설정된 전자 장치. - 청구항 15에 있어서,
상기 프로세서는,
상기 제2 카메라 모듈을 통해 획득된 이미지 중 상기 제1 카메라 모듈과의 시차가 감소할 수 있는 방향에 대응하는 적어도 일부 영역을 상기 제2 이미지로 선택하도록 설정된 전자 장치. - 청구항 18에 있어서,
상기 프로세서는,
상기 제1 카메라 모듈을 통해 획득된 이미지 중 상기 제2 카메라 모듈과의 시차가 감소할 수 있는 방향에 대응하는 적어도 일부 영역을 상기 제1 이미지로 선택하도록 설정된 전자 장치. - 청구항 15에 있어서,
센서를 더 포함하고,
상기 프로세서는,
상기 센서를 통해 측정된 온도 또는 온도 변화량에 기초하여, 상기 제2 렌즈를 이동시키는 이동량을 결정하도록 설정된 전자 장치.
Priority Applications (4)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
KR1020170106849A KR102348504B1 (ko) | 2017-08-23 | 2017-08-23 | 복수 개의 카메라들 간의 시차를 감소시키는 방법 및 이를 지원하는 전자 장치 |
CN201810954160.8A CN109428997B (zh) | 2017-08-23 | 2018-08-21 | 用于减小多个相机的视差的方法和支持该方法的电子装置 |
EP18190288.3A EP3448011A1 (en) | 2017-08-23 | 2018-08-22 | Method for reducing parallax of multiple cameras and electronic device supporting the same |
US16/110,524 US10764504B2 (en) | 2017-08-23 | 2018-08-23 | Method for reducing parallax of multiple cameras and electronic device supporting the same |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
KR1020170106849A KR102348504B1 (ko) | 2017-08-23 | 2017-08-23 | 복수 개의 카메라들 간의 시차를 감소시키는 방법 및 이를 지원하는 전자 장치 |
Publications (2)
Publication Number | Publication Date |
---|---|
KR20190021725A true KR20190021725A (ko) | 2019-03-06 |
KR102348504B1 KR102348504B1 (ko) | 2022-01-10 |
Family
ID=63528504
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
KR1020170106849A KR102348504B1 (ko) | 2017-08-23 | 2017-08-23 | 복수 개의 카메라들 간의 시차를 감소시키는 방법 및 이를 지원하는 전자 장치 |
Country Status (4)
Country | Link |
---|---|
US (1) | US10764504B2 (ko) |
EP (1) | EP3448011A1 (ko) |
KR (1) | KR102348504B1 (ko) |
CN (1) | CN109428997B (ko) |
Cited By (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
KR20200134804A (ko) * | 2019-05-23 | 2020-12-02 | 삼성전자주식회사 | 시선 전환이 가능한 카메라 모듈을 포함하는 전자 장치 및 그의 동영상을 기록하는 방법 |
WO2022114801A1 (ko) * | 2020-11-25 | 2022-06-02 | 삼성전자 주식회사 | 복수의 카메라를 포함하는 전자 장치 및 그 전자 장치의 제어 방법 |
WO2023043132A1 (ko) * | 2021-09-14 | 2023-03-23 | 삼성전자 주식회사 | 이미지에 보케 효과를 적용하는 전자 장치 및 그 동작 방법 |
Families Citing this family (11)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
KR102551220B1 (ko) * | 2018-10-12 | 2023-07-03 | 삼성전기주식회사 | 카메라 모듈 |
KR20200101180A (ko) * | 2019-02-19 | 2020-08-27 | 삼성전자주식회사 | 이미지 안정화를 위한 전자 장치 및 그의 동작 방법 |
US10956694B2 (en) * | 2019-04-05 | 2021-03-23 | Zebra Technologies Corporation | Device and method for data capture aiming assistance |
KR20200139551A (ko) * | 2019-06-04 | 2020-12-14 | 삼성전자주식회사 | 전자 장치의 일부를 이동시키기 위한 방법 및 이를 지원하는 전자 장치 |
WO2021000063A1 (en) | 2019-06-29 | 2021-01-07 | Qualcomm Incorporated | Automatic focus distance extension |
WO2021035485A1 (zh) * | 2019-08-26 | 2021-03-04 | Oppo广东移动通信有限公司 | 拍摄防抖方法、装置、终端及存储介质 |
US11222401B2 (en) | 2019-11-14 | 2022-01-11 | Hand Held Products, Inc. | Apparatuses and computer-implemented methods for middle frame image processing |
KR20210068877A (ko) * | 2019-12-02 | 2021-06-10 | 삼성전자주식회사 | 카메라 전환에 따른 영상 보정 방법 및 장치 |
CN114268731B (zh) * | 2020-09-16 | 2024-01-19 | 北京小米移动软件有限公司 | 摄像头切换方法、摄像头切换装置及存储介质 |
CN114531539B (zh) * | 2020-11-23 | 2024-03-19 | 华为技术有限公司 | 拍摄方法及电子设备 |
WO2024076176A1 (ko) * | 2022-10-07 | 2024-04-11 | 삼성전자 주식회사 | 카메라를 제어하는 방법 및 전자 장치 |
Citations (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2012133232A (ja) * | 2010-12-22 | 2012-07-12 | Fujitsu Ltd | 撮影装置及び撮影制御方法 |
US20170078591A1 (en) * | 2015-09-11 | 2017-03-16 | Gsci | Multi-modal optoelectronic vision system and uses thereof |
US20170094183A1 (en) * | 2015-09-30 | 2017-03-30 | Apple Inc. | Mobile zoom using multiple optical image stabilization cameras |
KR20170059704A (ko) * | 2015-11-23 | 2017-05-31 | 삼성전자주식회사 | 촬영 장치 및 그 동작 방법 |
US20170230585A1 (en) * | 2016-02-08 | 2017-08-10 | Qualcomm Incorporated | Systems and methods for implementing seamless zoom function using multiple cameras |
Family Cites Families (8)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
WO2009104394A1 (ja) * | 2008-02-18 | 2009-08-27 | パナソニック株式会社 | 複眼カメラモジュール |
US8416282B2 (en) * | 2008-10-16 | 2013-04-09 | Spatial Cam Llc | Camera for creating a panoramic image |
CN101840146A (zh) * | 2010-04-20 | 2010-09-22 | 夏佳梁 | 自动矫正视差的立体图像拍摄方法及装置 |
JP2013143753A (ja) | 2012-01-12 | 2013-07-22 | Olympus Corp | 撮像装置 |
CA2837578C (en) | 2013-11-29 | 2019-11-05 | Avigilon Corporation | Camera system control for correcting bore-sight offset |
KR102129797B1 (ko) * | 2014-01-13 | 2020-07-03 | 엘지전자 주식회사 | 이동 단말기 및 이의 제어 방법 |
JP2017005314A (ja) * | 2015-06-04 | 2017-01-05 | キヤノン株式会社 | 撮像装置 |
KR102483450B1 (ko) | 2015-10-19 | 2023-01-02 | 엘지이노텍 주식회사 | 듀얼 카메라 모듈 |
-
2017
- 2017-08-23 KR KR1020170106849A patent/KR102348504B1/ko active IP Right Grant
-
2018
- 2018-08-21 CN CN201810954160.8A patent/CN109428997B/zh active Active
- 2018-08-22 EP EP18190288.3A patent/EP3448011A1/en active Pending
- 2018-08-23 US US16/110,524 patent/US10764504B2/en active Active
Patent Citations (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2012133232A (ja) * | 2010-12-22 | 2012-07-12 | Fujitsu Ltd | 撮影装置及び撮影制御方法 |
US20170078591A1 (en) * | 2015-09-11 | 2017-03-16 | Gsci | Multi-modal optoelectronic vision system and uses thereof |
US20170094183A1 (en) * | 2015-09-30 | 2017-03-30 | Apple Inc. | Mobile zoom using multiple optical image stabilization cameras |
KR20170059704A (ko) * | 2015-11-23 | 2017-05-31 | 삼성전자주식회사 | 촬영 장치 및 그 동작 방법 |
US20170230585A1 (en) * | 2016-02-08 | 2017-08-10 | Qualcomm Incorporated | Systems and methods for implementing seamless zoom function using multiple cameras |
Cited By (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
KR20200134804A (ko) * | 2019-05-23 | 2020-12-02 | 삼성전자주식회사 | 시선 전환이 가능한 카메라 모듈을 포함하는 전자 장치 및 그의 동영상을 기록하는 방법 |
WO2022114801A1 (ko) * | 2020-11-25 | 2022-06-02 | 삼성전자 주식회사 | 복수의 카메라를 포함하는 전자 장치 및 그 전자 장치의 제어 방법 |
US11949985B2 (en) | 2020-11-25 | 2024-04-02 | Samsung Electronics Co., Ltd. | Electronic device including multiple cameras and method of controlling electronic device |
WO2023043132A1 (ko) * | 2021-09-14 | 2023-03-23 | 삼성전자 주식회사 | 이미지에 보케 효과를 적용하는 전자 장치 및 그 동작 방법 |
Also Published As
Publication number | Publication date |
---|---|
US20190068886A1 (en) | 2019-02-28 |
KR102348504B1 (ko) | 2022-01-10 |
CN109428997B (zh) | 2021-12-28 |
US10764504B2 (en) | 2020-09-01 |
EP3448011A1 (en) | 2019-02-27 |
CN109428997A (zh) | 2019-03-05 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN109428997B (zh) | 用于减小多个相机的视差的方法和支持该方法的电子装置 | |
CN113454982B (zh) | 用于使图像稳定化的电子装置及其操作方法 | |
JP7185434B2 (ja) | 複数のカメラを用いて映像を取得するための電子装置及びこれを用いた映像処理方法 | |
KR20190021138A (ko) | 이미지를 이용하여 획득된 깊이 정보의 속성에 따라 이미지와 연관하여 깊이 정보를 저장하는 전자 장치 및 전자 장치 제어 방법 | |
KR20200017072A (ko) | 이미지 분석에 기반하여, 디스플레이를 통해 표시된 영상과 메모리에 저장된 영상과 관련하여 알림을 제공하는 전자 장치 및 방법 | |
KR102435025B1 (ko) | 다른 자기장의 방향을 갖는 복수의 구동부를 포함하는 카메라 모듈 | |
KR20200060118A (ko) | 디스플레이 내에 카메라 모듈이 포함된 전자 장치 및 상기 카메라 모듈 주변의 이미지를 보정하는 방법 | |
US11582391B2 (en) | Electronic device capable of controlling image display effect, and method for displaying image | |
KR20190032818A (ko) | 롤링 셔터 방식을 이용한 복수의 카메라를 포함하는 전자 장치 | |
KR102452575B1 (ko) | 광학식 이미지 안정화 움직임에 의한 이미지의 변화를 보상하기 위한 장치 및 방법 | |
KR102382871B1 (ko) | 렌즈의 포커스를 제어하기 위한 전자 장치 및 전자 장치 제어 방법 | |
KR20190019504A (ko) | 카메라 모듈에 포함된 렌즈부의 흔들림을 제어하는 전자 장치 및 전자 장치의 동작 방법 | |
US11412143B2 (en) | Electronic device and method for controlling camera motion | |
KR20210090476A (ko) | 단일 카메라로 줌 시나리오에서 화질 향상 방법과 이를 포함하는 전자장치 | |
KR20190019606A (ko) | 심도 맵을 이용하여 객체를 합성하기 위한 장치 및 그에 관한 방법 | |
KR20190087215A (ko) | 전자 장치 및 전자 장치의 카메라 자동 초점 제어 방법 | |
KR20190037532A (ko) | 자기력을 이용하여 렌즈의 위치를 고정할 수 있는 마그넷을 포함하는 카메라 모듈 및 전자 장치 | |
KR20190025373A (ko) | 복수의 이미지 센서들의 동기화 제어 방법 및 이를 구현한 전자 장치 | |
KR102330264B1 (ko) | 움직임 정보에 기반하여 동영상을 재생하기 위한 장치 및 그의 동작 방법 | |
KR20190123869A (ko) | 외부 장치의 자세 조정을 통해 복수의 카메라들을 이용하여 이미지를 획득하는 전자 장치 및 방법 | |
KR20190075292A (ko) | 다른 노출값을 갖는 복수의 영상들을 이용하여 합성 영상을 생성하는 방법 및 이를 지원하는 전자 장치 | |
KR102457559B1 (ko) | 이미지에 포함된 오브젝트에 기반하여 이미지를 보정하기 위한 전자 장치 및 방법 | |
US11917295B2 (en) | Method for correcting shaking at high magnification and electronic device therefor | |
KR20210068877A (ko) | 카메라 전환에 따른 영상 보정 방법 및 장치 | |
KR20200092762A (ko) | 전자 장치 및 이를 이용한 카메라의 가림을 인식하는 방법 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A201 | Request for examination | ||
E902 | Notification of reason for refusal | ||
E701 | Decision to grant or registration of patent right | ||
GRNT | Written decision to grant |