Image Sensing Pipeline

• Scene Radiance: 장면에서 발생하는 빛이 입력됨.
• Camera Body: 광학 시스템, 조리개, 셔터를 통해 빛을 조절하고 센서에 전달함.
• Sensor Chip: 빛을 전기 신호로 변환하고, 디지털 데이터(RAW)로 변환함.
• Image Signal Processor (ISP): 디지털 데이터를 처리하여 최종 이미지(JPEG)를 생성함.

The Ultimate Camera

Ideal camera with

• Infinite resolution
• Infinite zoom control
• Desired objects are in focus
• No noise
• No motion blur
• Infinite dynamic range

∴ 하지만, 위의 이상적인 특징들을 모두 갖고 있는 카메라는 없음…

⇒ Algorithms으로 camera의 물리적 한계를 극복하고자 함.

⇒ Computational camera and photography 필요!!

Camera Calibration

Geometric Calibration

• 기하학적인 Calibration
• 세상에 있는 3D coordinates와 픽셀의 coordinates가 얼마나 연관이 있는지?