Workplaces/노력하는류

[ 신기한 논문 ] Depth(image) Restoration in Under-Display Time-of-Flight Imaging(camera)

노력하는류 2023. 6. 8. 19:04

------------------------------- 0608 임시 작성 ---------------------------------

 

최근 스마트폰에서 ToF 센서가 많이 이용되는 추세라고 하네요. face authentication, animated emoticons 등등... 

근데 구조적으로 display 아래 쪽에 ToF 센서가 위치함에 따라 display에 의해 reflection 이 되고, 그로 인해 실제 depth 값이 아닌 에러가 발생할 수 있다는 것 같다~ 뭐 이런 내용인 듯

 

https://ieeexplore.ieee.org/document/9606723

 

Stray-Light Mitigation for Under-Display Time-of-Flight Imagers

The next big thing in smartphone development will be under-display cameras. Conventional color cameras, implemented under-display, starting to appear for consumer products. For secure face-authentication, additional information in the form of the third dim

ieeexplore.ieee.org

논문에서는 " Unwanted reflections of the display hinder the implementation of under-display ToF cameras. " 라고 표현하네요? 

그리고 이런 구조를 under-display 라고해서 under-display-time-of-flight 라고 하네요.

물론 당연하게도, 위 문제는 ToF 에만 적용되는 문제는 아님.

 

optics 이랑 관련되어 있는건가?? 아직은 abstract 만 읽어서 자세한 내용은 전혀 모르겠지만 암튼 되게 신기했음.

 

그리고 이런 문제들은 뭔가 렌즈나 이미지 센서 구조? 자체에서 물리적으로 해결할 줄 알았는데

이런 에러들을 딥러닝을 이용해서 처리할 수 있다는게 더 신기했음.

 

아래의 논문들은 image(depth) resotration for under-display ~ 에 관한 CV 관련 논문임. 

나중에 꼭 읽어볼 예정

https://arxiv.org/abs/2003.04857

 

Image Restoration for Under-Display Camera

The new trend of full-screen devices encourages us to position a camera behind a screen. Removing the bezel and centralizing the camera under the screen brings larger display-to-body ratio and enhances eye contact in video chat, but also causes image degra

arxiv.org

https://ieeexplore.ieee.org/document/9903562

 

Depth Restoration in Under-Display Time-of-Flight Imaging

Under-display imaging has recently received considerable attention in both academia and industry. As a variation of this technique, under-display ToF (UD-ToF) cameras enable depth sensing for full-screen devices. However, it also brings problems of image b

ieeexplore.ieee.org