Computer Vision

Computer Vision

• Vision의 정의
  - Vision: 시각적인 정보들의 집합
  - 시각으로 보이는 것을 숫자로 데이터화 하여 저장한 모든 것들을 포함하는 개념
  
  
• Computer Vision
  - Artificial Intelligence (AI)의 한 종류
  - vision 데이터들에서 의미 있는 정보를 추출하고 이를 이해한 것을 바탕으로 여러가지 작업을 수행
  
  - level
  

  

  - Low-level : Resize , Color Jitter , Edge detection, Segmentation by Color (e.g. watershed)
  - Mid :  Panorama Stitching , Multi-view Stereo, Depth Estimation, LIDAR
  - High : Image Classification, Object Detection, Segmentation
• Computer Graphics
  - 컴퓨터 모델을 활용하여 이미지를 렌더링하는 과정

 

컴퓨터 비전 활용 사례

• Pose Estimation
  - Action Recognition : 액션을 인지
  - Re-identification : 동영상 속 사람의 행동이 바뀌어도 계속 타겟팅
• Optical Character Recognition (OCR) : 이미지에서 글자를 추출
• Medical Image Analysis 
  - Generative Adversarial Network : 의료사진 병 알아냄
• Generative Models
  - Generative Adversarial Network : 참고 이미지에 따라 변형
  - Virtual Try-On (VITON) : 옷 착용 온라인으로 해보기
  - Text to Image Generative Model : 텍스트를 그림으로 생성
  - Image to Video : 이미지를 비디오로 바꿔줌
  - Text+Image to Video : 텍스트와 이미지를 넣으면, 동영상을 만들어줌
  - Modify Videos with Texts : 이미지를 수정
• Neural Radiance Fields ( NeRF)  : 물건 다방면으로 보기
• Images with other modalities
  - Images ↔ Text (e.g. Image Captioning) : 이미지와 텍스트를 오감
  - Image & Video ↔ Text, Audio, Depth, Heat Map, IMU : 뇌신호를 통해 이미지 생성