AI 탐구노트

메타가 SAM 2를 공개한 지  2개월이 다 되어 갑니다. 앞으로 이를 이용해 장난감 같은 기능 구현을 해 볼 생각인데 그때 객체 분할을 해야 할지도 몰라서 공개된 코드를 이용해 한번 돌려봤습니다. (참조: SAM 2 공식 깃헙) 절차는 다음과 같습니다.  1.아나콘다 가상환경 생성# 가상환경 생성$ conda create -n sam2 python=3.11 2.모델 다운로드 및 필요 패키지 설치# git clone 및 필요 패키지 설치 $ git clone https://github.com/facebookresearch/segment-anything-2$ cd segment-anything-2$ pip3 install -e . 3.사전학습 가중치 다운로드# weight 다운로드$ cd checkpoin..

FlowSAM은 영상에서 움직이는 물체를 분할하는 모델 FlowSAM은 SAM 모듈과 Optical Flow를 사용하여 영상에서 움직이는 물체를 정확하게 분할하는 모델입니다. SAM(Self-Attention Mask) 모듈은 이미지에서 움직이는 물체와 배경을 구별하는데 사용되는 Attention 메커니즘으로 이미지의 특징을 효과적으로 학습하고 모델이 움직이는 물체에 집중하도록 하여 결과적으로 정확도를 향상시키도록 합니다. Optical Flow는 프레임 간 픽셀 이동을 추적해 움직임을 감지하는데 사용되는 기술로 움직임, 여기서는 특히 저속에서의 객체를 분할하는데 도움을 줍니다. 일반적으로 이미지에서 객체 분할을 하는 것에 비해 동영상에 적용되는 것이다보니, 감지 개체의 동일성을 유지하는 부분이 중요한데..