Notice
Recent Posts
Recent Comments
Link
| 일 | 월 | 화 | 수 | 목 | 금 | 토 |
|---|---|---|---|---|---|---|
| 1 | ||||||
| 2 | 3 | 4 | 5 | 6 | 7 | 8 |
| 9 | 10 | 11 | 12 | 13 | 14 | 15 |
| 16 | 17 | 18 | 19 | 20 | 21 | 22 |
| 23 | 24 | 25 | 26 | 27 | 28 | 29 |
| 30 | 31 |
Tags
- 오픈소스
- 휴머노이드 로봇
- 멀티모달
- OpenCV
- AI 기술
- 인공지능
- 일론 머스크
- 오블완
- OpenAI
- 다국어 지원
- 생성형 AI
- Stable Diffusion
- 시간적 일관성
- 트랜스포머
- ubuntu
- LLM
- 확산 모델
- 강화 학습
- 메타
- 티스토리챌린지
- ChatGPT
- 우분투
- tts
- TRANSFORMER
- AI
- 딥러닝
- 아두이노
- LORA
- PYTHON
- 오픈AI
Archives
- Today
- Total
목록ctrl-adapter (1)
AI 탐구노트
CTRL-Adapter
텍스트를 이용한 이미지 생성 모델에서 깊이 지도, 스케치, 사람의 자세 등의 조건을 추가하기 위해 ControNet(*1)을 사용하는 경우가 많습니다. 이미지의 경우는 대부분 잘 작동하지만 비디오에 적용하기 위해서는 각 프레임 별로 이 작업이 이뤄져야 하고 프레임 간에는 일관성을 보장하기 어렵다는 문제가 있었죠. CTRL-Adapter는 ControlNet을 효율적으로 재사용하여 이미지 또는 비디오 확산모델에 다양한 공간 제어 조건을 추가할 수도 있도록 만든 프레임워크입니다. 이를 통해 이미지와 비디오 생성 시 더 세밀한 제어가 가능해지고 연산을 위한 자원도 절약할 수 있습니다. 이 프레임워크는 미리 훈련된 ControlNet의 특성을 새로운 확산 모델에 맞게 조정하는 어댑터 모듈을 훈련시키는데, 이는..
AI 기술
2024. 8. 14. 22:06