AI 탐구노트

시간이 지남에 따라 변화하는 비디오 (타임랩스 영상)를 생성하는 모델 MagicTime은 시간이 지남에 따라 변화하는 비디오 (타임랩스 영상)를 생성하는 모델입니다.  별의 움직임이나 밀물과 썰물 현상, 꽃의 개화나 나비의 우화 과정 등을 담기 위해 카메라 혹은 카메라 보조장치에서 제공하는 타임랩스 기능을 이용하는 경우가 많이 있는데 그런 영상을 만들어 주는 모델이라고 보면 됩니다.  기존의 영상 생성 모델들이 물리적인 지식이 반영되지 못해 움직임이 제한되고 다양성이 부족했던 것에 반해 MagicTime은 그런 부분들을 해결하고 있습니다. 제대로 된 영상 하나를 생성하기 위해 많은 시간과 노력, 시행착오가 필요했던 분야였는데...  물론 실제 느낌이 어느 정도까지 나올지는 모르겠지만 그런 작업들을 대체할..

마이크로소프트에서 발표한 경량 언어모델 마이크로소프트에서 Phi-3를 발표했습니다. (2024.4) phi-3는 SLM(Small Language Model)으로 이번에는 mini, small, medium 등 여러 버전으로 소개되었는데 각각 3.8B, 7B, 14B의 매개변수를 가지는 모델입니다. 이 가운데 mini 버전의 경우, 3.3조개의 토큰을 이용해 훈련되었고 4K 및 128K 토큰의 컨텍스트 길이를 지원하는 사전 학습모델이 HuggingFace에 올려져 있어 테스트 해 볼 수 있습니다.  작고 가볍지만 GPT-3.5보다 전반적으로 성능이 더 뛰어나다는데, 그 이유는 고품질의 데이터셋을 학습하고, 인간 피드백(RLHF)를 이용한 강화학습, 자동화된 테스트 및 평가와 레드팀을 통한 안전성 검토 등..

사용자 인터페이스(UI)와 인포그래픽을 이해하는데 특화된 비전 언어 모델  사람들이 기계(주로 컴퓨터)와 상호작용을 할 때 필요한 것이 UI이고 정보를 시각적으로 쉽고 효율적으로 파악하기 위해 사용하는 것이 인포그래픽이죠. ScreenAI는 구글에서 발표한 사용자 인터페이스(UI)와 인포그래픽을 이해하는데 특화된 비전 언어 모델입니다. 이를 이용하면 사용자가 웹브라우저를 통해 접근한 사이트 내용이나 스마트폰 화면 등 우리가 보는 화면의 내용을 AI가 이해할 수 있게 되고 이를 통해 사용자 경험을 개선하는데 활용할 수 있게 됩니다. ScreenAI는 이전 모델인 PaLI를 기반으로 개선됐으며 유연한 패치 전략(이미지를 부분으로 나눠 처리하는)을 적용해 다양한 종횡비의 이미지에서 작동하도록 했습니다. 또 사..

AI 언급 기업 급증, 그러나 두려움도 커져최근 미국 기업들이 AI를 언급하는 비율이 크게 증가했는데, 그 가운데 AI를 위협으로 보는 비율이 2022년 38.3%에서 올해는 87%로 급증했다고 하며 특히 미디어, 소프트웨어, 통신 분야 기업들이 AI를 가장 큰 리스크로 꼽고 있습니다. (조선일보) AI 에이전트의 등장: 결제의 새로운 혁신AI 에이전트가 사람 대신 결제까지 처리할 수 있는 시스템이 개발되는데, 미국 스타트업 스카이파이어가 이 시스템을 도입하여, AI가 지정된 한도 내에서 디지털 지갑을 이용해 자율적으로 결제할 수 있도록 했다고 합니다. (AI타임스) 삼성전자 AI TV: 스마트홈의 중심으로 자리매김삼성전자는 AI TV를 스마트홈 허브로 발전시켜, 다양한 IoT 기기를 통합 제어할 수 있..