AI 탐구노트

최근 인공지능 기술, 특히 LLM의 발전은 자연어 처리(NLP)와 다양한 AI 분야에 혁신적인 변화를 가져오고 있습니다. 이 모델들은 문서 요약, 코드 생성, 질의응답 시스템 등 광범위한 응용에 활용되고 있습니다. 특히 대규모 데이터를 한 번에 이해하고 처리할 수 있는 능력은 중요한 성능 지표로 자리 잡았습니다. 그러나 LLM이 한 번에 다룰 수 있는 입력 길이(컨텍스트 윈도우)는 여전히 제한적이며, 이를 극복하려는 시도가 활발히 진행되고 있습니다.최근 업계는 모델의 컨텍스트 윈도우 크기를 확장하는 데 많은 노력을 기울이고 있습니다. GPT-4, Claude-3, Gemini-Pro 등은 최대 1백만 토큰까지 확장할 수 있다고 주장하지만, 실제 성능은 기대에 못 미치는 경우가 많습니다. 또한 윈도우 크기..

중국의 생성형 AI 서비스 DeepSeekDeepSeek는 중국의 생성형 AI 서비스입니다. ChatGPT처럼 텍스트나 데이터를 입력하면 사람처럼 자연스러운 답변을 생성해 주는 AI 서비스이죠. OpenAI나 Google 등과는 달리 학습 최적화 기술을 제대로 적용해 적은 리소스에서 수준높은 AI를 구현해 한 때 아주 큰 주목을 받았었습니다. DeepSeek의 한국 내 서비스 - 과다한 개인정보 수집 논란 지난 1월, 딥시크 전세계 앱 서비스를 진행하면서, 한국에서도 큰 열풍이 불었었죠. 무료로 CahtGPT 같은 서비스를 사용할 수 있게 되었다는 측면에서 많은 사람들이 이 서비스를 이용해 보려고 했었습니다. 그러다보니 사회적으로 이슈가 됐었는데 하필 거기에 더해 한국에서의 개인정보 수집 방식 때문에 ..