AI 에이전트나 대규모 언어모델(LLM)이 작업을 수행하다가 시스템 충돌 등으로 인해 진행 중이던 모든 정보를 잃어버리는 '기억 상실증' 문제를 해결하기 위해 '매그파이 검색(Magpie Search)'이 공개되었습니다. 이 도구는 AI가 작업했던 모든 내용을 로컬에서 인덱싱하고, 필요할 때 다양한 소스에서 가장 신뢰할 수 있는 정보를 찾아 제공하여 AI의 추론(inference) 능력을 강화합니다.
매그파이 검색은 일반적인 검색 엔진과 달리 AI의 대화 기록, 로컬 파일, 지식 그래프, 벡터 저장소, 그리고 실시간 웹 등 최대 6가지 소스를 동시에 검색합니다. 정확한 문자열이나 정규식(grep), 키워드(lexical), 의미(semantic) 검색 등 다양한 방식으로 각 소스를 최적화하여 탐색하며, 이 모든 결과를 신뢰도(fact > reference > lead > stale)에 따라 융합하고 순위를 매깁니다. 특히, 중복된 정보는 하나로 통합하고, AI의 컨텍스트(context) 한도에 맞춰 결과를 정리하여 과부하를 방지합니다. 모든 과정은 사용자 기기 내에서 로컬로 진행되어 개인 정보 유출 우려 없이 안전하게 데이터를 처리합니다.
이러한 '매그파이 검색'은 기존의 검색증강생성(RAG) 방식과 차별점을 가집니다. 매그파이는 정보를 검색하고 순위를 매기는 'R(Retrieval)' 역할에만 집중하며, 자연어 답변을 생성하는 'G(Generation)' 기능은 포함하지 않습니다. 즉, 매그파이는 AI 에이전트가 스스로 정확한 정보를 찾아 추론할 수 있도록 강력한 기반을 제공하는 '똑똑한 눈' 역할을 합니다. 이를 통해 AI는 더 신뢰할 수 있는 정보를 바탕으로 복잡한 작업을 수행하고, 사용자는 AI의 '기억 상실'로 인한 불편함 없이 일관된 작업 흐름을 유지할 수 있게 됩니다.