Context.dev가 인공지능(AI) 에이전트와 애플리케이션이 웹 데이터를 실시간으로 활용할 수 있도록 돕는 새로운 API를 선보였습니다. 이 API는 복잡한 스크래핑 인프라 없이도 웹 페이지를 깨끗한 마크다운(Markdown) 또는 HTML 형태로 스크래핑하고, 특정 도메인에서 브랜드 로고, 색상, 폰트 같은 정보를 추출하며, 사이트맵 크롤링 등 다양한 기능을 제공합니다. 이를 통해 AI 제품 개발자들이 웹에서 필요한 정보를 손쉽게 얻고 활용할 수 있게 되었습니다.
Context.dev는 AI 제품 및 에이전트를 위한 웹 컨텍스트(Web Context) API로, 모든 URL을 스크래핑하고 웹사이트를 크롤링할 수 있습니다. 특히 웹 페이지를 대규모 언어모델(LLM)이 바로 이해할 수 있는 마크다운 형식으로 변환하거나, 사용자가 정의한 스키마에 맞춰 구조화된 데이터를 추출하는 기능이 돋보입니다. 또한 스크린샷 캡처, 로고, 색상, 폰트, 스타일 가이드 등 기업 관련 데이터를 검색하고, 거래 내역 설명까지 풍부하게 제공하여 AI가 웹 환경을 더 깊이 이해하도록 돕습니다. TypeScript, Python, Ruby용 타입스크립트 개발 키트(SDK)를 제공하며, 5,000개 이상의 기업이 이미 사용하고 있을 정도로 신뢰를 얻고 있으며, 대부분의 팀이 10분 이내에 통합할 수 있을 만큼 사용 편의성도 높습니다.
이러한 서비스는 AI 기술이 발전함에 따라 웹 데이터의 중요성이 더욱 커지는 현 상황에서 매우 의미 있는 솔루션입니다. 기존에는 AI가 웹 데이터를 활용하기 위해 복잡한 스크래핑 도구를 구축하거나, 데이터 정제에 많은 시간을 할애해야 했지만, Context.dev는 이러한 과정을 단일 API로 간소화하여 개발 효율성을 극대화합니다. 이는 AI 에이전트가 더 정확하고 풍부한 정보를 바탕으로 의사결정을 내리고, 사용자에게 더 나은 경험을 제공할 수 있도록 지원하며, 궁극적으로 AI 기반 서비스의 혁신을 가속화하는 중요한 발판이 될 것입니다.