GitHub 'cocoindex-io/cocoindex' 트렌딩… 코드베이스·Slack·PDF·영상을 LLM 에이전트용 최신 컨텍스트로 변환·Δ만 재처리하는 Rust 코어 인덱싱 엔진, Apache 2.0·누적 7,763스타·당일 +163

CocoIndex(cocoindex-io/cocoindex) 저장소가 GitHub 트렌딩에 올랐다. 누적 7,763스타·당일 +163으로, 코드베이스·회의록·이메일 받은편지함·Slack·PDF·영상까지 다양한 소스를 AI 에이전트와 LLM 앱이 추론할 수 있는 'continuously fresh' 컨텍스트로 변환하는 인덱싱 엔진이다.

핵심은 증분(incremental) 처리다. 변경된 부분만 다시 계산하므로 전체 코퍼스를 매 사이클 재임베딩할 필요가 없으며, 프로젝트는 'no stale batches, no context gap'을 슬로건으로 내건다. 단일 리포지터리부터 페타바이트 규모 저장소까지 확장 가능하고, 'parallel by default · delta-only by design' 구조로 설계됐다.

설치는 'pip install -U cocoindex' 한 줄이며, 'production AI agent ready in 10 minutes'를 표방한다. 사용자는 타깃 데이터에 무엇이 들어가야 하는지 선언적으로 기술하고, CocoIndex가 이를 영구 동기화하면서 변경된 Δ만 다시 계산한다.

공개된 예제 코드에서는 'import cocoindex as coco'로 임포트한 뒤 localfs·postgres 커넥터, RecursiveSplitter 텍스트 연산자, '@coco.fn(memo=True)' 메모이제이션 데코레이터를 사용한다. 메모는 hash(input)와 hash(code)로 캐시되며, 'localfs.walk_dir(src).items()'에 'coco.mount_each'로 인덱싱 함수를 적용한다. PostgreSQL 타깃에서는 'table.declare_vector_index(column="embedding")' 한 줄로 벡터 인덱스를 선언할 수 있다.

워크플로는 'Run once to backfill. Re-run anytime — only the changed files re-embed.'로 요약된다. 소스가 변경되면 CocoIndex가 영향을 받은 레코드를 식별해 조인·룩업을 따라 변경을 전파하고, 타깃을 갱신한 뒤 stale 행을 폐기한다. 변경되지 않은 데이터는 건드리지 않는다.

AI 코딩 에이전트와의 통합도 강조한다. 자체 'CocoIndex skill'을 에이전트에 주입하면 개념·API·패턴이 한 파일에 정리돼 있어 에이전트가 v1 코드를 정확히 작성할 수 있게 한다고 설명한다. React ↔ CocoIndex 멘탈 모델 가이드도 별도로 제공된다.

코어는 Rust로 작성됐고 '첫 출시부터 production-grade'를 표방한다. 병렬 청킹, 가능한 곳마다 zero-copy 변환, 한 레코드 실패가 흐름 전체를 막지 않는 failure isolation을 특징으로 든다.

라이선스는 Apache 2.0이며, 저작권은 'CocoIndex contributors' 명의다. 20개 이상의 예제가 examples 트리에서 매주 업데이트되며, 사용자는 X에서 @cocoindex_io 태그 또는 Discord '#showcase' 채널을 통해 자신의 프로젝트를 공유할 수 있다.