Reviewed-on: #124
kebab — Local-first Knowledge Base
kebab 는 개인용 로컬 knowledge base + RAG 도구다. Markdown / PDF / 이미지를 한 곳에 색인하고, 의미 검색 + page-단위 citation 포함 LLM 답변을 단일 binary 로 제공한다. 모든 추론은 로컬 (Ollama / fastembed) 에서 돌아간다. 대상 하드웨어: M4 48GB MacBook 1대, 사용자 1명.
사전 요구
- Rust toolchain ≥ 1.85 (workspace 가 edition 2024 + resolver 3 사용). rustup 권장.
- Ollama —
kebab ask와 이미지 OCR/caption 가 사용.https://ollama.com/download에서 설치 후ollama serve실행. 기본 LLM 은 gemma4 계열 (ollama pull gemma4:e4b) — OCR / caption 도 같은 family 라 모델 하나만 pull 하면 됨. 더 큰 variant 원하면gemma4:26b등으로 config override. config 의[models.llm].endpoint에 host:port 명시. - 빌드 디스크 — 첫 빌드 시
target/가 6–10 GB (Lance + DataFusion + fastembed). 여유 확인. - fastembed 모델 — 첫
kebab ingest시multilingual-e5-small(~470 MB) 자동 다운로드.
설치
표준 경로는 cargo install — ~/.cargo/bin/kebab 가 PATH 에 있는지만 확인하면 끝.
# 1) repo clone
git clone https://gitea.altair823.xyz/altair823-org/kebab.git
cd kebab
# 2) binary 빌드 + 설치 (~/.cargo/bin/kebab)
cargo install --path crates/kebab-cli --locked
# 3) PATH 확인 (아직 추가 안 했으면 ~/.bashrc / ~/.zshrc 에 추가)
which kebab # → /Users/<you>/.cargo/bin/kebab 같은 경로
kebab --version # → kebab 0.1.0
git URL 직접 install 도 가능 (clone 없이):
cargo install --git https://gitea.altair823.xyz/altair823-org/kebab.git --bin kebab --locked
업데이트는 git pull && cargo install --path crates/kebab-cli --locked --force 또는 git URL 형식의 경우 cargo install --git ... --force.
제거는 cargo uninstall kebab-cli. 이 명령은 binary 만 지우고 워크스페이스 데이터는 그대로 남는다. 데이터까지 정리하려면 kebab reset --all --yes (config + data + cache + state 4 개 XDG 경로 모두 wipe — irreversible, 재시작 시 kebab init 다시 실행). 부분 wipe 는 kebab reset --data-only (config 보존), kebab reset --vector-only (Lance + embedding_records 만, 다음 ingest 가 re-embed) 등.
Quick start
# 첫 실행 — XDG 경로에 데이터 디렉토리 + config.toml 생성
kebab init
# config 손보고 — workspace.root, 모델 endpoint 등 설정 (지원 형식은 md / png / jpg / pdf 로 고정)
${EDITOR:-vi} ~/.config/kebab/config.toml
# 색인 (Markdown / 이미지 / PDF 모두 한 번에)
kebab ingest
# 검색 (citation 의 source_span 이 매체별로 line / region / page)
kebab search "Markdown chunking 규칙" --mode hybrid
# 질문 (Ollama 필요, PDF 인용 시 page 번호 surface)
kebab ask "내 KB 설계에서 저장소 전략은?"
# Ratatui 셸 (Library + Search + Ask + Inspect 패널, desktop 진행 중)
kebab tui
# 헬스 체크 (config 경로 / 데이터 디렉토리 쓰기 가능 여부)
kebab doctor
격리된 임시 워크스페이스로 돌려보는 절차는 docs/SMOKE.md — --config <path> 로 분리. 이미지 / PDF fixture 가 필요하면 두 example 바이너리 (cargo run --release --example gen_smoke_pdf -p kebab-parse-pdf / gen_smoke_png -p kebab-parse-image) 로 시스템 dep 없이 in-tree 생성 가능.
설치 없이 dev 흐름으로 돌려볼 때는 cargo run --release -p kebab-cli -- <subcommand> 또는 cargo build --release && ./target/release/kebab <subcommand>.
명령
| 명령 | 동작 |
|---|---|
kebab init |
XDG 경로에 데이터 디렉토리 + config.toml 생성 |
kebab ingest [<path>] |
Markdown / 이미지 / PDF 색인 (idempotent). TTY 에서는 stderr 진행 바, non-TTY (CI / pipe) 는 stderr 한 줄씩, --json 은 stdout 에 ingest_progress.v1 라인 streaming 후 마지막에 ingest_report.v1. Ctrl-C 한 번이면 현재 asset 마무리 후 abort (부분 commit 보존, idempotent re-run), 두 번째 Ctrl-C 는 hard exit. Markdown title 이 frontmatter 에 없어도 첫 H1 → H2 → 첫 paragraph 80 자 → 파일명 순으로 자동 채움 (parser_version md-frontmatter-v2) — 기존 색인된 doc 도 다음 ingest 에서 새 title 로 갱신. Incremental (p9-fb-23): 두 번째 이후의 ingest 는 변하지 않은 doc (blake3 + parser/chunker/embedder version 모두 동일) 의 parse/chunk/embed/vector upsert 를 자동 스킵. final summary 에 N unchanged 카운트 표시. --force-reingest 로 skip 무시 강제 재처리. 지원 형식 (extractor 자동 결정 — config 에 명시 불가): Markdown (.md), 이미지 (.png / .jpg / .jpeg, OCR + caption), PDF (.pdf). 다른 확장자는 자동 skip — IngestItem.warnings 에 사유 ("unsupported media type: .docx" 등), IngestReport.skipped_by_extension 에 카운트 분류, CLI / TUI summary 에 breakdown 표시. |
kebab search --mode {lexical,vector,hybrid} "<query>" [--no-cache] |
검색. hybrid는 RRF fusion, citation 포함. 같은 process 안에서 동일 query (NFKC + trim + lowercase 정규화) 반복 시 in-process LRU 캐시 hit (capacity = [search] cache_capacity, default 256). --no-cache 로 강제 bypass — 디버깅용. ingest commit 발생 시 kv['corpus_revision'] bump 으로 모든 entry 자동 stale |
kebab list docs |
색인된 문서 목록 |
kebab inspect doc <id> / kebab inspect chunk <id> |
raw record 보기 |
kebab ask "<query>" [--show-citations / --hide-citations] [--session <id>] [--stream] |
RAG 답변 + 근거 인용. 답변 후 근거: block 으로 full path / line range / score 한 줄씩 (default ON — --hide-citations 로 끄기, pipe 시 유용). 근거 부족 시 거절. Ollama 필요. --session <id> 로 multi-turn — 첫 호출에서 SQLite chat_sessions 에 자동 생성, 이후 호출은 prior turns 를 history 로 받아 follow-up. session id 는 사용자 지정 (e.g. kb-rust-async-2026-05) — kebab reset --data-only 로 모든 session wipe. --stream (p9-fb-33) 로 ndjson answer_event.v1 event (retrieval_done → token* → final) 를 stderr 에 흘리고 stdout 마지막 줄에 기존 answer.v1 — agent 가 token 즉시 소비 가능 |
kebab doctor |
설정/모델/DB 헬스 체크 |
kebab tui |
Ratatui 셸 (Library + Search + Ask + Inspect 패널, desktop 진행 중). Library 에서 r 키로 background ingest 시작 — 화면 하단 status bar 가 진행 표시, 완료/abort 시 final 라인 잠시 유지 후 자동 hide. ingest 진행 중 Esc / Ctrl-C 가 cancel signal (그 외에는 quit). vim-style mode (header 우측 -- NORMAL -- / -- INSERT --) — Library/Inspect 는 자동 NORMAL, Search/Ask 는 자동 INSERT. i 로 Normal→Insert (모든 pane — p9-fb-21), Esc 로 Insert→Normal 어디서나. mode-authoritative dispatch — Search 의 j/k/o/g, Ask 의 e/j/k 는 NORMAL 모드에서만 명령으로 동작, INSERT 에서는 입력 문자로 typing. (Search 의 chunk inspect 키는 i→o 로 rebind — i 가 universal Insert toggle.) F1 로 cheatsheet popup (현재 pane 의 키 매핑 + global 토글 표) — Esc / F1 로 닫기. Search 패널은 200ms debounce 후 background worker 가 검색 — 키 입력으로 UI freeze 안 됨, 사용자가 계속 타이핑하면 stale 결과 자동 폐기 (generation counter). Ask 패널은 multi-turn — 같은 conversation 안에서 Q1/A1, Q2/A2 transcript 누적, 다음 질문이 이전 턴을 history 로 받아 답변. 답변 본문은 markdown 렌더 (bold/italic/inline code/heading/list/code fence/table/blockquote, raw **bold** 가 실제 굵게 표시). Ctrl-L 로 새 conversation 시작. Search 의 g 키가 $EDITOR (기본 vi) 로 hit 의 citation 위치 열기 — 종료 후 TUI 화면이 자동으로 깨끗이 redraw. CLI kebab ask 는 raw markdown 그대로 (terminal 호환성 위해). Library 의 doc-list 가 한글 / 일본어 / 중국어 (CJK) 제목을 wide-char 정확한 column width 로 truncate — 한글 제목이 한 줄을 넘기지 않음 (CJK 1 자 = 2 col). Search/Ask/Filter 입력의 cursor 가 wide char 위에서 column 단위로 정렬 — 한글 입력 시 caret 이 글자 옆에 정확히 놓임. ← / → 로 입력 문자열 중간 cursor 이동 (한글 한 글자 = 2 column 이라도 한 번에 이동), Home / End 로 양 끝 점프, Delete 로 cursor 위치 char 삭제 — 모든 input pane (Ask / Search / Library filter overlay) 동일 (p9-fb-22). Ask 트랜스크립트는 새 답변이 viewport 아래로 누적될 때 자동으로 tail 을 따라감 (auto-scroll); j / k 로 위로 스크롤하면 freeze, Shift-G 로 다시 bottom + auto-tail 재개. 화면 하단 hint line 은 한국어 동사구로 ("위로" / "아래로" / "필터" / "타이핑 검색어" / "Esc 로 NORMAL 모드" / "i 입력모드" 등) + 현재 (pane, mode) 조합에 맞춰 자동 분기, 첫 fragment 가 항상 F1 도움말 (cheatsheet 발견성 보장). 모든 모드에서 항상 떠 있는 상태바 — kebab v<version> │ <pane> │ <docs> docs │ <state> (state: streaming/searching/indexing/idle, ingest 진행 중에는 progress 가 같은 자리에 흡수됨). Ask 진입 시 conversation id 8 자 prefix 도 함께 표시. Ask 트랜스크립트와 Inspect 양쪽에서 PgUp / PgDn 으로 10 줄씩 페이지 스크롤. Library 의 doc list 위에는 TITLE / TAGS / UPDATED / CHUNKS 컬럼 헤더 행 표시 (display-width 정렬, Hangul / CJK 안전). |
kebab reset [--all / --data-only / --vector-only / --config-only] [--yes] |
XDG 데이터 wipe. Irreversible. TTY 면 confirm prompt, 아니면 --yes 필수. --vector-only 는 SQLite embedding_records 도 함께 truncate (orphan 방지) |
kebab eval run / compare |
golden query 회귀 측정 |
kebab schema [--json] |
introspection — wire schemas / capabilities / models / stats 한 번에. --json 은 schema.v1 wire; 사람 모드는 서식 출력. |
kebab ingest-file <path> |
단일 파일 ingest (workspace 외부 가능). 바이트는 <workspace.root>/_external/<hash12>.<ext> 로 copy. .kebabignore 매치 시 stderr warn 후 진행 (explicit ingest 가 bypass intent). |
kebab ingest-stdin --title <T> [--source-uri <URI>] |
stdin 의 markdown 본문 ingest. frontmatter (title + source_uri) 자동 prepend. v1 markdown only. |
kebab mcp |
MCP (Model Context Protocol) stdio server. agent host (Claude Code / Cursor / OpenAI Agents) 가 spawn 하여 tool 호출 (search / ask / schema / doctor / ingest_file / ingest_stdin). --config honor. |
모든 명령에 --json 플래그. 출력은 frozen wire schema v1 (schema_version 항상 포함, 예: ingest_report.v1, ingest_progress.v1, search_hit.v1, answer.v1, doctor.v1, reset_report.v1, schema.v1). --json 모드에서 fatal error 는 stderr 에 error.v1 ndjson 으로 emit (exit code 0/1/2/3 unchanged).
글로벌 플래그: --readonly (또는 KEBAB_READONLY=1) — 모든 write-path 명령 (ingest / ingest-file / ingest-stdin / reset) 을 비활성화, exit 1. --quiet — 진행 바 / hint 등 human-readable stderr 억제 (exit code / stdout 출력은 그대로). KEBAB_PROGRESS=plain — TTY 가 없는 환경에서도 진행 상황을 plain-text 한 줄씩 stderr 로 출력 (spinner 대신).
논리 아키텍처
flowchart TB
user(["사용자"])
subgraph UI["UI binary"]
cli["kebab CLI"]
tui["kebab TUI"]
end
subgraph App["Facade"]
app["kebab-app"]
end
subgraph Pipeline["도메인 + 파이프라인"]
parse["parse-md / parse-pdf / parse-image"]
chunker["chunker (md-heading-v1, pdf-page-v1)"]
embedder["embedder (fastembed multilingual-e5-small)"]
retriever["retriever (lexical / vector / hybrid RRF)"]
rag["RAG pipeline"]
end
subgraph Store["저장소"]
sqlite[("SQLite + FTS5")]
lance[("LanceDB")]
assets[("asset bytes")]
end
subgraph External["외부"]
fs[("workspace files")]
ollama[("Ollama HTTP")]
end
user --> cli
user --> tui
cli --> app
tui --> app
app --> parse
app --> chunker
app --> embedder
app --> retriever
app --> rag
fs --> parse
parse -. vision OCR / caption .-> ollama
parse --> sqlite
parse --> assets
chunker --> sqlite
embedder --> lance
retriever --> sqlite
retriever --> lance
rag --> retriever
rag --> ollama
kebab-app 가 facade — UI binary 가 store / parse / search / llm / rag 를 직접 참조하지 않는다 (frozen 설계 §8). 자세한 crate-level 의존성 + 디렉토리 + 핵심 기술 결정은 docs/ARCHITECTURE.md.
Configuration
~/.config/kebab/config.toml—kebab init가 XDG 경로에 생성.[workspace](root, exclude — include 필드는 제거됨, 지원 형식은 자동 결정),[storage],[chunking],[models.embedding],[models.llm],[image.ocr],[image.caption],[search],[rag],[ui]절.[ui] theme = "dark" | "light"로 TUI 팔레트 선택 (default"dark", 알 수 없는 값은 dark fallback).[search] stale_threshold_days = 30(p9-fb-32) — search hit / RAG citation 의stale플래그 기준 (default 30 일,0으로 비활성화). 옛 config 의workspace.include = [...]은 silently 무시 + 단발 deprecation warning (p9-fb-25).--config <path>flag — 임시 워크스페이스 / 격리 테스트 시 사용. CLI / TUI 모두 honor.KEBAB_*env — 일부 키 override (KEBAB_RAG_SCORE_GATE,KEBAB_EVAL_GOLDEN,KEBAB_COMMIT_HASH등).- XDG layout:
~/.config/kebab/,~/.local/share/kebab/,~/.cache/kebab/,~/.local/state/kebab/. workspace.root경로 형식: 절대 (/foo/bar) / tilde (~/KnowledgeBase, default) / env (${XDG_DATA_HOME}/kebab) / 상대 (./notes,notes,../shared/x) 모두 가능. 상대 경로의 base 는 config.toml 자체가 위치한 디렉토리 — 사용자의cwd와 무관 (--config /tmp/cfg.toml+root = "kb"→/tmp/kb). p9-fb-05 정책.
config 예시는 docs/SMOKE.md 의 /tmp/kebab-smoke/config.toml 블록 참조.
외부 AI 통합
--json 출력 + frozen wire schema v1 가 stable contract. 통합 옵션:
- Claude Code skill — repo 의
integrations/claude-code/가 ship-ready skill.cp -r integrations/claude-code/kebab ~/.claude/skills/한 번이면 새 Claude Code 세션부터 자동 trigger (내부 시스템 / 위키 lookup / 사내 runbook 질문). multi-turn 은kebab ask --session <id> --json으로 영속 — skill 이 conversation id 관리하면 외부 agent 도--repl없이 stateful 대화 가능 (p9-fb-18). - Codex / 기타 agent host —
--json+ frozen wire schema v1 가 stable contract. 동일 패턴으로 ~50줄 wrapper 작성 가능.integrations/<host>/에 추가 PR 환영. - MCP server — stdio JSON-RPC 로
kebab-appfacade 1:1 노출.kebab mcp참조. - HTTP wrapper —
kebab serve --bind 127.0.0.1:7711(P+, local-only 가치 신중).
MCP 사용
kebab mcp 가 stdio MCP server. 6 tool: search / ask / schema / doctor / ingest_file / ingest_stdin.
Claude Code 빠른 등록 (~/.claude/mcp.json 또는 host 동등 위치):
{
"mcpServers": {
"kebab": {
"command": "kebab",
"args": ["mcp"]
}
}
}
자세한 사용법 (Cursor / OpenAI Agents / Copilot CLI config, per-tool 입출력 예시, troubleshooting, multi-turn ask + session 관리, performance / security) — docs/mcp-usage.md 참조.
비-목표
다중 사용자 SaaS / K8s / 원격 vector DB / enterprise RBAC / 실시간 협업 / 모든 파일 포맷의 완벽한 parsing / agent 임의 파일 수정 / multi-workspace / LLM-as-judge eval / CLIP 시각 embedding / kebab:// protocol handler — frozen 설계 §11 / §0 참조.
라이선스
MIT OR Apache-2.0 (workspace Cargo.toml 의 license 필드).
참고
- 진척도: HANDOFF.md
- 아키텍처: docs/ARCHITECTURE.md
- Frozen 설계: docs/superpowers/specs/2026-04-27-kebab-final-form-design.md
- Task 인덱스: tasks/INDEX.md
- 머지 후 hotfix 로그: tasks/HOTFIXES.md
- Smoke 절차: docs/SMOKE.md