╭──────────────────────────────────────────╮ ╭──────────────────────────────────────────╮ │ >>>>>>>>>>>>>>> ctx_read >>>>>>>>>>>> │ │ >>>>>>>>>>>>>>> ctx_read >>>>>>>>>>>> │ ┌─────────────┐ │ >>>>>>>>>>>>>>> compress >>>>>>>>>>>> │ ┌──────────┐ ┌─────────────┐ │ >>>>>>>>>>>>>>> compress >>>>>>>>>>>> │ ┌──────────┐ │ 100K tokens │ =========>│ >>> AST >>> cache >>> signal >>> │ =========> │ ~5K tok │ │ 100K tokens │ =========>│ >>> AST >>> cache >>> signal >>> │ =========> │ ~5K tok │ └─────────────┘ │ >>>>>>>>>>>>>>> filter >>>>>>>>>>>> │ └──────────┘ └─────────────┘ │ >>>>>>>>>>>>>>> filter >>>>>>>>>>>> │ └──────────┘ │ >>>>>>>>>>>>>>> dedupe >>>>>>>>>>>> │ │ >>>>>>>>>>>>>>> dedupe >>>>>>>>>>>> │ ╔══════════════╗ ╰──────────────────────────────────────────╯ ╔══════════╗ ╔══════════════╗ ╰──────────────────────────────────────────╯ ╔══════════╗ ║ raw input ║ ─ ─ ─ ─ ─ ─ ─ ─ LeanCTX ─ ─ ─ ─ ─ ─ ─ ─ ─ ─ ║ output ║ ║ raw input ║ ─ ─ ─ ─ ─ ─ ─ ─ LeanCTX ─ ─ ─ ─ ─ ─ ─ ─ ─ ─ ║ output ║ ╚══════════════╝ ╚══════════╝ ╚══════════════╝ ╚══════════╝ ┄┄┄┄┄┄┄┄┄┄┄┄┄┄┄┄┄┄┄┄┄┄┄┄┄┄┄┄┄┄┄┄┄┄┄┄┄┄┄┄┄┄┄┄┄┄┄┄┄┄┄┄┄┄┄┄┄┄┄┄┄┄┄┄┄┄┄┄┄┄┄┄┄┄┄┄┄┄┄┄┄┄┄┄┄┄┄┄┄┄ ┄┄┄┄┄┄┄┄┄┄┄┄┄┄┄┄┄┄┄┄┄┄┄┄┄┄┄┄┄┄┄┄┄┄┄┄┄┄┄┄┄┄┄┄┄┄┄┄┄┄┄┄┄┄┄┄┄┄┄┄┄┄┄┄┄┄┄┄┄┄┄┄┄┄┄┄┄┄┄┄┄┄┄┄┄┄┄┄┄┄ ┌──┐ ┌──┐ ┌──┐ ┌──┐ ┌──┐ ┌──┐ ┌──┐ ┌──┐ ┌──┐ ┌──┐ ┌──┐ ┌──┐ ┌──┐ ┌──┐ ┌──┐ ┌──┐ ┌──┐ ┌──┐ ┌──┐ ┌──┐ ┌──┐ ┌──┐ ┌──┐ ┌──┐ ┌──┐ ┌──┐ │░░│ │░░│ │░░│ │░░│ │▓▓│ │▓▓│ │▓▓│ │░░│ │░░│ │░░│ │░░│ │░░│ │░░│ │░░│ │░░│ │░░│ │░░│ │▓▓│ │▓▓│ │▓▓│ │░░│ │░░│ │░░│ │░░│ │░░│ │░░│ │░░│ │░░│ │░░│ │░░│ ───> │▓▓│ │▓▓│ │▓▓│ ───> │░░│ │░░│ │░░│ │░░│ │░░│ │░░│ │░░│ │░░│ │░░│ │░░│ ───> │▓▓│ │▓▓│ │▓▓│ ───> │░░│ │░░│ │░░│ │░░│ │░░│ │░░│ └──┘ └──┘ └──┘ └──┘ └──┘ └──┘ └──┘ └──┘ └──┘ └──┘ └──┘ └──┘ └──┘ └──┘ └──┘ └──┘ └──┘ └──┘ └──┘ └──┘ └──┘ └──┘ └──┘ └──┘ └──┘ └──┘ file file file file read cache send tok tok tok tok tok tok file file file file read cache send tok tok tok tok tok tok ╭──────────────────────────────────────────╮ ╭──────────────────────────────────────────╮ │ >>>>>>>>>>>>>>> ctx_read >>>>>>>>>>>> │ │ >>>>>>>>>>>>>>> ctx_read >>>>>>>>>>>> │ ┌─────────────┐ │ >>>>>>>>>>>>>>> compress >>>>>>>>>>>> │ ┌──────────┐ ┌─────────────┐ │ >>>>>>>>>>>>>>> compress >>>>>>>>>>>> │ ┌──────────┐ │ 100K tokens │ =========>│ >>> AST >>> cache >>> signal >>> │ =========> │ ~5K tok │ │ 100K tokens │ =========>│ >>> AST >>> cache >>> signal >>> │ =========> │ ~5K tok │ └─────────────┘ │ >>>>>>>>>>>>>>> filter >>>>>>>>>>>> │ └──────────┘ └─────────────┘ │ >>>>>>>>>>>>>>> filter >>>>>>>>>>>> │ └──────────┘ │ >>>>>>>>>>>>>>> dedupe >>>>>>>>>>>> │ │ >>>>>>>>>>>>>>> dedupe >>>>>>>>>>>> │ ╔══════════════╗ ╰──────────────────────────────────────────╯ ╔══════════╗ ╔══════════════╗ ╰──────────────────────────────────────────╯ ╔══════════╗ ║ raw input ║ ─ ─ ─ ─ ─ ─ ─ ─ LeanCTX ─ ─ ─ ─ ─ ─ ─ ─ ─ ─ ║ output ║ ║ raw input ║ ─ ─ ─ ─ ─ ─ ─ ─ LeanCTX ─ ─ ─ ─ ─ ─ ─ ─ ─ ─ ║ output ║ ╚══════════════╝ ╚══════════╝ ╚══════════════╝ ╚══════════╝ ┄┄┄┄┄┄┄┄┄┄┄┄┄┄┄┄┄┄┄┄┄┄┄┄┄┄┄┄┄┄┄┄┄┄┄┄┄┄┄┄┄┄┄┄┄┄┄┄┄┄┄┄┄┄┄┄┄┄┄┄┄┄┄┄┄┄┄┄┄┄┄┄┄┄┄┄┄┄┄┄┄┄┄┄┄┄┄┄┄┄ ┄┄┄┄┄┄┄┄┄┄┄┄┄┄┄┄┄┄┄┄┄┄┄┄┄┄┄┄┄┄┄┄┄┄┄┄┄┄┄┄┄┄┄┄┄┄┄┄┄┄┄┄┄┄┄┄┄┄┄┄┄┄┄┄┄┄┄┄┄┄┄┄┄┄┄┄┄┄┄┄┄┄┄┄┄┄┄┄┄┄ ┌──┐ ┌──┐ ┌──┐ ┌──┐ ┌──┐ ┌──┐ ┌──┐ ┌──┐ ┌──┐ ┌──┐ ┌──┐ ┌──┐ ┌──┐ ┌──┐ ┌──┐ ┌──┐ ┌──┐ ┌──┐ ┌──┐ ┌──┐ ┌──┐ ┌──┐ ┌──┐ ┌──┐ ┌──┐ ┌──┐ │░░│ │░░│ │░░│ │░░│ │▓▓│ │▓▓│ │▓▓│ │░░│ │░░│ │░░│ │░░│ │░░│ │░░│ │░░│ │░░│ │░░│ │░░│ │▓▓│ │▓▓│ │▓▓│ │░░│ │░░│ │░░│ │░░│ │░░│ │░░│ │░░│ │░░│ │░░│ │░░│ ───> │▓▓│ │▓▓│ │▓▓│ ───> │░░│ │░░│ │░░│ │░░│ │░░│ │░░│ │░░│ │░░│ │░░│ │░░│ ───> │▓▓│ │▓▓│ │▓▓│ ───> │░░│ │░░│ │░░│ │░░│ │░░│ │░░│ └──┘ └──┘ └──┘ └──┘ └──┘ └──┘ └──┘ └──┘ └──┘ └──┘ └──┘ └──┘ └──┘ └──┘ └──┘ └──┘ └──┘ └──┘ └──┘ └──┘ └──┘ └──┘ └──┘ └──┘ └──┘ └──┘ file file file file read cache send tok tok tok tok tok tok file file file file read cache send tok tok tok tok tok tok

Trường hợp sử dụng · Các tác nhân nghiên cứu

Các tác nhân không ngừng
lặp lại chính mình.

LeanCTX cung cấp cho các tác nhân nghiên cứu bộ nhớ bền vững, có thể trích dẫn: các phát hiện được lưu trữ trong kho kiến thức với nguồn gốc, EvidenceLedger giữ nguyên các trích dẫn kèm nguồn, và việc đọc lại được lưu vào bộ nhớ đệm chỉ tốn ~13 tokens. Tác nhân của bạn thu thập một lần, ghi nhớ qua các phiên, và trả lời bằng trích dẫn thay vì phải thu thập lại.

Xây dựng với ngữ cảnh bền vững Xem mô hình bộ nhớ

Vấn đề

Nó khiến bạn mất bao nhiêu hôm nay.

Mỗi phiên bắt đầu từ con số không

Các phát hiện của ngày hôm qua đã mất. Tác nhân phải đọc lại các nguồn tương tự, suy luận lại các kết luận giống nhau, và tính phí bạn hai lần.

Câu trả lời không có biên lai

Một bản tóm tắt không kèm nguồn là một rủi ro. Kết quả nghiên cứu cần trích dẫn nguyên văn kèm nguồn gốc.

Nguồn tài liệu làm đầy cửa sổ ngữ cảnh

Hai mươi file PDF mở không thể vừa trong một cửa sổ ngữ cảnh. Các tác nhân cần truy xuất có xếp hạng những gì quan trọng, chứ không phải mọi thứ cùng lúc.

Đã triển khai hôm nay

Các khả năng mà thực hiện công việc đó.

Mọi thứ bên dưới đều được tích hợp trong binary mã nguồn mở ngay hôm nay. Không mục roadmap, không danh sách chờ.

Các công cụ của bạn LeanCTX Mô hình

EvidenceLedger trích dẫn nguyên văn kèm nguồn gốc, sẵn sàng để trích dẫn

Kho kiến thức các phát hiện, quyết định và trở ngại được lưu trữ qua các phiên

chế độ facts / quotes / transcript nguồn tài liệu được cô đọng thành các đơn vị có thể quy nguồn

Truy xuất Semantic + BM25 truy xuất dựa trên ý nghĩa trên mọi nội dung thu thập được

~13-token đọc lại việc xem xét một nguồn đã biết gần như miễn phí

Bắt đầu nhanh

Từ con số không đến lợi ích đầu tiên.

# thu thập một nguồn làm bằng chứng trích dẫn

$ ctx_url_read("https://arxiv.org/abs/2310.08560", mode="quotes")

# ghi nhớ một phát hiện

$ lean-ctx knowledge remember "accuracy falls 98→64% with window noise" --category discovery --key context-rot

# nhớ lại qua các phiên

$ lean-ctx knowledge recall "context rot"

# tìm kiếm ngữ nghĩa trên toàn bộ kho dữ liệu

$ ctx_semantic_search("why does accuracy fall with window size")

Đi sâu hơn

Một hướng dẫn. Hai hành trình. Tài liệu tham khảo đầy đủ.

hướng dẫn Các khái niệm về trí nhớ Các phiên, danh mục kiến thức và khả năng gợi nhớ. hành trình Hành trình nghiên cứu web Từ nguồn đến câu trả lời được trích dẫn. hành trình Hành trình trí nhớ & kiến thức Điều gì tồn tại, ở đâu và cách truy vấn nó. tài liệu tham khảo Các công cụ kiến thức ctx_knowledge, ctx_semantic_search và các công cụ khác.

FAQ

Các câu hỏi nhóm thường hỏi trước khi áp dụng.

Làm thế nào LeanCTX giữ cho nghiên cứu có thể trích dẫn?

EvidenceLedger lưu trữ các đoạn trích nguyên văn cùng với URL nguồn hoặc tệp của chúng. Các câu trả lời có thể tham chiếu đến ID bằng chứng, vì vậy mọi tuyên bố đều truy ngược về một bản gốc bạn có thể mở được.

Trí nhớ có tồn tại sau khi khởi động lại và các phiên mới không?

Có. Các phát hiện sống trong kho kiến thức cục bộ với các danh mục (khám phá, quyết định, vật cản…) và được khôi phục vào mọi phiên mới tự động.

Nó có thể xử lý các kho dữ liệu lớn không?

Các nguồn được thu thập sẽ được loại bỏ trùng lặp, nén và lập chỉ mục bằng BM25 cùng với một knowledge graph. Recall trả về ngữ cảnh đã xếp hạng, có giới hạn ngân sách, không bao giờ là toàn bộ corpus cùng lúc.

Giành lại quyền kiểm soát ngữ cảnh của bạn.

Miễn phí sử dụng cục bộ, mãi mãi. CI thực thi nó. Một binary, mười phút để đạt được lợi ích đo lường đầu tiên.

Xây dựng với ngữ cảnh bền vững Xem các gói dịch vụ

Các tác nhân không ngừnglặp lại chính mình.