Selfhosting

Pamięć systemów AI — trwała wiedza i pamięć agenta

Pamięć systemów AI — trwała wiedza i pamięć agenta

Trwała wiedza wykraczająca poza pojedynczy wątek czatu.

Ta sekcja zbiera przewodniki dotyczące trwałej wiedzy i pamięci w systemach AI — w jaki sposób asystenci zachowują fakty, preferencje i skondensowany kontekst między sesjami, bez pakowania każdego tokena do jednego promptu. Tutaj „pamięć” oznacza celowe przechowywanie (fakty o użytkownikach, podsumowania, magazyny wspierane przez wtyczki), a nie pamięć RAM GPU ani wagi modeli.

System pamięci Hermes Agent: Jak realnie działa trwała pamięć AI

System pamięci Hermes Agent: Jak realnie działa trwała pamięć AI

Pamięć to różnica między narzędziem a partnerem.

Znasz ten scenariusz. Otwierasz czat z agentem AI, tłumaczysz mu swój projekt, dzielisz się swoimi preferencjami, wykonujesz część pracy i zamykasz kartę. Wracasz tydzień później i czujesz się, jakbyś rozmawiał z kimś obcym — cały kontekst zniknął, każda preferencja została zapomniana, a projekt trzeba wyjaśnić od nowa.

Szybki start Vane (Perplexica 2.0) z Ollama i llama.cpp

Szybki start Vane (Perplexica 2.0) z Ollama i llama.cpp

Własna wyszukiwarka AI z lokalnymi modelami LLM

Vane to jeden z bardziej pragmatycznych projektów w przestrzeni „AI-search z cytatami”: samodzielnie hostowany silnik odpowiedzi, który łączy wyszukiwanie na żywej sieci z modelami LLM (lokalnymi lub w chmurze), a jednocześnie pozwala zachować pełną kontrolę nad całym stackiem.

llama.swap: szybki start z przełącznikiem modeli dla lokalnych LLM zgodnych z OpenAI

llama.swap: szybki start z przełącznikiem modeli dla lokalnych LLM zgodnych z OpenAI

Gorąca wymiana lokalnych LLMów bez zmian w klientach.

Wkrótce będziesz jugglingiem w vLLM, llama.cpp i wielu innych — każdy stack na własnym porcie. Wszystkie komponenty dół wciąż wymagają jednego /v1 bazowego adresu URL; inaczej będziesz w nieskończoność przesuwać porty, profile i jednorazowe skrypty. llama-swap to /v1 proxy umieszczane przed tymi stackami.