Llama: lokalna sztuczna inteligencja i API na komputerze

Uruchamiaj otwarte modele na własnym komputerze i udostępniaj je swoim aplikacjom.

llama.app
Llama screenshot

Do czego służy Llama.app? Proste wyjaśnienie

Llama.app udostępnia bezpłatną aplikację open source do uruchamiania modeli językowych na własnym komputerze. Pobierasz model, rozmawiasz z nim w przeglądarce albo udostępniasz go innym programom przez lokalne API. Witryna przedstawia projekt jako dzieło zespołu llama.cpp i Hugging Face.

To rozwiązanie dla osób szukających lokalnej sztucznej inteligencji do pisania i analizy oraz dla programistów podłączających edytory lub agentów. Zakres możliwości zależy od wybranego modelu.

Dobór modelu do pamięci komputera

Rozmiar modelu i długość kontekstu wspólnie obciążają pamięć. Samo zmieszczenie pliku na dysku nie oznacza, że długa rozmowa będzie działała sprawnie.

Llama proponuje modele odpowiednie dla urządzenia i automatycznie ustawia parametry. Oficjalny katalog podaje różne zalecenia pamięci dla poszczególnych modeli. Nie jest to jeden minimalny wymóg dla całej aplikacji.

Modele korzystają ze wspólnej pamięci podręcznej Hugging Face i są usuwane z pamięci operacyjnej po okresie bezczynności. Niewielki instalator aplikacji na Maca nie obejmuje wag modeli, które wymagają dodatkowego miejsca.

Instalacja lokalnej AI i pierwsza rozmowa

Pobierz i uruchom aplikację dla Maca lub Windows 11. Na Macu dostępne jest także polecenie brew install --cask llama-app.

Otwórz ikonę na pasku menu albo w zasobniku systemowym. Kliknij strzałkę pobierania przy polecanym modelu. Po pobraniu wybierz model, dobierz okno kontekstu do pamięci i otwórz czat. Zacznij od krótkiego pytania, a odpowiedź sprawdź przed właściwą pracą.

Instrukcja pierwszego uruchomienia pokazuje tę ścieżkę. Dla Linuksa witryna wskazuje instalację narzędzia wiersza poleceń.

Praca z plikami i historia rozmów

Interfejs internetowy obsługuje obrazy i PDF-y z modelami wizyjnymi oraz MP3/WAV z modelami przyjmującymi dźwięk. Model tekstowy nie zyskuje automatycznie tych możliwości.

Dodaj zgodny plik i poproś o konkretny wynik, na przykład listę dat lub streszczenie. Porównaj odpowiedź z dokumentem. Wyszukiwanie rozmów, rozgałęzienia oraz import i eksport JSON ułatwiają zachowanie przydatnych rezultatów.

Lokalne API dla edytorów i agentów

W zgodnym kliencie ustaw adres http://localhost:9931/v1. Rzeczywisty identyfikator modelu sprawdzisz przez GET /v1/models.

Dokumentacja API opisuje odpowiedzi strumieniowe, wyniki strukturalne, wywoływanie narzędzi i endpoint Messages zgodny z Anthropic. Llama udostępnia model, natomiast osobny agent zarządza działaniami i narzędziami. Przydatność takiego zestawu trzeba ocenić na własnych zadaniach.

Koszty, prywatność i ograniczenia

Stan na 27 października 2026 r.: aplikacja jest bezpłatna, a witryna nie zapowiada opłat za tokeny lokalnego API. Użytkownik zapewnia jednak sprzęt, dysk i energię. Licencja MIT aplikacji nie zastępuje licencji pobieranych modeli.

Po pobraniu wymaganych elementów lokalne generowanie działa offline. Aktualizacje i narzędzia zewnętrzne mogą potrzebować internetu. Repozytorium Windows deklaruje brak telemetrii. Serwer domyślnie przyjmuje połączenia tylko z własnego komputera; udostępnienie go w sieci zmienia ten zakres. Inne aplikacje mają własne zasady przetwarzania danych.

Najczęstsze pytania

Czy potrzebny jest abonament?

Obecnie aplikacja jest oferowana bezpłatnie. Usługi zewnętrzne mogą być rozliczane osobno.

Czy mogę pracować bez internetu?

Tak, gdy program i model są już pobrane. Funkcje korzystające z usług online pozostają odrębne.

Ile pamięci RAM potrzebuję?

Zależy to od modelu i długości kontekstu. Zacznij od rekomendacji dla swojego urządzenia.

Czy lokalny model gwarantuje prywatność agenta?

Nie gwarantuje zachowania wszystkich podłączonych narzędzi. Sprawdź klienta, połączenia i dostęp sieciowy.

Oficjalne materiały i społeczność