LokalTube

Beim Abspielen lädt der YouTube-Player über youtube-nocookie.com; dabei werden Daten an Google übertragen. Datenschutz

[Outdated] Gemma3:4B (Vision) Running Exclusively on AMD Ryzen™ AI NPU (FLM CLI Mode)

FastFlowLM · Vorführung · Fortgeschritten

Auf YouTube öffnen

Kurz gesagt

Das Video zeigt Gemma3:4B mit Bildverständnis auf der AMD Ryzen AI NPU im Kommandozeilenmodus von FastFlowLM und gilt laut Titel als veraltet. Ein Kommentar geht auf Benchmarks und die Speicherbandbreite der NPU ein. Interessant für Nutzer von Ryzen-AI-Geräten.

Das lernst du

Warum es für lokale KI zählt

Es ist relevant für lokale KI, weil es zeigt, wie ein 4B-Vision-Modell ohne Cloud und ohne klassische GPU auf Consumer-Hardware mit NPU laufen kann.

Hardware: Consumer-GPU, etwa 8 GB VRAM, Modell mit 4 Mrd. Parametern.

Was dazu gesagt wurde

„And you’re right that bandwidth is usually the bottleneck.“

Reddit · 2025

Woher die Empfehlung kommt

1 Person hat dieses Video 1× empfohlen, in 1 verschiedenen Monaten, in r/LocalLLaMA.

Hardware & Beschaffung Runtimes & Backends Multimodal lokal

Ausrüstung zum Thema

Als Amazon-Partner verdient die Ranaro GmbH an qualifizierten Verkäufen. Die Links führen zu Suchergebnissen bei Amazon; für dich ändert sich der Preis nicht.

Ähnliche Videos