Überblick

Beiträge zu zwei beliebten C/C++ KI-Modell-Implementierungen: Llama.cpp für große Sprachmodelle und Whisper.cpp für Spracherkennung.

Llama.cpp

Llama.cpp ist eine hochperformante C/C++-Implementierung zum effizienten Ausführen von LLaMA-Modellen auf Consumer-Hardware.

Beiträge

  • Verbesserung der Build-System-Kompatibilität
  • Dokumentationsverbesserungen
  • Bugfixes und Tests

Whisper.cpp

Whisper.cpp ist eine C/C++-Portierung von OpenAIs Whisper-Spracherkennungsmodell.

Beiträge

  • Build-System-Verbesserungen
  • Dokumentationserweiterungen
  • Cross-Platform-Kompatibilitätsfixes

Wirkung

Diese Projekte ermöglichen das lokale Ausführen modernster KI-Modelle ohne teure GPU-Hardware oder Cloud-Dienste und demokratisieren den Zugang zu KI-Technologie.