Wróć do laboratorium

JEVLAB NEWS Research & data

Silnik wnioskowania Husky od Underdog AI

AI-assisted summaries and translations. Check original sources for context and performance claims.

Firma Underdog AI zaprezentowała Husky, silnik wnioskowania lokalnego zoptymalizowany pod kątem modelu Woof. Rozwiązanie to oferuje do 4,5 razy większą prędkość niż framework MLX od Apple.

Przetłumaczone podsumowanie · AI-assisted; check the original.

Otwórz oryginał

Cały wątek w skrócie

Własne podsumowania powiązanych wpisów CHOI z pomocą AI. Zdjęcia i filmy należą do ich twórców. Twierdzenia źródła nie zostały niezależnie zweryfikowane.

  1. Wydajność dzięki specjalizacji
  2. Źródło informacji

Wydajność dzięki specjalizacji

Dzięki podejściu MSI, Husky łączy operacje macierzowe i kompresję w jedno zadanie GPU, redukując narzut komunikacyjny. Pozwala to na osiągnięcie prędkości do 730 tokenów na sekundę na urządzeniach Mac.

@choi.openai · Oryginalny wpis ↗

Źródło informacji

Więcej szczegółów na temat działania silnika oraz jego implementacji na urządzeniach Apple można znaleźć na oficjalnej stronie projektu.

Source notes

This is a linked resource, not an independent verification of performance, cost or results. Check the original for current details.

Collected
2026-09-22
Discovered via
www.threads.com

Top 10

Supporter

  1. Wallpets
  2. Walltank
  3. Chowder
  4. Falconer
  5. Lemonpod
  6. Menta
  7. Sway
  8. Peon-Ping
  9. Zeron
  10. Guideless
Supporters