Voltar ao laboratório

JEVLAB NEWS Research & data

Motor de inferência Husky para modelos Woof

AI-assisted summaries and translations. Check original sources for context and performance claims.

A Underdog AI lançou o Husky, um motor de inferência local otimizado para o modelo Woof. Esta tecnologia alcança velocidades superiores ao MLX da Apple ao utilizar uma arquitetura específica para o modelo.

Resumo traduzido · AI-assisted; check the original.

Ver original

Toda a sequência num relance

Resumos próprios com apoio de IA das publicações conectadas de CHOI. Imagens e vídeos pertencem aos seus criadores. As afirmações não foram verificadas de forma independente.

  1. Desempenho e otimização
  2. Acesso ao projeto

Desempenho e otimização

Segundo Choi, o Husky utiliza inferência específica de modelo para reduzir a comunicação entre CPU e GPU. Isso permite atingir até 730 tokens por segundo em MacBooks, superando o MLX da Apple em até 4,5 vezes.

@choi.openai · Publicação original ↗

Acesso ao projeto

O projeto Husky está disponível para consulta através do site oficial fornecido pela Underdog AI. A ferramenta foca em execução local eficiente em dispositivos Apple sem necessidade de conexão com a internet.

Source notes

This is a linked resource, not an independent verification of performance, cost or results. Check the original for current details.

Collected
2026-09-22
Discovered via
www.threads.com

Top 10

Supporter

  1. Wallpets
  2. Walltank
  3. Chowder
  4. Falconer
  5. Lemonpod
  6. Menta
  7. Sway
  8. Peon-Ping
  9. Zeron
  10. Guideless
Supporters