Comunidade

Bonsai 27B: O Primeiro Modelo de IA da Classe 27B que Roda em um Smartphone

A empresa PrismML lançou o modelo de IA Bonsai 27B em 14 de julho de 2026, permitindo que um modelo com 27 bilhões de parâmetros funcione em smartphones. A técnica de quantização ternária e binária reduziu o tamanho do modelo Qwen3.6 de 54 GB para menos de 4 GB, garantindo baixa latência e privacidade total ao executar a inteligência artificial diretamente no dispositivo.

Compartilhar
Bonsai 27B: The First 27B-Class AI Model That Runs on a Smartphone - DEV Community

Resposta curta

Sim — agora um modelo de IA com 27 bilhões de parâmetros pode rodar em um smartphone. A PrismML lançou o Bonsai 27B em 14 de julho de 2026, usando uma quantização extrema de 1-bit e ternária para encolher o Qwen3.6 27B para 3,9 GB sem retreinamento.

Como funciona

O Bonsai 27B usa quantização ternária (valores -1, 0, +1) e quantização de 1-bit para reduzir o modelo de 54 GB para menos de 4 GB. Esta é uma técnica de compressão pós-treinamento que preserva a maioria das capacidades de raciocínio e visão.

Por que isso importa

Rodar um modelo de 27B no dispositivo significa não depender da nuvem, menor latência e privacidade total. O Neural Engine do iPhone 17 Pro fornece 47 TOPS, o suficiente para rodar o modelo quantizado a velocidades usáveis.

Referências

Fonte original

Conteúdo traduzido e adaptado pela redação do Notícias Mobile. Confira também a matéria na fonte original.

Leia a matéria completa