Ir para o conteúdo principal
Zubnet AIAprenderWiki › SLM
Fundamentos

SLM

Também conhecido como: Small Language Model, Small Language Models
Um modelo de linguagem projetado para eficiência, normalmente com cerca de 100 milhões a 15 bilhões de parâmetros. SLMs são pequenos o bastante para rodar em hardware de consumo, como laptop, celular ou uma única GPU, em vez de um cluster de centro de dados, trocando parte da amplitude e do poder de raciocínio por baixo custo, baixa latência e capacidade de funcionar offline e no dispositivo.

Por que isso importa

SLMs são a forma de incorporar IA a produtos que não podem arcar com uma conta de API por consulta, uma viagem de ida e volta à nuvem ou o envio de dados do usuário a terceiros. Em trabalhos estreitos e bem definidos — classificação, extração, resumos curtos, chamada de função —, um modelo pequeno ajustado muitas vezes iguala um modelo de fronteira por uma fração do custo e da latência. Eles também rodam onde os dados estão, o que importa para privacidade, conformidade e uso offline.

Em profundidade

O rótulo cobre um alvo móvel, mas, na prática, significa modelos de aproximadamente 0,1B a 15B parâmetros — qualquer coisa que você possa servir em uma workstation, um celular ou uma única GPU modesta, em vez de um rack de aceleradores. O que tornou SLMs uma categoria digna de nome foi a mudança ocorrida em 2024 e 2025, às vezes resumida como "pequeno é o novo grande": em vez de apenas escalar para cima, os laboratórios começaram a investir esforço em tornar modelos pequenos desproporcionalmente capazes. A série Phi da Microsoft, a Gemma do Google, os tamanhos menores de Qwen da Alibaba e os Ministral 3B e 8B da Mistral mostraram que um modelo com um centésimo do tamanho de um sistema de fronteira da categoria Modelo de linguagem grande ainda podia lidar com uma parcela surpreendente das cargas cotidianas. O resultado é um ecossistema de dois níveis: modelos gigantes para problemas difíceis e abertos, modelos pequenos para todo o resto.

Como Modelos Pequenos Ficaram Tão Capazes

Três técnicas respondem pela maior parte do salto. A primeira é qualidade dos dados: a linha Phi demonstrou que treinar em material muito filtrado, no estilo de livros didáticos, ensina mais por token a um modelo pequeno do que um raspado bruto da web, e boa parte desse material hoje é formada por Dados Sintéticos escritos por modelos maiores. A segunda é a Destilação, na qual as saídas de um grande modelo professor — e às vezes suas distribuições completas de probabilidade — viram os alvos de treinamento, permitindo ao aluno absorver comportamentos que nunca aprenderia apenas com texto. A terceira é a mesma pilha de pós-treinamento usada em modelos de fronteira — ajuste por instruções e otimização de preferências —, relativamente barata em pequena escala, mas capaz de melhorar drasticamente a usabilidade percebida do modelo. Juntas, essas técnicas fazem um modelo 3B bem treinado hoje superar modelos de propósito geral muitas vezes maiores de apenas alguns anos atrás.

A Pilha de Eficiência

A contagem bruta de parâmetros é apenas metade da história; a outra metade são as ferramentas que tornam modelos pequenos baratos de executar. A Quantização comprime pesos de ponto flutuante de 16 bits para precisão de 8 ou até 4 bits com perda modesta de qualidade, portanto um modelo de 7 a 8B encolhe de cerca de 16 GB de memória para aproximadamente 4 a 5 GB, e um modelo 3B cabe em cerca de 2 GB. Formatos como GGUF e runtimes como llama.cpp e Ollama transformaram isso em uma experiência de um comando em CPUs comuns, sem exigir GPU. A mesma pilha roda em celulares e computadores de placa única, tornando assistentes no dispositivo — incluindo os pequenos modelos locais por trás de recursos como Apple Intelligence — práticos, não teóricos.

Onde SLMs Provam seu Valor

O caso de produção mais forte para SLMs é trabalho estreito e de alto volume. Classificação, extração de entidades, roteamento, moderação, sumarização curta e análise estruturada são tarefas nas quais um modelo de 1 a 8B submetido a Ajuste fino regularmente iguala um modelo de fronteira conduzido por prompt, com custo por solicitação várias ordens de magnitude menor e tempos de resposta muito mais rápidos. Uma arquitetura comum é a cascata: um modelo pequeno atende os 80 a 90% fáceis do tráfego e só encaminha consultas difíceis ou ambíguas a um modelo grande, de modo que o modelo caro vê uma fração da carga.

O segundo caso é a localização: executar o modelo onde os dados vivem. A inferência no dispositivo significa que os dados do usuário nunca saem do celular ou da rede corporativa, simplificando análises de privacidade e conformidade, e os recursos continuam funcionando completamente sem conectividade. Essa é a aposta central da Edge AI: inteligência incorporada ao dispositivo, em vez de alugada de um centro de dados. Um SLM ajustado também é um ativo que a equipe possui por inteiro — pesos em disco, nenhuma mudança silenciosa de versão, nenhuma conta por token que cresce junto do sucesso.

Pequeno Não Significa Burro

O equívoco comum, que corre nas duas direções, é que o tamanho do modelo determina sua utilidade. De um lado, SLMs modernos superam modelos de referência de poucos anos atrás em benchmarks padrão, portanto descartá-los como brinquedos é simplesmente ultrapassado. Do outro, os limites são reais: um modelo 3B guarda muito menos conhecimento de mundo que um de 400B, é mais fraco em raciocínio de várias etapas e seguimento de instruções com nuances, e é propenso a Alucinação quando pressionado além do que realmente sabe. A regra prática é adequação, não tamanho: se a tarefa é estreita e você pode ajustar o modelo ou restringir a saída, um SLM costuma ser a ferramenta certa; se a tarefa é aberta e exige muito conhecimento, não é.

← Todos os termos
ESC