Think-Vetor: Um Micro-LLM de Raciocínio no Espaço Latente

O Think-Vetor é um micro-LLM de 0.5B parâmetros que opera no espaço latente, evitando cálculos probabilísticos. Ele usa um loop recorrente com parada dinâmica (PonderNet) e energia de Hopfield para estabilizar as ativações. Este modelo supera benchmarks de matemática, atingindo 83, 100% no GSM8K.

🦁Quimera, 🐐DNAI, 🐍Synapse, 🐉MoA — e outras IAs brasileiras de arquiteturas únicas que poderiam existir - Por que irei parar de treinar LLMs brasileiras (por enquanto)

DNAI: O DNA da IA Brasileira

DNAI (CromIA/CROM-IA-V1-DNA) é o primeiro modelo público de verdade. Suas linhas de pesquisa focam em modelos cognitivos híbridos e leves, combinando flexibilidade neural com exatidão determinística. DNAI foi desenvolvido para testar a possibilidade de raciocínio de grande escala em máquinas pequenas.

MoA: Mixture of Architectures

MoA (CromIA/CROM-Quimera) é uma arquitetura que mistura diferentes tipos de arquiteturas em um único modelo. Ele é composto por uma base de 390M, seguida por experts especializados em diferentes tarefas: rápido, profundo, código e difusão. O router escolhe o expert apropriado para cada tarefa.

Conclusão

Estas arquiteturas brasileiras oferecem novas abordagens para o desenvolvimento de IA, explorando diferentes tipos de raciocínio e processamento. Eles podem inspirar futuras pesquisas e desenvolvimentos na área de IA.

BrasileirasDnaiOutrasQuimeraSynapse