Un investigador independiente ha presentado TreeNets, un método que aprovecha los árboles de decisión para reducir drásticamente el tamaño de los grandes modelos de lenguaje. El trabajo tiene como objetivo aclarar la conexión fundamental entre las redes neuronales y los árboles de decisión.
El autor ha publicado el primer borrador del artículo de investigación en Codeberg junto con el repositorio del código fuente. Además, un modelo que combina TreeNets con Bart (tree_bart_xsum_6_6) se ha subido a Hugging Face para acceso público.