LLM open-source da Apple não consegue alcançar desempenho do modelo de linguagem compacto Phi-3 da Microsoft

O DCLM-7B, de 7 bilhões de parâmetros, obteve 63,7 pontos em testes de benchmarking da categoria MMLU — que avalia a capacidade da tecnologia em realizar múltiplas tarefas — enquanto o modelo da Microsoft obteve 69,9. Embora a Apple não tenha especificado qual versão do Phi-3 foi utilizada na comparação, a pontuação sugere que tenha sido o Phi-3 mini, com 3,8 bilhões de parâmetros. As informações são do site Neowin.