“Eight Things to Know about Large Language Models” é um artigo de revisão da literatura, ou seja, não apresenta pesquisa original, mas serve para fazer um panorama da situação. E o faz de forma extremamente clara e compreensível.
1- LLMs previsivelmente se tornam mais capazes com o aumento do investimento, mesmo sem inovação direcionada.
2- Muitos comportamentos importantes dos LLMs surgem de forma imprevisível como um subproduto do aumento do investimento.
3- Os LLMs frequentemente parecem aprender e usar representações do mundo externo.
4- Não existem técnicas confiáveis para direcionar o comportamento dos LLMs.
5- Os especialistas ainda não conseguem interpretar o funcionamento interno dos LLMs.
6- O desempenho humano em uma tarefa não é um limite superior para o desempenho dos LLMs.
7- Os LLMs não precisam expressar os valores de seus criadores nem os valores codificados no texto da web.
8- Interações breves com os LLMs frequentemente são enganosas.