Disponibilização inicial do artigo que apresentou o GPT-3

Em 28 de maio de 2020, Tom Brown e colaboradores submeteram ao arXiv a primeira versão de Language Models are Few-Shot Learners, artigo que apresentou o GPT-3. O estudo descreveu um modelo de linguagem autorregressivo, que prevê texto a partir do contexto, com 175 bilhões de parâmetros.

Os autores investigaram a execução de tarefas a partir de instruções e poucos exemplos, sem ajustar novamente os parâmetros para cada tarefa. Também registraram limitações e possíveis impactos sociais. A data corresponde à disponibilização inicial do manuscrito; não é a apresentação comercial da API, ocorrida em junho.