O avanço tecnológico trouxe consigo a popularização de termos como LLMs, que significam large language models, ou "grandes modelos de linguagem", e englobam conceitos como PLN (Processamento de Linguagem Natural) e ML (Machine Learning, ou Aprendizado de Máquina), baseados em algoritmos de DL (Deep Learning, Aprendizado Profundo).

Essas siglas estão por trás de inovações como a inteligência artificial generativa, responsável por ferramentas revolucionárias como o ChatGPT e o Bard, destacando a importância dos LLMs nesse contexto.

Os LLMs pré-treinados têm a capacidade de processar grandes volumes de dados e gerar textos de maneira extremamente convincente, sendo sistemas de IA capazes de compreender, interpretar e criar linguagem humana, com vastas possibilidades de aplicação.

Acredita-se que os LLMs são fundamentais para o desenvolvimento da Artificial General Intelligence (AGI, ou IA Geral), que representaria um marco na tecnologia ao possibilitar o pensamento, aprendizado e resolução de problemas de forma avançada.

A qualidade e o potencial dos LLMs estão diretamente ligados ao treinamento recebido, no qual o modelo ajusta parâmetros para prever corretamente sequências de entrada e saída, por meio de técnicas de autoaprendizagem, permitindo sua adaptação para diversas áreas após o treinamento.