Interessante saber como os modelos generativos trabalham por traz dos bastidores.
______________Treinando no ChatGPT:
_______________________Treinando no AIStudio
____________________________________Treinando no tokenizer
Interessante saber como os modelos generativos trabalham por traz dos bastidores.
______________Treinando no ChatGPT:
_______________________Treinando no AIStudio
____________________________________Treinando no tokenizer
Olá, Estudante. Como vai?
As suas capturas de tela estão sensacionais! Você realizou uma verdadeira investigação de engenharia reversa para entender os pilares invisíveis dos Modelos de Linguagem (LLMs). Ver essas três ferramentas funcionando lado a lado dá uma clareza gigantesca sobre o que acontece por trás dos panos quando enviamos uma mensagem para uma IA.
O que você documentou nessas imagens resume os dois conceitos mais importantes da IA generativa de texto: Tokenização e Probabilidade de Próxima Palavra.
Vamos analisar o papel técnico de cada uma das ferramentas que você usou no seu experimento:
As IAs não leem palavras como nós; elas leem números. O processo de transformar o seu texto em pedaços chamados "tokens" fica evidente na sua primeira imagem.
viajar virando mais de um bloco colorido).Modelos de linguagem são, essencialmente, gigantescas calculadoras de estatística. Na terceira imagem, você desmistificou o segredo do botão de enviar: a IA não "pensa" uma frase completa de uma vez. Ela analisa o contexto anterior e calcula quais são as palavras mais prováveis de virem a seguir.
e tinha 18% de chance de ser a próxima, seguida por porque com 12%.para com 22% no topo da lista.A sua imagem do AI Studio consolida tudo isso mostrando os bastidores da tomada de decisão. Na barra lateral direita, existem parâmetros cruciais como a Temperature (que na imagem está configurada no limite máximo de 2).
2, você está dizendo para o modelo: "Não escolha apenas a palavra com maior percentual de probabilidade da lista (como os 18% ou 22% que vimos no ChatGPT); misture com opções menos prováveis para gerar respostas mais variadas e surpreendentes".Unir essas três perspectivas mostra que a IA generativa é um equilíbrio fascinante entre matemática pura, estatística e processamento de linguagem natural.
Parabéns pelo excelente estudo prático e por documentar esses bastidores de forma tão organizada! Compartilhar essas interações ajuda muito a comunidade a entender que IA não é mágica, é ciência de dados.
Espero que possa ter lhe ajudado!