Solucionado (ver solução)
Solucionado
(ver solução)
1
resposta

[Reclamação] Sugestão

Acredito que o conceito de tokenização apresentado na aula de apresentação não está correto:

Insira aqui a descrição dessa imagem para ajudar na acessibilidade

Não há relação entre token e rede blockchain. Se possível corrijam e/ou coloquem a fonte de onde foi retirado tal conceituação.

1 resposta
solução!

Olá Thiago,

Realmente houve um equívoco na definição do conceito na parte de transcrição, acabamos esbarrando em um sinônimo utilizado em ambas as áreas, NLP e mercado financeiro.

Obrigada por sinalizar e informo já foi corrigido para o conceito apropriado ao ramo do conhecimento do processamento de linguagem natural.

A tokenização é o processo de dividir uma frase em partes ou tokens individuais, na maioria das vezes são palavras únicas.

Desejo excelentes estudos : )