Ed
ano passado
Para dividir uma frase em palavras ou tokens individuais, o processo mais adequado é a tokenização. A tokenização é uma técnica que consiste em segmentar um texto em unidades menores, que podem ser palavras, frases ou outros elementos. Analisando as opções: A) N-gramas - Este é um método que envolve a criação de sequências de 'n' itens (palavras ou caracteres) a partir de um texto, mas não é especificamente o processo de dividir uma frase em tokens individuais. B) Tokenização - Este é o processo correto para dividir uma frase em palavras ou tokens. Portanto, a resposta correta é: B) Tokenização.
Cadastre-se ou realize login
Mais perguntas desse material