Termos e definições usados nos artigos do VaultMindOS.
O processo de quebrar texto em unidades menores (tokens) antes de alimentar um modelo de linguagem.
