Descrição
Modelos de tokenização de texto podem ser treinados e aplicados por ferramentas de linha de comando SentencePiece precompiladas. É para desenvolvedores e pesquisadores que preparam datasets e vocabulários de NLP.
FICHA · AUR
sentencepiece-bin
Tokenizador não supervisionado em binário
- tokenizer CLI tools
- Linha de comando
- NLP
- TOKENIZATION
- Roda no terminal
codex · reviewed · 4 de jun. de 2026 descrição em
pt-br · fallback Permissões
Permissões ainda não analisadas para esta fonte.