FICHA · AUR

sentences-bin

Tokenizador de sentenças multilíngue em linha de comando

  • sentence tokenizer CLI
  • Linha de comando
  • NLP
  • TOKENIZATION
  • Abre direto
  • Roda no terminal
codex · reviewed · 4 de jun. de 2026 descrição em pt-br · fallback

Descrição

Texto multilíngue pode ser dividido em sentenças por um tokenizador de linha de comando. É para desenvolvedores e pesquisadores que preparam datasets de processamento de linguagem.

Como rodar

sentences

Comandos: sentences

Permissões

Permissões ainda não analisadas para esta fonte.