Historial de Commits

Autor SHA1 Mensaje Fecha
  compilade 3fd62a6b1c py : type-check all Python scripts with Pyright (#8341) hace 1 año
  jaime-m-p 37bef89433 tokenizer : BPE fixes (#7530) hace 1 año
  jaime-m-p b43272afa2 Unicode codepoint flags for custom regexs (#7245) hace 1 año
  jaime-m-p 43248e5594 llama3 custom regex split (#6965) hace 1 año
  Brian 6fbd432211 py : logging and flake8 suppression refactoring (#7081) hace 1 año
  Georgi Gerganov 92139b90af tests : add test-tokenizer-0.sh + fix some tokenizers (#7036) hace 1 año