Georgi Gerganov f4ab2a4147 llama : fix BPE pre-tokenization (#6920) před 1 rokem
..
.editorconfig 6381d4e110 gguf : new file format with flexible meta data (beta) (#2398) před 2 roky
ggml-vocab-aquila.gguf ff5a3f0c09 Work on the BPE tokenizer (#3252) před 2 roky
ggml-vocab-baichuan.gguf daab3d7f45 Add more tokenizer tests (#3742) před 2 roky
ggml-vocab-bert-bge.gguf f4ab2a4147 llama : fix BPE pre-tokenization (#6920) před 1 rokem
ggml-vocab-bert-bge.gguf.inp f4ab2a4147 llama : fix BPE pre-tokenization (#6920) před 1 rokem
ggml-vocab-bert-bge.gguf.out f4ab2a4147 llama : fix BPE pre-tokenization (#6920) před 1 rokem
ggml-vocab-deepseek-coder.gguf f4ab2a4147 llama : fix BPE pre-tokenization (#6920) před 1 rokem
ggml-vocab-deepseek-coder.gguf.inp f4ab2a4147 llama : fix BPE pre-tokenization (#6920) před 1 rokem
ggml-vocab-deepseek-coder.gguf.out f4ab2a4147 llama : fix BPE pre-tokenization (#6920) před 1 rokem
ggml-vocab-deepseek-llm.gguf f4ab2a4147 llama : fix BPE pre-tokenization (#6920) před 1 rokem
ggml-vocab-deepseek-llm.gguf.inp f4ab2a4147 llama : fix BPE pre-tokenization (#6920) před 1 rokem
ggml-vocab-deepseek-llm.gguf.out f4ab2a4147 llama : fix BPE pre-tokenization (#6920) před 1 rokem
ggml-vocab-falcon.gguf f4ab2a4147 llama : fix BPE pre-tokenization (#6920) před 1 rokem
ggml-vocab-falcon.gguf.inp f4ab2a4147 llama : fix BPE pre-tokenization (#6920) před 1 rokem
ggml-vocab-falcon.gguf.out f4ab2a4147 llama : fix BPE pre-tokenization (#6920) před 1 rokem
ggml-vocab-gpt-2.gguf f4ab2a4147 llama : fix BPE pre-tokenization (#6920) před 1 rokem
ggml-vocab-gpt-2.gguf.inp f4ab2a4147 llama : fix BPE pre-tokenization (#6920) před 1 rokem
ggml-vocab-gpt-2.gguf.out f4ab2a4147 llama : fix BPE pre-tokenization (#6920) před 1 rokem
ggml-vocab-gpt-neox.gguf daab3d7f45 Add more tokenizer tests (#3742) před 2 roky
ggml-vocab-gpt2.gguf ea5497df5d gpt2 : Add gpt2 architecture integration (#4555) před 2 roky
ggml-vocab-llama-bpe.gguf f4ab2a4147 llama : fix BPE pre-tokenization (#6920) před 1 rokem
ggml-vocab-llama-bpe.gguf.inp f4ab2a4147 llama : fix BPE pre-tokenization (#6920) před 1 rokem
ggml-vocab-llama-bpe.gguf.out f4ab2a4147 llama : fix BPE pre-tokenization (#6920) před 1 rokem
ggml-vocab-llama-spm.gguf f4ab2a4147 llama : fix BPE pre-tokenization (#6920) před 1 rokem
ggml-vocab-llama-spm.gguf.inp f4ab2a4147 llama : fix BPE pre-tokenization (#6920) před 1 rokem
ggml-vocab-llama-spm.gguf.out f4ab2a4147 llama : fix BPE pre-tokenization (#6920) před 1 rokem
ggml-vocab-mpt.gguf f4ab2a4147 llama : fix BPE pre-tokenization (#6920) před 1 rokem
ggml-vocab-mpt.gguf.inp f4ab2a4147 llama : fix BPE pre-tokenization (#6920) před 1 rokem
ggml-vocab-mpt.gguf.out f4ab2a4147 llama : fix BPE pre-tokenization (#6920) před 1 rokem
ggml-vocab-phi-3.gguf f4ab2a4147 llama : fix BPE pre-tokenization (#6920) před 1 rokem
ggml-vocab-phi-3.gguf.inp f4ab2a4147 llama : fix BPE pre-tokenization (#6920) před 1 rokem
ggml-vocab-phi-3.gguf.out f4ab2a4147 llama : fix BPE pre-tokenization (#6920) před 1 rokem
ggml-vocab-refact.gguf daab3d7f45 Add more tokenizer tests (#3742) před 2 roky
ggml-vocab-stablelm.gguf f4ab2a4147 llama : fix BPE pre-tokenization (#6920) před 1 rokem
ggml-vocab-starcoder.gguf f4ab2a4147 llama : fix BPE pre-tokenization (#6920) před 1 rokem
ggml-vocab-starcoder.gguf.inp f4ab2a4147 llama : fix BPE pre-tokenization (#6920) před 1 rokem
ggml-vocab-starcoder.gguf.out f4ab2a4147 llama : fix BPE pre-tokenization (#6920) před 1 rokem