 Georgi Gerganov
|
2f9ec7e271
cuda : improve text-generation and batched decoding performance (#3776)
|
před 2 roky |
 Marcus Dunn
|
5be6c803fa
llama : remove token functions with `context` args in favor of `model` (#3720)
|
před 2 roky |
|
Georgi Gerganov
|
d1031cf49c
sampling : refactor init to use llama_sampling_params (#3696)
|
před 2 roky |
|
Georgi Gerganov
|
0e89203b51
speculative : add tree-based sampling example (#3624)
|
před 2 roky |
 staviq
|
1a159553f9
tokenizer : special token handling (#3538)
|
před 2 roky |
|
Georgi Gerganov
|
ac2219fef3
llama : fix session saving/loading (#3400)
|
před 2 roky |
 Alex Klinkhamer
|
48be797ffb
llama : expose model's rope_freq_scale in the API (#3418)
|
před 2 roky |
 vvhg1
|
c97f01c362
infill : add new example + extend server API (#3296)
|
před 2 roky |
 slaren
|
40e07a60f9
llama.cpp : add documentation about rope_freq_base and scale values (#3401)
|
před 2 roky |
|
slaren
|
16bc66d947
llama.cpp : split llama_context_params into model and context params (#3301)
|
před 2 roky |
 xaedes
|
0e76a8992c
train : finetune LORA (#2632)
|
před 2 roky |
|
Georgi Gerganov
|
ec893798b7
llama : custom attention mask + parallel decoding + no context swaps (#3228)
|
před 2 roky |
 Rickard Hallerbäck
|
dc6897404e
metal : reusing llama.cpp logging (#3152)
|
před 2 roky |
 goerch
|
b08e75baea
Fixing the last deviations from sentencepiece indicated by test-tokenizer-1 (#3170)
|
před 2 roky |
 Cebtenzzre
|
3aefaab9e5
check C++ code with -Wmissing-declarations (#3184)
|
před 2 roky |
|
Cebtenzzre
|
e64f5b5578
examples : make n_ctx warning work again (#3066)
|
před 2 roky |
|
Georgi Gerganov
|
921772104b
speculative : add grammar support (#2991)
|
před 2 roky |
 Kerfuffle
|
5d6f19f16b
Allow quantize to only copy tensors, some other improvements (#2931)
|
před 2 roky |
|
Marcus Dunn
|
95b6e5212f
added `struct` to llama_dump_timing_info_yaml's `llama_context` (#2857)
|
před 2 roky |
 Johannes Gäßler
|
6b73ef1201
YAML result logging + preset script (#2657)
|
před 2 roky |
 igarnier
|
dd0dc366da
llama.h : add missing struct keyword for C compat in callback type (#2847)
|
před 2 roky |
|
Georgi Gerganov
|
edd4c14817
llama : more tokenizer fixes (#2810)
|
před 2 roky |
|
Marcus Dunn
|
232caf3c15
llama : fix struct decl (#2790)
|
před 2 roky |
 Matt Pulver
|
c82742ac9c
llama : add llama_beam_search() (#2267)
|
před 2 roky |
|
slaren
|
154725c543
llama-bench : add model sizes (#2771)
|
před 2 roky |
|
Marcus Dunn
|
2e5f70a25f
Added `enum` to `llama_token_get_type` return type (#2774)
|
před 2 roky |
|
Georgi Gerganov
|
cf658adc83
llm : add Falcon support (#2717)
|
před 2 roky |
|
Georgi Gerganov
|
deb7dfca4b
gguf : add ftype meta info to the model (#2710)
|
před 2 roky |
|
Georgi Gerganov
|
6381d4e110
gguf : new file format with flexible meta data (beta) (#2398)
|
před 2 roky |
|
slaren
|
097e121e2f
llama : add benchmark example (#2626)
|
před 2 roky |
