 Christian Demsar
|
e59fcb2bc1
Add --n-predict -2 for stopping generation on full context (#2565)
|
před 2 roky |
 klosax
|
f3c3b4b167
Add --rope-scale parameter (#2544)
|
před 2 roky |
 DannyDaemonic
|
3498588e0f
Add --simple-io option for subprocesses and break out console.h and cpp (#1558)
|
před 2 roky |
 Eve
|
81844fbcfd
tests : Fix compilation warnings (Linux/GCC) (#2451)
|
před 2 roky |
 Johannes Gäßler
|
0728c5a8b9
CUDA: mmq CLI option, fixed mmq build issues (#2453)
|
před 2 roky |
|
klosax
|
8a88e5855c
perplexity : add Hellaswag calculation (#2389)
|
před 2 roky |
 Xiao-Yong Jin
|
0c06204fb3
main : add `--in-prefix-bos` to prefix BOS to user inputs; keep EOS (#2304)
|
před 2 roky |
 slaren
|
41c674161f
make rms_norm_eps a parameter (#2374)
|
před 2 roky |
 Evan Jones
|
84e09a7d8b
llama : add grammar-based sampling (#1773)
|
před 2 roky |
 wzy
|
57921ca6db
common : n_threads == -1 uses std::thread::hardware_concurrency() (#2347)
|
před 2 roky |
 Georgi Gerganov
|
e76d630df1
llama : grouped-query attention + LLaMAv2 70B support (#2276)
|
před 2 roky |
 maddes8cht
|
1d0824b247
llama : print help to stdout (#2338)
|
před 2 roky |
|
Georgi Gerganov
|
b47b8a9cfe
llama : optimize memory buffers (#2325)
|
před 2 roky |
|
klosax
|
b5fe67f8c6
Perplexity: Compute scores correlated to HellaSwag (#2312)
|
před 2 roky |
 Guillaume "Vermeille" Sanchez
|
ab0e26bdfb
llama : remove cfg smooth factor as it is only a reparameterization of the guidance scale (#2280)
|
před 2 roky |
|
Georgi Gerganov
|
ae178ab46b
llama : make tensor_split ptr instead of array (#2272)
|
před 2 roky |
|
Georgi Gerganov
|
d01bccde9f
ci : integrate with ggml-org/ci (#2250)
|
před 2 roky |
|
Xiao-Yong Jin
|
6e7cca4047
llama : add custom RoPE (#2054)
|
před 2 roky |
 Howard Su
|
32c5411631
Revert "Support using mmap when applying LoRA (#2095)" (#2206)
|
před 2 roky |
 Bach Le
|
c9c74b4e3f
llama : add classifier-free guidance (#2135)
|
před 2 roky |
|
Howard Su
|
2347463201
Support using mmap when applying LoRA (#2095)
|
před 2 roky |
 Nigel Bosch
|
db4047ad5c
main : escape prompt prefix/suffix (#2151)
|
před 2 roky |
|
Howard Su
|
b8c8dda75f
Use unsigned for random seed (#2006)
|
před 2 roky |
|
Johannes Gäßler
|
7f9753fa12
CUDA GPU acceleration for LoRAs + f16 models (#1970)
|
před 2 roky |
 zrm
|
b853d45601
ggml : add NUMA support (#1556)
|
před 2 roky |
 Didzis Gosko
|
527b6fba1d
llama : make model stateless and context stateful (llama_state) (#1797)
|
před 2 roky |
|
Johannes Gäßler
|
2c9380dd2f
Only one CUDA stream per device for async compute (#1898)
|
před 2 roky |
 Borislav Stanimirov
|
9cbf50c041
build : fix and ignore MSVC warnings (#1889)
|
před 2 roky |
|
Johannes Gäßler
|
6b8312e797
Better error when using both LoRA + GPU layers (#1861)
|
před 2 roky |
|
Johannes Gäßler
|
254a7a7a5f
CUDA full GPU acceleration, KV cache in VRAM (#1827)
|
před 2 roky |
