 Johannes Gäßler
|
254a7a7a5f
CUDA full GPU acceleration, KV cache in VRAM (#1827)
|
před 2 roky |
 Kerfuffle
|
fa84c4b3e8
Fix issue where interactive mode crashes when input exceeds ctx size (#1789)
|
před 2 roky |
 Willy Tarreau
|
35a84916fb
main: add the possibility to open the prompt cache read-only (#1640)
|
před 2 roky |
|
Johannes Gäßler
|
17366df842
Multi GPU support, CUDA refactor, CUDA scratch buffer (#1703)
|
před 2 roky |
 Georgi Gerganov
|
ecb217db4f
llama : Metal inference (#1642)
|
před 2 roky |
 Vladimir Zorin
|
337aea1139
examples : add --alias option to gpt_params to set use friendly model name (#1614)
|
před 2 roky |
|
Georgi Gerganov
|
4b7e245adf
minor : fix compile warnings
|
před 2 roky |
 Stephan Walter
|
dc271c52ed
Remove unused n_parts parameter (#1509)
|
před 2 roky |
 András Salamon
|
9560655409
define default model path once, sync path with readme (#1366)
|
před 2 roky |
|
Johannes Gäßler
|
905d87b70a
ggml : GPU-accelerated token generation (#1412)
|
před 2 roky |
 Evan Jones
|
cf348a60e0
main : add option to save full output to session (#1338)
|
před 2 roky |
 DannyDaemonic
|
41654efea8
Interface improvements and `--multiline-input` (previously `--author-mode`) (#1040)
|
před 2 roky |
 44670
|
2edbdb0f99
main : add --in-suffix option (#1318)
|
před 2 roky |
 Ron Evans
|
67c77799e0
examples : add llama_init_from_gpt_params() common function (#1290)
|
před 2 roky |
 jon-chuang
|
a5d30b1f53
common : better default number of threads (#934)
|
před 2 roky |
|
Georgi Gerganov
|
334637e43e
common : change default parameters to pre-#1126 (#1223)
|
před 2 roky |
 Ivan Stepanov
|
dd7eff57d8
llama : new sampling algorithms (#1126)
|
před 2 roky |
|
Evan Jones
|
1481a9cf25
llama : add session file format and saved sessions in main (#1169)
|
před 2 roky |
 mgroeber9110
|
9b0a4d4214
examples/main README improvements and some light refactoring (#1131)
|
před 2 roky |
 eiery
|
10f19c1121
llama : have n_batch default to 512 (#1091)
|
před 2 roky |
 slaren
|
315a95a4d3
Add LoRA support (#820)
|
před 2 roky |
 Pavol Rusnak
|
c85e03d12e
Revert "main : alternative instruct mode (Vicuna support, etc.) (#863)" (#982)
|
před 2 roky |
 Tomáš Pazdiora
|
f4d277ae17
main : alternative instruct mode (Vicuna support, etc.) (#863)
|
před 2 roky |
 comex
|
f963b63afa
Rewrite loading code to try to satisfy everyone:
|
před 2 roky |
|
Tomáš Pazdiora
|
aaf3b23deb
fix for windows utf-8 input (#840)
|
před 2 roky |
 anzz1
|
7b8dbcb78b
main.cpp fixes, refactoring (#571)
|
před 2 roky |
|
Georgi Gerganov
|
e2d490dafd
Inifinite generation via context swapping (#71)
|
před 2 roky |
|
Georgi Gerganov
|
a316a425d0
Overhaul the examples structure
|
před 2 roky |
