 Xuan Son Nguyen
|
3573fa8e7b
server : (refactor) no more json in server_task input (#10691)
|
před 1 rokem |
 Georgi Gerganov
|
ce4a7b8493
server : various fixes (#10704)
|
před 1 rokem |
|
Xuan Son Nguyen
|
6c5bc0625f
server : (refactoring) do not rely on JSON internally (#10643)
|
před 1 rokem |
|
Xuan Son Nguyen
|
91c36c269b
server : (web ui) Various improvements, now use vite as bundler (#10599)
|
před 1 rokem |
 Nikolaos Pothitos
|
82bca2257b
readme : add option, update default value, fix formatting (#10271)
|
před 1 rokem |
|
Xuan Son Nguyen
|
642330ac7c
llama : add enum for built-in chat templates (#10623)
|
před 1 rokem |
|
Georgi Gerganov
|
8648c52101
make : deprecate (#10514)
|
před 1 rokem |
 haopeng
|
64ed2091b2
server: Add "tokens per second" information in the backend (#10548)
|
před 1 rokem |
|
Georgi Gerganov
|
47f931c8f9
server : enable cache_prompt by default (#10501)
|
před 1 rokem |
 Johannes Gäßler
|
4e54be0ec6
llama/ex: remove --logdir argument (#10339)
|
před 1 rokem |
 Alexey Parfenov
|
ff7fb670d0
server : add missing docs (#10269)
|
před 1 rokem |
|
Georgi Gerganov
|
b141e5f6ef
server : enable KV cache defrag by default (#10233)
|
před 1 rokem |
|
Xuan Son Nguyen
|
a71d81cf8c
server : revamp chat UI with vuejs and daisyui (#10175)
|
před 1 rokem |
|
Xuan Son Nguyen
|
9e0ecfb697
server : clarify /slots endpoint, add is_processing (#10162)
|
před 1 rokem |
|
Georgi Gerganov
|
8d8ff71536
llama : remove Tail-Free sampling (#10071)
|
před 1 rokem |
 wwoodsTM
|
ff252ea48e
llama : add DRY sampler (#9702)
|
před 1 rokem |
|
Xuan Son Nguyen
|
958367bf53
server : refactor slot input data, move tokenizer to HTTP thread (#10023)
|
před 1 rokem |
|
Georgi Gerganov
|
8901755ba3
server : add n_indent parameter for line indentation requirement (#9929)
|
před 1 rokem |
|
Georgi Gerganov
|
223c25a72f
server : improve infill context reuse (#9894)
|
před 1 rokem |
|
Georgi Gerganov
|
d4c19c0f5c
server : accept extra_context for the infill endpoint (#9874)
|
před 1 rokem |
|
Georgi Gerganov
|
c7181bd294
server : reuse cached context chunks (#9866)
|
před 1 rokem |
|
Georgi Gerganov
|
edc265661c
server : add option to time limit the generation phase (#9865)
|
před 1 rokem |
|
Georgi Gerganov
|
1bde94dd02
server : remove self-extend features (#9860)
|
před 1 rokem |
|
Georgi Gerganov
|
95c76e8e92
server : remove legacy system_prompt feature (#9857)
|
před 1 rokem |
|
Georgi Gerganov
|
11ac9800af
llama : improve infill support and special token detection (#9798)
|
před 1 rokem |
|
Xuan Son Nguyen
|
458367a906
server : better security control for public deployments (#9776)
|
před 1 rokem |
 Daniel Kleine
|
133c7b46b3
Fixed RNG seed docs (#9723)
|
před 1 rokem |
|
Georgi Gerganov
|
f4d2b8846a
llama : add reranking support (#9510)
|
před 1 rokem |
|
Xuan Son Nguyen
|
afbbfaa537
server : add more env vars, improve gen-docs (#9635)
|
před 1 rokem |
|
Xuan Son Nguyen
|
0b3bf966f4
server : add --no-context-shift option (#9607)
|
před 1 rokem |
