 Kawrakow
|
cfd3be76e3
ggml : same IQ4_NL quantization for CPU/CUDA/Metal (#6196)
|
hace 1 año |
 Olivier Chafik
|
5b7b0ac8df
json-schema-to-grammar improvements (+ added to server) (#5978)
|
hace 1 año |
 Vaibhav Srivastav
|
1943c01981
ci : fix indentation error (#6195)
|
hace 1 año |
|
Vaibhav Srivastav
|
5e43ba8742
build : add mac pre-build binaries (#6182)
|
hace 1 año |
|
Kawrakow
|
76aa30a263
Add ability to use Q5_0, Q5_1, and IQ4_NL for quantized K cache (#6183)
|
hace 1 año |
 AidanBeltonS
|
c5b8595e3f
Add nvidia and amd backends (#6157)
|
hace 1 año |
 slaren
|
42e21c6882
cuda : fix conflict with std::swap (#6186)
|
hace 1 año |
|
slaren
|
1c51f98adc
cuda : print the returned error when CUDA initialization fails (#6185)
|
hace 1 año |
 Ziang Wu
|
f9c7ba3447
llava : update MobileVLM-README.md (#6180)
|
hace 1 año |
|
Ziang Wu
|
272935b281
llava : add MobileVLM_V2 backup (#6175)
|
hace 1 año |
|
slaren
|
ccf58aa3ec
cuda : refactor to remove global resources (#6170)
|
hace 1 año |
 Xuan Son Nguyen
|
91f8ad167d
Server: version bump for httplib and json (#6169)
|
hace 1 año |
 Georgi Gerganov
|
6b7e76d28c
gitignore : ignore curl-related files
|
hace 1 año |
|
Georgi Gerganov
|
bc0baab2ea
server : allow to override -ngl in tests (#6170)
|
hace 1 año |
|
Georgi Gerganov
|
d795988d9e
Revert "llava : add a MobileVLM_V2-1.7B backup (#6152)"
|
hace 1 año |
|
Ziang Wu
|
f8c4e745e1
llava : add a MobileVLM_V2-1.7B backup (#6152)
|
hace 1 año |
 Karthick
|
47cc7a7bf9
Server: Handle n_keep parameter in the request (#6174)
|
hace 1 año |
 Jared Van Bortel
|
bd60d82d0c
server tests : more pythonic process management; fix bare `except:` (#6146)
|
hace 1 año |
 Neo Zhang Jianyu
|
6c0b287748
update readme sycl for new update (#6151)
|
hace 1 año |
 Abhilash Majumder
|
d26e8b669d
increase igpu cluster limit (#6159)
|
hace 1 año |
 DAN™
|
d8b009a945
Remove undeed header file. (#6158)
|
hace 1 año |
 Pierrick Hymbert
|
d0d5de42e5
gguf-split: split and merge gguf per batch of tensors (#6135)
|
hace 1 año |
|
Georgi Gerganov
|
b80cf3b2d1
common : disable repeat penalties by default (#6127)
|
hace 1 año |
|
slaren
|
970a48060a
ci : exempt some labels from being tagged as stale (#6140)
|
hace 1 año |
|
DAN™
|
4c28b82529
common : print usage on '-h' and '--help' (#6145)
|
hace 1 año |
 github-actions[bot]
|
2d15886bb0
flake.lock: Update
|
hace 1 año |
|
Jared Van Bortel
|
d199ca79f2
mpt : implement backwards compatiblity with duped output tensor (#6139)
|
hace 1 año |
 Felix
|
104f5e0fc1
clip : fix memory leak (#6138)
|
hace 1 año |
|
slaren
|
5e1b7f94a0
backend : set max split inputs to GGML_MAX_SRC (#6137)
|
hace 1 año |
|
Georgi Gerganov
|
ac9ee6a4ad
ci : disable stale issue messages (#6126)
|
hace 1 año |
