 Kawrakow
|
76aa30a263
Add ability to use Q5_0, Q5_1, and IQ4_NL for quantized K cache (#6183)
|
1 tahun lalu |
 DAN™
|
4c28b82529
common : print usage on '-h' and '--help' (#6145)
|
1 tahun lalu |
|
DAN™
|
496bc79bc2
common : tidy-up argument parsing (#6105)
|
1 tahun lalu |
 Pierrick Hymbert
|
d01b3c4c32
common: llama_load_model_from_url using --model-url (#6098)
|
1 tahun lalu |
|
DAN™
|
15961ec04d
common : refactor nested if causing error C1061 on MSVC (#6101)
|
1 tahun lalu |
 Theia Vogel
|
877b4d0c62
llama : add support for control vectors (#5970)
|
1 tahun lalu |
 Georgi Gerganov
|
0fd6c1f015
embedding : print cosine similarity (#899)
|
1 tahun lalu |
 slaren
|
f30ea47a87
llama : add pipeline parallelism support (#6017)
|
1 tahun lalu |
|
Georgi Gerganov
|
05b06210c9
llama : more consistent names of count variables (#5994)
|
1 tahun lalu |
 SeungWon Jeong
|
fb215c3832
server : normalize embeddings (#5956)
|
1 tahun lalu |
 compilade
|
c2101a2e90
llama : support Mamba Selective State Space Models (#5328)
|
1 tahun lalu |
|
Georgi Gerganov
|
29ae62d2ae
llama : fix embeddings (#5796)
|
1 tahun lalu |
 Minsoo Cheong
|
6d341ab6c5
speculative : implement stochastic speculative sampling (#5625)
|
1 tahun lalu |
 Douglas Hanley
|
475df1d6cf
llama : allow for user specified embedding pooling type (#5849)
|
1 tahun lalu |
 Neo Zhang Jianyu
|
715641391d
Support multiple GPUs (split mode) on SYCL backend (#5806)
|
1 tahun lalu |
 Miwa / Ensan
|
f49a535686
common : fix flag `--logits-all` to `--all-logits` (#5805)
|
1 tahun lalu |
|
Pierrick Hymbert
|
3ab8b3a92e
llama : cleanup unused mmq flags (#5772)
|
1 tahun lalu |
|
Georgi Gerganov
|
9d533a77d0
llama : fix defrag bugs + add parameter (#5735)
|
1 tahun lalu |
|
Georgi Gerganov
|
ab336a9d5e
code : normalize enum names (#5697)
|
1 tahun lalu |
 Robey Holderith
|
5ee99c32f5
common, server : surface min_keep as its own parameter (#5567)
|
1 tahun lalu |
|
Georgi Gerganov
|
1dcc3fde00
common : fix ub (#5530)
|
1 tahun lalu |
 Herman Semenov
|
5d3de51f97
ggml, common, examples, tests : fixed type arguments in printf (#5528)
|
1 tahun lalu |
 Alexey Parfenov
|
6dcc02d244
server : add "samplers" param to control the samplers order (#5494)
|
1 tahun lalu |
 bmwl
|
f486f6e1e5
ggml : add numa options (#5377)
|
1 tahun lalu |
|
Alexey Parfenov
|
a803333a4e
common : use enums for sampler types (#5418)
|
1 tahun lalu |
 snadampal
|
a07d0fee1f
ggml : add mmla kernels for quantized GEMM (#4966)
|
1 tahun lalu |
 0cc4m
|
ee1628bdfe
Basic Vulkan Multi-GPU implementation (#5321)
|
1 tahun lalu |
 l3utterfly
|
e6f8177532
common : add dynamic temperature parameters to main example cli (#5295)
|
1 tahun lalu |
 Michael Klimenko
|
52bb63c708
refactor : switch to emplace_back to avoid extra object (#5291)
|
1 tahun lalu |
|
Georgi Gerganov
|
5cb04dbc16
llama : remove LLAMA_MAX_DEVICES and LLAMA_SUPPORTS_GPU_OFFLOAD (#5240)
|
1 tahun lalu |
