 Georgi Gerganov
|
1442677f92
common : refactor cli arg parsing (#7675)
|
1 год назад |
|
Georgi Gerganov
|
9c67c2773d
ggml : add Flash Attention (#5021)
|
1 год назад |
 Ting Sun
|
87e21bbacd
bench : make n_batch and n_ubatch configurable in Batched bench (#6500)
|
1 год назад |
 slaren
|
f30ea47a87
llama : add pipeline parallelism support (#6017)
|
1 год назад |
|
Georgi Gerganov
|
05b06210c9
llama : more consistent names of count variables (#5994)
|
1 год назад |
 compilade
|
c2101a2e90
llama : support Mamba Selective State Space Models (#5328)
|
1 год назад |
 Pierrick Hymbert
|
3ab8b3a92e
llama : cleanup unused mmq flags (#5772)
|
1 год назад |
 Herman Semenov
|
5d3de51f97
ggml, common, examples, tests : fixed type arguments in printf (#5528)
|
1 год назад |
 bmwl
|
f486f6e1e5
ggml : add numa options (#5377)
|
1 год назад |
|
Georgi Gerganov
|
5cb04dbc16
llama : remove LLAMA_MAX_DEVICES and LLAMA_SUPPORTS_GPU_OFFLOAD (#5240)
|
1 год назад |
|
slaren
|
e7e4df031b
llama : ggml-backend integration (#4766)
|
2 лет назад |
|
Georgi Gerganov
|
ef47ec18da
ggml : add ggml_soft_max_ext (#4256)
|
2 лет назад |
 Kerfuffle
|
6e08281e58
Extend llama_kv_cache_seq_rm to allow matching any sequence (#3843)
|
2 лет назад |
|
Georgi Gerganov
|
6961c4bd0b
batched-bench : print params at start
|
2 лет назад |
|
Georgi Gerganov
|
0e89203b51
speculative : add tree-based sampling example (#3624)
|
2 лет назад |
|
Georgi Gerganov
|
8c70a5ff25
batched : add bench tool (#3545)
|
2 лет назад |
