 fairydreaming
|
8fcb563613
Load all MoE experts during warmup (#11571)
|
hace 10 meses |
 Georgi Gerganov
|
e0dbec0bc6
llama : refactor llama_context, llama_kv_cache, llm_build_context (#12181)
|
hace 10 meses |
 Olivier Chafik
|
669912d9a5
`tool-call`: fix Qwen 2.5 Coder support, add micro benchmarks, support trigger patterns for lazy grammars (#12034)
|
hace 10 meses |
|
Olivier Chafik
|
63e489c025
tool-call: refactor common chat / tool-call api (+ tests / fixes) (#11900)
|
hace 11 meses |
|
Olivier Chafik
|
9f4cc8f8d3
`sync`: minja (#11641)
|
hace 11 meses |
|
Olivier Chafik
|
cde3833239
`tool-call`: allow `--chat-template chatml` w/ `--jinja`, default to chatml upon parsing issue, avoid double bos (#11616)
|
hace 11 meses |
|
Olivier Chafik
|
8b576b6c55
Tool call support (generic + native for Llama, Functionary, Hermes, Mistral, Firefunction, DeepSeek) w/ lazy grammars (#9639)
|
hace 11 meses |
|
Olivier Chafik
|
a94f3b2727
`common`: utils to split / join / repeat strings (from json converter) (#11342)
|
hace 1 año |
|
Olivier Chafik
|
6171c9d258
Add Jinja template support (#11016)
|
hace 1 año |
 Radoslav Gerganov
|
667d72846c
rpc : early register backend devices (#11262)
|
hace 1 año |
 Xuan Son Nguyen
|
00b4c3da62
common : support tag-based --hf-repo like on ollama (#11195)
|
hace 1 año |
|
Xuan Son Nguyen
|
9a483999a6
llama : fix chat template gguf key (#11201)
|
hace 1 año |
|
Georgi Gerganov
|
afa8a9ec9b
llama : add `llama_vocab`, functions -> methods, naming (#11110)
|
hace 1 año |
 Johannes Gäßler
|
53ff6b9b9f
GGUF: C++ refactor, backend support, misc fixes (#11030)
|
hace 1 año |
|
Georgi Gerganov
|
47182dd03f
llama : update llama_model API names (#11063)
|
hace 1 año |
|
Georgi Gerganov
|
727368c60f
llama : use LLAMA_TOKEN_NULL (#11062)
|
hace 1 año |
 Molly Sophia
|
4b0c638b9a
common : disable KV cache shifting automatically for unsupported models (#11053)
|
hace 1 año |
|
Georgi Gerganov
|
f66f582927
llama : refactor `src/llama.cpp` (#10902)
|
hace 1 año |
|
Xuan Son Nguyen
|
45095a61bf
server : clean up built-in template detection (#11026)
|
hace 1 año |
 Peter
|
6e1531aca5
common, examples, ggml : fix MSYS2 GCC compiler errors and warnings when building with LLAMA_CURL=ON and GGML_OPENCL=ON (#11013)
|
hace 1 año |
|
Georgi Gerganov
|
0bf2d10c55
tts : add OuteTTS support (#10784)
|
hace 1 año |
|
Georgi Gerganov
|
152610eda9
server : output embeddings for all tokens when pooling = none (#10861)
|
hace 1 año |
|
Georgi Gerganov
|
644fd71b44
sampling : refactor + optimize penalties sampler (#10803)
|
hace 1 año |
 Eric Curtin
|
c27ac678dd
Opt class for positional argument handling (#10508)
|
hace 1 año |
|
Xuan Son Nguyen
|
adffa6ffd5
common : improve -ctv -ctk CLI arguments (#10806)
|
hace 1 año |
 Diego Devesa
|
7cc2d2c889
ggml : move AMX to the CPU backend (#10570)
|
hace 1 año |
|
Xuan Son Nguyen
|
9f912511bc
common : fix duplicated file name with hf_repo and hf_file (#10550)
|
hace 1 año |
|
Diego Devesa
|
10bce0450f
llama : accept a list of devices to use to offload a model (#10497)
|
hace 1 año |
|
Diego Devesa
|
5931c1f233
ggml : add support for dynamic loading of backends (#10469)
|
hace 1 año |
|
Georgi Gerganov
|
d9d54e498d
speculative : refactor and add a simpler example (#10362)
|
hace 1 año |
