Georgi Gerganov
|
844e2e1fee
github : minify link [no ci]
|
hace 1 año |
Georgi Gerganov
|
70b98fadbc
server : fix default draft model parameters (#10586)
|
hace 1 año |
Xuan Son Nguyen
|
642330ac7c
llama : add enum for built-in chat templates (#10623)
|
hace 1 año |
Georgi Gerganov
|
8648c52101
make : deprecate (#10514)
|
hace 1 año |
haopeng
|
64ed2091b2
server: Add "tokens per second" information in the backend (#10548)
|
hace 1 año |
Akarshan Biswas
|
991f8aabee
SYCL: Fix and switch to GGML_LOG system instead of fprintf (#10579)
|
hace 1 año |
Georgi Gerganov
|
4cb003dd8d
contrib : refresh (#10593)
|
hace 1 año |
Juk Armstrong
|
917786f43d
Add `mistral-v1`, `mistral-v3`, `mistral-v3-tekken` and `mistral-v7` chat template types (#10572)
|
hace 1 año |
Georgi Gerganov
|
5e1ed95583
grammars : add English-only grammar (#10612)
|
hace 1 año |
Wang Qin
|
5c7a5aa0c3
ci: add error handling for Python venv creation in run.sh (#10608)
|
hace 1 año |
Diego Devesa
|
3420909dff
ggml : automatic selection of best CPU backend (#10606)
|
hace 1 año |
alek3y
|
86dc11c5bc
server : bind to any port when specified (#10590)
|
hace 1 año |
Georgi Gerganov
|
6acce39710
readme : update the usage section with examples (#10596)
|
hace 1 año |
Wang Qin
|
43957ef203
build: update Makefile comments for C++ version change (#10598)
|
hace 1 año |
Adrien Gallouët
|
0c39f44d70
ggml-cpu: replace AArch64 NEON assembly with intrinsics in ggml_gemv_q4_0_4x4_q8_0() (#10567)
|
hace 1 año |
Georgi Gerganov
|
3e0ba0e604
readme : remove old badge
|
hace 1 año |
Georgi Gerganov
|
abadba05be
readme : refresh (#10587)
|
hace 1 año |
Eve
|
0533e7fb38
vulkan: Dynamic subgroup size support for Q6_K mat_vec (#10536)
|
hace 1 año |
Diego Devesa
|
7cc2d2c889
ggml : move AMX to the CPU backend (#10570)
|
hace 1 año |
Xuan Son Nguyen
|
b782e5c7d4
server : add more test cases (#10569)
|
hace 1 año |
Robert Collins
|
3a8e9af402
imatrix : support combine-only (#10492)
|
hace 1 año |
Diego Devesa
|
a3a3048e7a
cleanup UI link list (#10577)
|
hace 1 año |
Georgi Gerganov
|
f0678c5ff4
ggml : fix I8MM Q4_1 scaling factor conversion (#10562)
|
hace 1 año |
Shupei Fan
|
4b3242bbea
ggml-cpu: fix typo in gemv/gemm iq4_nl_4_4 (#10580)
|
hace 1 año |
Alberto Cabrera Pérez
|
0f77aae560
sycl : offload of get_rows set to 0 (#10432)
|
hace 1 año |
Alberto Cabrera Pérez
|
266b8519ee
sycl : Reroute permuted mul_mats through oneMKL (#10408)
|
hace 1 año |
Chenguang Li
|
938f608742
CANN: RoPE operator optimization (#10563)
|
hace 1 año |
Jeff Bolz
|
f095a649ec
vulkan: get the first command buffer submitted sooner (#10499)
|
hace 1 año |
Ting Lou
|
678d7994f4
llava: return false instead of exit (#10546)
|
hace 1 año |
Georgi Gerganov
|
dc22344088
ggml : remove redundant copyright notice + update authors
|
hace 1 año |