 Ivan
|
116efee0ee
cuda: add q8_0->f32 cpy operation (#9571)
|
1 год назад |
 Xuan Son Nguyen
|
0b3bf966f4
server : add --no-context-shift option (#9607)
|
1 год назад |
 Max Krasnyansky
|
f0c7b5edf8
threads: improve ggml_barrier scaling with large number of threads (#9598)
|
1 год назад |
 Riceball LEE
|
1d48e98e4f
readme : add programmable prompt engine language CLI (#9599)
|
1 год назад |
 Georgi Gerganov
|
f3979df762
flake.lock: Update (#9586)
|
1 год назад |
 Srihari-mcw
|
1e7b9299c6
ggml : AVX512 gemm for Q4_0_8_8 (#9532)
|
1 год назад |
|
Georgi Gerganov
|
37f8c7b4c9
perplexity : remove extra new lines after chunks (#9596)
|
1 год назад |
|
Georgi Gerganov
|
bf9c1013ac
metal : use F32 prec for K*Q in vec FA (#9595)
|
1 год назад |
 Akarshan Biswas
|
e62e9789cd
Revert "[SYCL] fallback mmvq (#9088)" (#9579)
|
1 год назад |
 R0CKSTAR
|
c35e586ea5
musa: enable building fat binaries, enable unified memory, and disable Flash Attention on QY1 (MTT S80) (#9526)
|
1 год назад |
 Molly Sophia
|
912c331d3d
Fix merge error in #9454 (#9589)
|
1 год назад |
 Johannes Gäßler
|
a5b57b08ce
CUDA: enable Gemma FA for HIP/Pascal (#9581)
|
1 год назад |
 Shankar
|
ecd5d6b65b
llama: remove redundant loop when constructing ubatch (#9574)
|
1 год назад |
|
Molly Sophia
|
2a63caaa69
RWKV v6: RWKV_WKV op CUDA implementation (#9454)
|
1 год назад |
 slaren
|
d09770cae7
ggml-alloc : fix list of allocated tensors with GGML_ALLOCATOR_DEBUG (#9573)
|
1 год назад |
 agray3
|
41f477879f
Update CUDA graph on scale change plus clear nodes/params (#9550)
|
1 год назад |
 Huang Qi
|
e948a7da7a
CI: Provide prebuilt windows binary for hip (#9467)
|
1 год назад |
|
slaren
|
63351143b2
quantize : improve type name parsing (#9570)
|
1 год назад |
|
Georgi Gerganov
|
d13edb17ed
ggml : fix builds (#0)
|
1 год назад |
|
Georgi Gerganov
|
27609c49b9
ggml : fix trailing whitespace (#0)
|
1 год назад |
|
Georgi Gerganov
|
4301535326
sync : ggml
|
1 год назад |
|
Johannes Gäßler
|
424c5d00a9
ggml/examples: add backend support for numerical optimization (ggml/949)
|
1 год назад |
|
Georgi Gerganov
|
a6809c6a2e
examples : add null threadpool args where needed (ggml/0)
|
1 год назад |
|
Johannes Gäßler
|
5cb12f6839
CUDA: fix sum.cu compilation for CUDA < 11.7 (#9562)
|
1 год назад |
|
Georgi Gerganov
|
d39e26741f
examples : flush log upon ctrl+c (#9559)
|
1 год назад |
 Sigbjørn Skjæret
|
722ec1eb51
perplexity : do not escape input data by default (#9548)
|
1 год назад |
|
Georgi Gerganov
|
6026da52d6
server : clean-up completed tasks from waiting list (#9531)
|
1 год назад |
|
Sigbjørn Skjæret
|
eca0fab44e
imatrix : disable prompt escape by default (#9543)
|
1 год назад |
|
slaren
|
64c6af3195
ggml : fix n_threads_cur initialization with one thread (#9538)
|
1 год назад |
|
Georgi Gerganov
|
0d2f22e45c
scripts : verify py deps at the start of compare (#9520)
|
1 год назад |
