Home Verkennen Help
Inloggen
cturan
/
llama.cpp
spiegel van https://github.com/cturan/llama.cpp
1
0
Vork 0
Bestanden Issues 0 Wiki
Boom: 6f28a333c1
Aftakkingen Labels
llama.cpp
/
ggml-cuda
Johannes Gäßler e141ce624a Fix FlashAttention debug test, FP32 assert (#7684) 1 jaar geleden
..
template-instances 9b596417af CUDA: quantized KV support for FA vec (#7527) 1 jaar geleden
acc.cu ae1f211ce2 cuda : refactor into multiple files (#6269) 1 jaar geleden
acc.cuh ae1f211ce2 cuda : refactor into multiple files (#6269) 1 jaar geleden
arange.cu ae1f211ce2 cuda : refactor into multiple files (#6269) 1 jaar geleden
arange.cuh ae1f211ce2 cuda : refactor into multiple files (#6269) 1 jaar geleden
argsort.cu 08a0c02060 ggml : mul_mat_id use the same tensor for all the experts (#6387) 1 jaar geleden
argsort.cuh ae1f211ce2 cuda : refactor into multiple files (#6269) 1 jaar geleden
binbcast.cu 0d56246f4b ggml : group all experts in a single ggml_mul_mat_id (#6505) 1 jaar geleden
binbcast.cuh ae1f211ce2 cuda : refactor into multiple files (#6269) 1 jaar geleden
clamp.cu bc4bba364f Introduction of CUDA Graphs to LLama.cpp (#6766) 1 jaar geleden
clamp.cuh ae1f211ce2 cuda : refactor into multiple files (#6269) 1 jaar geleden
common.cuh 852aafb163 update HIP_UMA #7399 (#7414) 1 jaar geleden
concat.cu cce3dcffc5 cuda : non-cont concat support (#7610) 1 jaar geleden
concat.cuh ae1f211ce2 cuda : refactor into multiple files (#6269) 1 jaar geleden
convert.cu e84b71c2c6 ggml : drop support for QK_K=64 (#7473) 1 jaar geleden
convert.cuh 5dc9dd7152 llama : add Command R Plus support (#6491) 1 jaar geleden
cpy.cu bc4bba364f Introduction of CUDA Graphs to LLama.cpp (#6766) 1 jaar geleden
cpy.cuh bc4bba364f Introduction of CUDA Graphs to LLama.cpp (#6766) 1 jaar geleden
dequantize.cuh 5dc9dd7152 llama : add Command R Plus support (#6491) 1 jaar geleden
diagmask.cu ae1f211ce2 cuda : refactor into multiple files (#6269) 1 jaar geleden
diagmask.cuh ae1f211ce2 cuda : refactor into multiple files (#6269) 1 jaar geleden
dmmv.cu e84b71c2c6 ggml : drop support for QK_K=64 (#7473) 1 jaar geleden
dmmv.cuh d48ccf3ad4 sync : ggml (#6351) 1 jaar geleden
fattn-common.cuh 750f60c03e CUDA: fix Pascal FA, deq. KV to FP16 for batch > 8 (#7681) 1 jaar geleden
fattn-tile-f16.cu 750f60c03e CUDA: fix Pascal FA, deq. KV to FP16 for batch > 8 (#7681) 1 jaar geleden
fattn-tile-f16.cuh 0fc1e820a9 CUDA: faster large batch FA without tensor cores (#7314) 1 jaar geleden
fattn-tile-f32.cu 750f60c03e CUDA: fix Pascal FA, deq. KV to FP16 for batch > 8 (#7681) 1 jaar geleden
fattn-tile-f32.cuh 0fc1e820a9 CUDA: faster large batch FA without tensor cores (#7314) 1 jaar geleden
fattn-vec-f16.cuh 750f60c03e CUDA: fix Pascal FA, deq. KV to FP16 for batch > 8 (#7681) 1 jaar geleden
fattn-vec-f32.cuh e141ce624a Fix FlashAttention debug test, FP32 assert (#7684) 1 jaar geleden
fattn-wmma-f16.cuh 750f60c03e CUDA: fix Pascal FA, deq. KV to FP16 for batch > 8 (#7681) 1 jaar geleden
fattn.cu 750f60c03e CUDA: fix Pascal FA, deq. KV to FP16 for batch > 8 (#7681) 1 jaar geleden
fattn.cuh 9c67c2773d ggml : add Flash Attention (#5021) 1 jaar geleden
getrows.cu ae1f211ce2 cuda : refactor into multiple files (#6269) 1 jaar geleden
getrows.cuh ae1f211ce2 cuda : refactor into multiple files (#6269) 1 jaar geleden
im2col.cu ae1f211ce2 cuda : refactor into multiple files (#6269) 1 jaar geleden
im2col.cuh ae1f211ce2 cuda : refactor into multiple files (#6269) 1 jaar geleden
mmq.cu 9b596417af CUDA: quantized KV support for FA vec (#7527) 1 jaar geleden
mmq.cuh ae1f211ce2 cuda : refactor into multiple files (#6269) 1 jaar geleden
mmvq.cu bc4bba364f Introduction of CUDA Graphs to LLama.cpp (#6766) 1 jaar geleden
mmvq.cuh ae1f211ce2 cuda : refactor into multiple files (#6269) 1 jaar geleden
norm.cu fb76ec31a9 ggml : fix YARN + add tests + add asserts (#7617) 1 jaar geleden
norm.cuh ae1f211ce2 cuda : refactor into multiple files (#6269) 1 jaar geleden
pad.cu ae1f211ce2 cuda : refactor into multiple files (#6269) 1 jaar geleden
pad.cuh ae1f211ce2 cuda : refactor into multiple files (#6269) 1 jaar geleden
pool2d.cu ae1f211ce2 cuda : refactor into multiple files (#6269) 1 jaar geleden
pool2d.cuh ae1f211ce2 cuda : refactor into multiple files (#6269) 1 jaar geleden
quantize.cu 5dc9dd7152 llama : add Command R Plus support (#6491) 1 jaar geleden
quantize.cuh 5dc9dd7152 llama : add Command R Plus support (#6491) 1 jaar geleden
rope.cu fb76ec31a9 ggml : fix YARN + add tests + add asserts (#7617) 1 jaar geleden
rope.cuh ae1f211ce2 cuda : refactor into multiple files (#6269) 1 jaar geleden
scale.cu bc4bba364f Introduction of CUDA Graphs to LLama.cpp (#6766) 1 jaar geleden
scale.cuh ae1f211ce2 cuda : refactor into multiple files (#6269) 1 jaar geleden
softmax.cu 133d99c599 CUDA: deduplicate FlashAttention code (#7352) 1 jaar geleden
softmax.cuh ae1f211ce2 cuda : refactor into multiple files (#6269) 1 jaar geleden
sumrows.cu ae1f211ce2 cuda : refactor into multiple files (#6269) 1 jaar geleden
sumrows.cuh ae1f211ce2 cuda : refactor into multiple files (#6269) 1 jaar geleden
tsembd.cu ae1f211ce2 cuda : refactor into multiple files (#6269) 1 jaar geleden
tsembd.cuh ae1f211ce2 cuda : refactor into multiple files (#6269) 1 jaar geleden
unary.cu f5ef34e428 feat: implemented sigmoid function (ggml/806) 1 jaar geleden
unary.cuh f5ef34e428 feat: implemented sigmoid function (ggml/806) 1 jaar geleden
upscale.cu 48aa8fd1f2 ggml : add `ggml_upscale_ext` (ggml/814) 1 jaar geleden
upscale.cuh ae1f211ce2 cuda : refactor into multiple files (#6269) 1 jaar geleden
vecdotq.cuh 9b596417af CUDA: quantized KV support for FA vec (#7527) 1 jaar geleden