Srihari-mcw
|
33c8d50acc
Add provisions for windows support for BF16 code including CMake provision for enabling AVX512_BF16 (#7258)
|
1 an în urmă |
slaren
|
d359f30921
llama : remove MPI backend (#7395)
|
1 an în urmă |
Fred Douglas
|
1ea2a0036e
quantize : fix --keep-split check (#7374)
|
1 an în urmă |
0cc4m
|
f030ec1f7a
Vulkan Embedding Fix (#7360)
|
1 an în urmă |
slaren
|
e4e6f67be6
ggml : fix another case of quants nans (#7387)
|
1 an în urmă |
Johannes Gäßler
|
5ca49cbecd
ggml: implement quantized KV cache for FA (#7372)
|
1 an în urmă |
Johannes Gäßler
|
1b01f06db0
server: add test for token probs (#7347)
|
1 an în urmă |
Johannes Gäßler
|
41858392e1
server: fix seed being reported back (#7382)
|
1 an în urmă |
Anas Ahouzi
|
6aade19ee7
Add StableLM2 pre-tokenizer (#7349)
|
1 an în urmă |
slaren
|
ab33f7a338
cuda : clear error after buffer allocation failure (#7376)
|
1 an în urmă |
Brian
|
e23b974f4c
labeler.yml: Use settings from ggerganov/llama.cpp [no ci] (#7363)
|
1 an în urmă |
Georgi Gerganov
|
854d365aba
cmake : update android comments (#7341)
|
1 an în urmă |
fraxy-v
|
f5bf761747
Capture CUDA logging output (#7298)
|
1 an în urmă |
Georgi Gerganov
|
059031b8c4
ci : re-enable sanitizer runs (#7358)
|
1 an în urmă |
Georgi Gerganov
|
511182eabb
android : use "ci-android" branch for CI (#7341)
|
1 an în urmă |
Johannes Gäßler
|
133d99c599
CUDA: deduplicate FlashAttention code (#7352)
|
1 an în urmă |
Johannes Gäßler
|
cb42c29427
server: correct --threads documentation [no ci] (#7362)
|
1 an în urmă |
Engininja2
|
d233b507cd
cuda : add half2 __shfl_xor() for ROCm 5.5 (#7263)
|
1 an în urmă |
Steffen Röcker
|
0f98acfac6
llama : add support for larger Granite Code Models (20B, 34B) (#7324)
|
1 an în urmă |
strawberrymelonpanda
|
ca57e0f35e
perplexity : ndot progress and show stats with < 100 tasks (#7348)
|
1 an în urmă |
0cc4m
|
c1b295eea5
Update and fix Vulkan soft_max and argsort implementations (#7237)
|
1 an în urmă |
Brian
|
de73196344
github-actions-labeler: initial commit (#7330)
|
1 an în urmă |
Georgi Gerganov
|
b49a13dd2f
convert : fix set_vocab_sentencepiece (#6866)
|
1 an în urmă |
slaren
|
05834841dc
ggml : fix quants nans when all the group weights are very close to zero (#7313)
|
1 an în urmă |
Engininja2
|
ef277de2ad
cmake : fix typo in AMDGPU_TARGETS (#7356)
|
1 an în urmă |
jaime-m-p
|
b43272afa2
Unicode codepoint flags for custom regexs (#7245)
|
1 an în urmă |
Johannes Gäßler
|
0fc1e820a9
CUDA: faster large batch FA without tensor cores (#7314)
|
1 an în urmă |
Gavin Zhao
|
82ca83db3c
ROCm: use native CMake HIP support (#5966)
|
1 an în urmă |
Radoslav Gerganov
|
f4bd8b3d26
rpc : set SO_REUSEADDR for the server socket (#7320)
|
1 an în urmă |
Brian
|
51e9d02599
Added a single test function script and fix debug-test.sh to be more robust (#7279)
|
1 an în urmă |