 Kawrakow
|
99009e72f8
ggml : add SOTA 2,3,4,5,6 bit k-quantizations (#1684)
|
vor 2 Jahren |
 Henri Vasserman
|
5220a991a5
Increase 3B scratch buffers. (#1698)
|
vor 2 Jahren |
 Georgi Gerganov
|
d1f563a743
llama : fix Metal KV cache sync (close #1695)
|
vor 2 Jahren |
|
Georgi Gerganov
|
827f5eda91
readme : update hot topics
|
vor 2 Jahren |
|
Georgi Gerganov
|
ecb217db4f
llama : Metal inference (#1642)
|
vor 2 Jahren |
 0cc4m
|
dcb2ed4826
OpenCL: Fix duplication of layers in VRAM and RAM, add GPU mul kernel (#1653)
|
vor 2 Jahren |
|
Henri Vasserman
|
d8bd0013e8
Add info about CUDA_VISIBLE_DEVICES (#1682)
|
vor 2 Jahren |
 Jiří Podivín
|
b5c85468a3
Docker: change to calling convert.py (#1641)
|
vor 2 Jahren |
 Evan Jones
|
136476e898
Fix prompt cache saving and chat-persistent rollover (#1678)
|
vor 2 Jahren |
|
Henri Vasserman
|
ffb06a345e
OpenLLaMA 3B support (#1588)
|
vor 2 Jahren |
|
Georgi Gerganov
|
7552ac5863
ggml : sync cgraph import / export API
|
vor 2 Jahren |
|
Georgi Gerganov
|
5d1830b99d
ggml : fix bug in ggml_alibi
|
vor 2 Jahren |
 DannyDaemonic
|
248367605e
Work around for recalculating logits in cached prompts (Fixes #1585) (#1609)
|
vor 2 Jahren |
|
Jiří Podivín
|
0e730dd23b
Adding git in container package dependencies (#1621)
|
vor 2 Jahren |
 Johannes Gäßler
|
3b126f654f
LLAMA_DEBUG adds debug symbols (#1617)
|
vor 2 Jahren |
 Kerfuffle
|
1b78ed2081
Only show -ngl option when relevant + other doc/arg handling updates (#1625)
|
vor 2 Jahren |
 Vladimir Zorin
|
337aea1139
examples : add --alias option to gpt_params to set use friendly model name (#1614)
|
vor 2 Jahren |
 Howard Su
|
bb051d9723
opencl : no need to allocate cl_mem on heap (#1612)
|
vor 2 Jahren |
|
Howard Su
|
ca74884f66
opencl : use strstr to check if fp16 supported (#1611)
|
vor 2 Jahren |
 apcameron
|
a6704643b6
ggml : add support for the RISCV architecture (#1616)
|
vor 2 Jahren |
|
Kerfuffle
|
0df7d63e5b
Include server in releases + other build system cleanups (#1610)
|
vor 2 Jahren |
|
Henri Vasserman
|
97c9b77c4f
Add documentation about CLBlast (#1604)
|
vor 2 Jahren |
|
Henri Vasserman
|
0ecb1bbbeb
[CI] Fix openblas (#1613)
|
vor 2 Jahren |
|
Georgi Gerganov
|
93618031c7
ggml : add ggml_tensor_overhead()
|
vor 2 Jahren |
|
Henri Vasserman
|
83c54e6da5
[CI] CLBlast: Fix directory name (#1606)
|
vor 2 Jahren |
|
Georgi Gerganov
|
bdbda1b17a
ggml : sync ggml core (minor additions, e.g. ggml_get_tensor_by_name())
|
vor 2 Jahren |
|
Kerfuffle
|
66874d4fbc
Some improvements to loading the session with --prompt-cache (#1550)
|
vor 2 Jahren |
|
Johannes Gäßler
|
1fcdcc28b1
cuda : performance optimizations (#1530)
|
vor 2 Jahren |
|
Henri Vasserman
|
ac7876ac20
Update CLBlast to 1.6.0 (#1580)
|
vor 2 Jahren |
|
Evan Jones
|
c31bbe934b
readme : add docs for chat-persistent.sh (#1568)
|
vor 2 Jahren |
