This website works better with JavaScript
Trang chủ
Khám phá
Trợ giúp
Đăng nhập
cturan
/
llama.cpp
mirror of
https://github.com/cturan/llama.cpp
Xem
1
Star
0
Fork
0
Các tập tin
Các vấn đề
0
Wiki
Tree:
fef0cbeadf
Branches
Tags
k2v2
master
minimax
qwen3_next
qwen3_next_optimized
toolinjection
test
b6814
llama.cpp
/
examples
/
speculative
Georgi Gerganov
afa8a9ec9b
llama : add `llama_vocab`, functions -> methods, naming (
#11110
)
1 năm trước cách đây
..
CMakeLists.txt
7cc2d2c889
ggml : move AMX to the CPU backend (
#10570
)
1 năm trước cách đây
README.md
6d341ab6c5
speculative : implement stochastic speculative sampling (
#5625
)
1 năm trước cách đây
speculative.cpp
afa8a9ec9b
llama : add `llama_vocab`, functions -> methods, naming (
#11110
)
1 năm trước cách đây
README.md
llama.cpp/examples/speculative
Demonstration of speculative decoding and tree-based speculative decoding techniques
More info:
https://github.com/ggerganov/llama.cpp/pull/2926
https://github.com/ggerganov/llama.cpp/pull/3624
https://github.com/ggerganov/llama.cpp/pull/5625