Почетна Преглед Помоћ
Пријавите се
cturan
/
llama.cpp
огледало од https://github.com/cturan/llama.cpp
1
0
Креирај огранак 0
Датотеке Дискусије 0 Вики
Дрво: b6814
Гране Ознаке
llama.cpp
/
examples
/
speculative
Georgi Gerganov e92d53b29e sampling : optimize samplers by reusing bucket sort (#15665) пре 4 месеци
..
CMakeLists.txt 7cc2d2c889 ggml : move AMX to the CPU backend (#10570) пре 1 година
README.md 68ff663a04 repo : update links to new url (#11886) пре 11 месеци
speculative.cpp e92d53b29e sampling : optimize samplers by reusing bucket sort (#15665) пре 4 месеци

README.md

llama.cpp/examples/speculative

Demonstration of speculative decoding and tree-based speculative decoding techniques

More info: