Domů Procházet Nápověda
Přihlásit se
cturan
/
llama.cpp
zrcadlo https://github.com/cturan/llama.cpp
1
0
Rozštěpit 0
Soubory Úkoly 0 Wiki
Strom: 356ea17e0f
Větve Značky
llama.cpp
/
examples
/
llama.swiftui
Peter Sugihara afd997ab60 llama.swiftui : fix infinite loop, ouput timings, buff UI (#4674) před 2 roky
..
llama.cpp.swift afd997ab60 llama.swiftui : fix infinite loop, ouput timings, buff UI (#4674) před 2 roky
llama.swiftui afd997ab60 llama.swiftui : fix infinite loop, ouput timings, buff UI (#4674) před 2 roky
llama.swiftui.xcodeproj 800a489e4a llama.swiftui : add bench functionality (#4483) před 2 roky
.gitignore 800a489e4a llama.swiftui : add bench functionality (#4483) před 2 roky
README.md bb03290c17 examples : iOS example with swift ui (#4159) před 2 roky

README.md

llama.swiftui

Local inference of llama.cpp on an iPhone. So far I only tested with starcoder 1B model, but it can most likely handle 7B models as well.

https://github.com/bachittle/llama.cpp/assets/39804642/e290827a-4edb-4093-9642-2a5e399ec545