 Radoslav Gerganov
|
172c825684
rpc : fix ggml_backend_rpc_supports_buft() (#7918)
|
1 год назад |
 slaren
|
f578b86b21
move BLAS to a separate backend (#6210)
|
1 год назад |
|
Radoslav Gerganov
|
bde7cd3cd9
llama : offload to RPC in addition to other backends (#7640)
|
1 год назад |
|
Radoslav Gerganov
|
2b737caae1
rpc : resource management rework (#7562)
|
1 год назад |
|
Radoslav Gerganov
|
db10f01310
rpc : track allocated buffers (#7411)
|
1 год назад |
|
Radoslav Gerganov
|
f4bd8b3d26
rpc : set SO_REUSEADDR for the server socket (#7320)
|
1 год назад |
|
Radoslav Gerganov
|
3b3963c55c
rpc : add command line arg for specifying backend memory
|
1 год назад |
|
Radoslav Gerganov
|
5e31828d3e
ggml : add RPC backend (#6829)
|
1 год назад |
