Просмотр исходного кода

sched : offload_op also requires supports_op (#7977)

slaren 1 год назад
Родитель
Сommit
99052cd227
1 измененных файлов с 1 добавлено и 1 удалено
  1. 1 1
      ggml-backend.c

+ 1 - 1
ggml-backend.c

@@ -1172,7 +1172,7 @@ static int ggml_backend_sched_backend_id_from_cur(ggml_backend_sched_t sched, st
             // check if a backend with higher prio wants to offload the op
             if (src_backend_id == sched->n_backends - 1) {
                 for (int b = 0; b < src_backend_id; b++) {
-                    if (ggml_backend_offload_op(sched->backends[b], tensor)) {
+                    if (ggml_backend_supports_op(sched->backends[b], tensor) && ggml_backend_offload_op(sched->backends[b], tensor)) {
                         SET_CAUSE(tensor, "1.off");
                         return b;
                     }