Explorar el Código

ggml : refactor llamafile_sgemm PPC code (#14673)

Remove un-necessary templates from class definition and packing functions
Reduce deeply nested conditionals, if-else switching in mnapck function
Replace repetitive code with inline functions in Packing functions

2 ~ 7% improvement in Q8 Model
15 ~ 50% improvement in Q4 Model

Signed-off-by: Shalini Salomi Bodapati <Shalini.Salomi.Bodapati@ibm.com>
shalinib-ibm hace 6 meses
padre
commit
55c509daf5
Se han modificado 1 ficheros con 172 adiciones y 691 borrados
  1. 172 691
      ggml/src/ggml-cpu/llamafile/sgemm.cpp

La diferencia del archivo ha sido suprimido porque es demasiado grande
+ 172 - 691
ggml/src/ggml-cpu/llamafile/sgemm.cpp


Algunos archivos no se mostraron porque demasiados archivos cambiaron en este cambio