Răsfoiți Sursa

ggml : block interleaving support for Q4_K quantization for x86 AVX2 architecture (#12332)

* Add block interleaving support for Q4_K quantization

* Remove whitespaces and fix CI/CD issues

* Update pointer of bsums from int16_t to const int16_t

* Add vector version of quantize_q8_K_4x8 function

* Update code formatting based on review comments
Srihari-mcw 10 luni în urmă
părinte
comite
3d82dbcbce
1 a modificat fișierele cu 1349 adăugiri și 0 ștergeri
  1. 1349 0
      ggml/src/ggml-cpu/ggml-cpu-aarch64.cpp

Fișier diff suprimat deoarece este prea mare
+ 1349 - 0
ggml/src/ggml-cpu/ggml-cpu-aarch64.cpp


Unele fișiere nu au fost afișate deoarece prea multe fișiere au fost modificate în acest diff