slaren
|
2bf8d0f7c4
backend : offload large batches to GPU (#6083)
|
1 an în urmă |
AmirAli Mirian
|
c47cf414ef
ggml : add AVX512F SIMD (#6088)
|
1 an în urmă |
Ondřej Čertík
|
7ce2c77f88
gguf : add support for I64 and F64 arrays (#6062)
|
1 an în urmă |
slaren
|
f30ea47a87
llama : add pipeline parallelism support (#6017)
|
1 an în urmă |
Michael Podvitskiy
|
3202361c5b
ggml, ci : Windows ARM runner and build fixes (#5979)
|
1 an în urmă |
Georgi Gerganov
|
5b09797321
ggml : remove old quantization functions (#5942)
|
1 an în urmă |
compilade
|
c2101a2e90
llama : support Mamba Selective State Space Models (#5328)
|
1 an în urmă |
Jared Van Bortel
|
e04e04f8fa
ggml : use SYS_get_cpu if SYS_getcpu is not defined (#5906)
|
1 an în urmă |
Georgi Gerganov
|
a1c6d96ed8
ggml : fix unknown status (#0)
|
1 an în urmă |
Michael Podvitskiy
|
9fa2627347
ggml : introduce ggml_status (ggml/750)
|
1 an în urmă |
leejet
|
7d43c585dc
add some new ops, fix some operators and add batch operations to certain operators. (ggml/747)
|
1 an în urmă |
slaren
|
2774b0c974
add google magika inference example (ggml/748)
|
1 an în urmă |
UEXTM.com
|
5f70671856
Introduce backend GUIDs (ggml/743)
|
1 an în urmă |
Kawrakow
|
7c4263d426
ggml : make i-quants work with super-blocks of 64 (CPU,Metal) (#5760)
|
1 an în urmă |
Kawrakow
|
0becb22ac0
IQ4_XS: a 4.25 bpw quantization (#5747)
|
1 an în urmă |
Kawrakow
|
a33e6a0d2a
Adding IQ2_S and IQ2_M to complete coverage of the 2-3 bit quantization range (#5721)
|
1 an în urmă |
Georgi Gerganov
|
ab336a9d5e
code : normalize enum names (#5697)
|
1 an în urmă |
Kawrakow
|
4c4cb30736
IQ3_S: a much better alternative to Q3_K (#5676)
|
1 an în urmă |
Georgi Gerganov
|
7e4f339c40
ggml : always define ggml_fp16_t as uint16_t (#5666)
|
1 an în urmă |
Georgi Gerganov
|
eccd7a26dd
sync : ggml (#5633)
|
1 an în urmă |
Kawrakow
|
a14679cc30
IQ4_NL: 4-bit non-linear quants with blocks of 32 (#5590)
|
1 an în urmă |
Mathijs de Bruin
|
5dde540897
Allow for Vulkan build with Accelerate.
|
2 ani în urmă |
bmwl
|
f0d1fafc02
ggml : android and old glibc NUMA incompatibility bugfixes (#5557)
|
1 an în urmă |
Herman Semenov
|
5d3de51f97
ggml, common, examples, tests : fixed type arguments in printf (#5528)
|
1 an în urmă |
Kawrakow
|
bd2d4e393b
1.5 bit quantization (#5453)
|
1 an în urmă |
Georgi Gerganov
|
8f1be0d42f
ggml : add ALiBi support for ggml_soft_max_ext (#5488)
|
1 an în urmă |
Ananta Bastola
|
6e4e973b26
ci : add an option to fail on compile warning (#3952)
|
1 an în urmă |
bmwl
|
f486f6e1e5
ggml : add numa options (#5377)
|
1 an în urmă |
Georgi Gerganov
|
3b169441df
sync : ggml (#5452)
|
1 an în urmă |
snadampal
|
a07d0fee1f
ggml : add mmla kernels for quantized GEMM (#4966)
|
1 an în urmă |