 Stephan Walter
|
69c92298a9
Deduplicate q4 quantization functions (#383)
|
před 2 roky |
 Valentyn Bezshapkin
|
97940520e8
fix: add POSIX functionality for Linux compilation (#51)
|
před 2 roky |
 Georgi Gerganov
|
f5a77a629b
Introduce C-style API (#370)
|
před 2 roky |
 Kevin Lo
|
715d292ee0
Add OpenBSD support (#314)
|
před 2 roky |
 Casey Primozic
|
2e664f1ff4
Add initial AVX512 support for dot product on Linux (#320)
|
před 2 roky |
|
Georgi Gerganov
|
22213a17b5
Change RMSNorm eps to 1e-6 (#173)
|
před 2 roky |
|
Stephan Walter
|
367946c668
Don't tell users to use a bad number of threads (#243)
|
před 2 roky |
 Matvey Soloviev
|
904d2a8d6a
Q4_1 quantization (#193)
|
před 2 roky |
 Nebula
|
9b4a15b17d
Fix RMS norm in GGML (#191)
|
před 2 roky |
 hoangmit
|
6eac39ba95
Add RMS norm and use it (#187)
|
před 2 roky |
|
hoangmit
|
113e685d18
inline -> static inline for "bytesFromNibbles" (#161)
|
před 2 roky |
 Ronsor
|
47857e564c
Don't use vdotq_s32 if it's not available (#139)
|
před 2 roky |
 Thomas Klausner
|
41be0a3b3d
Add NetBSD support. (#90)
|
před 2 roky |
|
Georgi Gerganov
|
84d9015c4a
Use vdotq_s32 to improve performance (#67)
|
před 2 roky |
|
Georgi Gerganov
|
c80e2a8f2a
Revert "10% performance boost on ARM"
|
před 2 roky |
|
Georgi Gerganov
|
54a0e66ea0
Check for vdotq_s32 availability
|
před 2 roky |
|
Georgi Gerganov
|
543c57e991
Ammend to previous commit - forgot to update non-QRDMX branch
|
před 2 roky |
|
Georgi Gerganov
|
113a9e83eb
10% performance boost on ARM
|
před 2 roky |
 Sebastián A
|
eb062bb012
Windows fixes (#31)
|
před 2 roky |
|
Georgi Gerganov
|
f1eaff4721
Add AVX2 support for x86 architectures thanks to @Const-me !
|
před 2 roky |
|
Georgi Gerganov
|
007a8f6f45
Support all LLaMA models + change Q4_0 quantization storage
|
před 2 roky |
|
Georgi Gerganov
|
26c0846629
Initial release
|
před 2 roky |
