Evan Jones
|
84e09a7d8b
llama : add grammar-based sampling (#1773)
|
před 2 roky |
Kawrakow
|
2f9cf974a0
Some more Q4_K and Q5_K speedup on CUDA (#2346)
|
před 2 roky |
IgnacioFDM
|
4f06592cc6
Add gqa parameter support to the server (#2351)
|
před 2 roky |
Johannes Gäßler
|
70d26ac388
Fix __dp4a documentation (#2348)
|
před 2 roky |
wzy
|
57921ca6db
common : n_threads == -1 uses std::thread::hardware_concurrency() (#2347)
|
před 2 roky |
slaren
|
3602ac4255
fix n_tasks (#2342)
|
před 2 roky |
slaren
|
95a6c595e7
ggml: move op parameters from tensors to ggml_tensor::op_params (#2333)
|
před 2 roky |
Georgi Gerganov
|
e76d630df1
llama : grouped-query attention + LLaMAv2 70B support (#2276)
|
před 2 roky |
maddes8cht
|
1d0824b247
llama : print help to stdout (#2338)
|
před 2 roky |
wzy
|
bc3ec2cdc9
flake : support `nix build '.#opencl'` (#2337)
|
před 2 roky |
Christian Demsar
|
a940458e48
llama : print max tensor size to stderr (#2336)
|
před 2 roky |
Jose Maldonado
|
91171b8072
make : fix CLBLAST compile support in FreeBSD (#2331)
|
před 2 roky |
AustinMroz
|
355c80f49e
examples : simplify vim plugin (#2327)
|
před 2 roky |
Jiahao Li
|
83a00ce69b
metal : support bcast add & dup & cont op (#2323)
|
před 2 roky |
Kawrakow
|
d2a43664f9
Speed up Q4_K (#2322)
|
před 2 roky |
Johannes Gäßler
|
b9b7d94fc1
CUDA: Fixed 7b q3_K_S with mul_mat_vec_q (#2313)
|
před 2 roky |
Georgi Gerganov
|
b47b8a9cfe
llama : optimize memory buffers (#2325)
|
před 2 roky |
klosax
|
b5fe67f8c6
Perplexity: Compute scores correlated to HellaSwag (#2312)
|
před 2 roky |
whoreson
|
24baa54ac1
examples : basic VIM plugin
|
před 2 roky |
Georgi Gerganov
|
dd6c67d3cb
ci : fix args
|
před 2 roky |
Georgi Gerganov
|
5d500e8ccf
ci : add 7B CUDA tests (#2319)
|
před 2 roky |
Richard Roberson
|
7d5f18468c
examples : add easy python script to create quantized (k-bit support) GGML models from local HF Transformer models (#2311)
|
před 2 roky |
Kawrakow
|
d924522a46
Custom RoPE + bettter memory management for CUDA (#2295)
|
před 2 roky |
Kawrakow
|
4d76a5f49b
Faster Q3_K implementation on Metal (#2307)
|
před 2 roky |
Georgi Gerganov
|
0db14fef06
ggml : fix the rope fix (513f8619535a64fa9ace808cdcbcf66211535f5c)
|
před 2 roky |
Ikko Eltociear Ashimine
|
03e566977b
examples : fix typo in minigpt4.py (#2298)
|
před 2 roky |
Georgi Gerganov
|
513f861953
ggml : fix rope args order + assert (#2054)
|
před 2 roky |
Georgi Gerganov
|
3973b25a64
gitignore : fix final newline
|
před 2 roky |
Guillaume "Vermeille" Sanchez
|
ab0e26bdfb
llama : remove cfg smooth factor as it is only a reparameterization of the guidance scale (#2280)
|
před 2 roky |
Jose Maldonado
|
73643f5fb1
gitignore : changes for Poetry users + chat examples (#2284)
|
před 2 roky |