 Georgi Gerganov
|
0abc6a2c25
llama : llama_perf + option to disable timings during decode (#9355)
|
1 tahun lalu |
 Xuan Son Nguyen
|
bfe76d4a17
common : move arg parser code to `arg.cpp` (#9388)
|
1 tahun lalu |
|
Xuan Son Nguyen
|
00b02bb249
imatrix : fix arg parser for imatrix (#9366)
|
1 tahun lalu |
|
Xuan Son Nguyen
|
1b9ae5189c
common : refactor arg parser (#9308)
|
1 tahun lalu |
|
Georgi Gerganov
|
df270ef745
llama : refactor sampling v2 (#9294)
|
1 tahun lalu |
 Zhenwei Jin
|
4af8420afb
common : remove duplicate function llama_should_add_bos_token (#8778)
|
1 tahun lalu |
 Liu Jia
|
0a4ce78681
common : Changed tuple to struct (TODO fix) (#8823)
|
1 tahun lalu |
 slaren
|
2b1f616b20
ggml : reduce hash table reset cost (#8698)
|
1 tahun lalu |
|
Georgi Gerganov
|
e95beeb1fc
imatrix : handle partial entries (#7833)
|
1 tahun lalu |
|
slaren
|
c9ee7118d5
check for nans in imatrix and quantize (#7807)
|
1 tahun lalu |
|
Georgi Gerganov
|
f83351f9a6
imatrix : migrate to gpt_params (#7771)
|
1 tahun lalu |
|
Georgi Gerganov
|
1442677f92
common : refactor cli arg parsing (#7675)
|
1 tahun lalu |
|
Georgi Gerganov
|
6ff13987ad
common : normalize naming style (#7462)
|
1 tahun lalu |
 jukofyork
|
48b2f9c1fc
Fixed save_imatrix to match old behaviour for MoE (#7099)
|
1 tahun lalu |
 Pierrick Hymbert
|
0c4d489e29
quantize: add imatrix and dataset metadata in GGUF (#6658)
|
1 tahun lalu |
|
slaren
|
0d56246f4b
ggml : group all experts in a single ggml_mul_mat_id (#6505)
|
1 tahun lalu |
|
Georgi Gerganov
|
ef21ce4ccb
imatrix : remove invalid assert (#6632)
|
1 tahun lalu |
|
Pierrick Hymbert
|
b804b1ef77
eval-callback: Example how to use eval callback for debugging (#6576)
|
1 tahun lalu |
 Jared Van Bortel
|
1b67731e18
BERT tokenizer fixes (#6498)
|
1 tahun lalu |
|
slaren
|
08a0c02060
ggml : mul_mat_id use the same tensor for all the experts (#6387)
|
1 tahun lalu |
 compilade
|
557410b8f0
llama : greatly reduce output buffer memory usage (#6122)
|
1 tahun lalu |
|
Georgi Gerganov
|
a0e584defd
imatrix : fix wname for mul_mat_id ops (#6271)
|
1 tahun lalu |
|
slaren
|
2bf8d0f7c4
backend : offload large batches to GPU (#6083)
|
1 tahun lalu |
 bmwl
|
f486f6e1e5
ggml : add numa options (#5377)
|
1 tahun lalu |
 Kawrakow
|
5ed26e1fc9
Adding some imatrix tools (#5302)
|
1 tahun lalu |
|
Kawrakow
|
15bceec2d7
imatrix : keep intermediate imatrix results (#5077)
|
2 tahun lalu |
|
Kawrakow
|
726c0fa9a2
Slightly faster imatrix (#5050)
|
2 tahun lalu |
|
Georgi Gerganov
|
2d5419d08a
imatrix : fix assert for src0 non-cont check
|
2 tahun lalu |
|
Georgi Gerganov
|
ba69bbc84c
imatrix : offload to GPU support (#4957)
|
2 tahun lalu |
|
Kawrakow
|
326b418b59
Importance Matrix calculation (#4861)
|
2 tahun lalu |
