 Xuan Son Nguyen
|
cda0e4b648
llama : remove all_pos_0, all_pos_1, all_seq_id from llama_batch (#9745)
|
hace 1 año |
 Diego Devesa
|
7eee341bee
common : use common_ prefix for common library functions (#9805)
|
hace 1 año |
 Sigbjørn Skjæret
|
eca0fab44e
imatrix : disable prompt escape by default (#9543)
|
hace 1 año |
 Georgi Gerganov
|
6262d13e0b
common : reimplement logging (#9418)
|
hace 1 año |
|
Georgi Gerganov
|
0abc6a2c25
llama : llama_perf + option to disable timings during decode (#9355)
|
hace 1 año |
|
Xuan Son Nguyen
|
bfe76d4a17
common : move arg parser code to `arg.cpp` (#9388)
|
hace 1 año |
|
Xuan Son Nguyen
|
00b02bb249
imatrix : fix arg parser for imatrix (#9366)
|
hace 1 año |
|
Xuan Son Nguyen
|
1b9ae5189c
common : refactor arg parser (#9308)
|
hace 1 año |
|
Georgi Gerganov
|
df270ef745
llama : refactor sampling v2 (#9294)
|
hace 1 año |
 Zhenwei Jin
|
4af8420afb
common : remove duplicate function llama_should_add_bos_token (#8778)
|
hace 1 año |
 Liu Jia
|
0a4ce78681
common : Changed tuple to struct (TODO fix) (#8823)
|
hace 1 año |
|
slaren
|
2b1f616b20
ggml : reduce hash table reset cost (#8698)
|
hace 1 año |
|
Georgi Gerganov
|
e95beeb1fc
imatrix : handle partial entries (#7833)
|
hace 1 año |
|
slaren
|
c9ee7118d5
check for nans in imatrix and quantize (#7807)
|
hace 1 año |
|
Georgi Gerganov
|
f83351f9a6
imatrix : migrate to gpt_params (#7771)
|
hace 1 año |
|
Georgi Gerganov
|
1442677f92
common : refactor cli arg parsing (#7675)
|
hace 1 año |
|
Georgi Gerganov
|
6ff13987ad
common : normalize naming style (#7462)
|
hace 1 año |
 jukofyork
|
48b2f9c1fc
Fixed save_imatrix to match old behaviour for MoE (#7099)
|
hace 1 año |
 Pierrick Hymbert
|
0c4d489e29
quantize: add imatrix and dataset metadata in GGUF (#6658)
|
hace 1 año |
|
slaren
|
0d56246f4b
ggml : group all experts in a single ggml_mul_mat_id (#6505)
|
hace 1 año |
|
Georgi Gerganov
|
ef21ce4ccb
imatrix : remove invalid assert (#6632)
|
hace 1 año |
|
Pierrick Hymbert
|
b804b1ef77
eval-callback: Example how to use eval callback for debugging (#6576)
|
hace 1 año |
 Jared Van Bortel
|
1b67731e18
BERT tokenizer fixes (#6498)
|
hace 1 año |
|
slaren
|
08a0c02060
ggml : mul_mat_id use the same tensor for all the experts (#6387)
|
hace 1 año |
 compilade
|
557410b8f0
llama : greatly reduce output buffer memory usage (#6122)
|
hace 1 año |
|
Georgi Gerganov
|
a0e584defd
imatrix : fix wname for mul_mat_id ops (#6271)
|
hace 1 año |
|
slaren
|
2bf8d0f7c4
backend : offload large batches to GPU (#6083)
|
hace 1 año |
 bmwl
|
f486f6e1e5
ggml : add numa options (#5377)
|
hace 1 año |
 Kawrakow
|
5ed26e1fc9
Adding some imatrix tools (#5302)
|
hace 1 año |
|
Kawrakow
|
15bceec2d7
imatrix : keep intermediate imatrix results (#5077)
|
hace 2 años |
