Răsfoiți Sursa

Update comment for AdamW implementation reference. (#4604)

Co-authored-by: Will Findley <findley@gmail.com>
WillCorticesAI 2 ani în urmă
părinte
comite
de8e496437
1 a modificat fișierele cu 2 adăugiri și 2 ștergeri
  1. 2 2
      ggml.c

+ 2 - 2
ggml.c

@@ -17456,9 +17456,9 @@ static void ggml_opt_acc_grad(int np, struct ggml_tensor * const ps[], float * g
 }
 }
 
 
 //
 //
-// ADAM
+// Using AdamW - ref: https://arxiv.org/pdf/1711.05101v3.pdf
 //
 //
-//   ref: https://arxiv.org/pdf/1412.6980.pdf
+// (Original Adam - ref: https://arxiv.org/pdf/1412.6980.pdf)
 //
 //
 
 
 static enum ggml_opt_result ggml_opt_adam(
 static enum ggml_opt_result ggml_opt_adam(