{
 "<h1><a href=\"https://nn.labml.ai/optimizers/index.html\">Optimizers</a></h1>\n<h2>Optimizer Implementations</h2>\n<ul><li><a href=\"https://nn.labml.ai/optimizers/adam.html\">Adam Optimizer</a> </li>\n<li><a href=\"https://nn.labml.ai/optimizers/amsgrad.html\">AMSGrad Optimizer</a> </li>\n<li><a href=\"https://nn.labml.ai/optimizers/adam_warmup.html\">Adam Optimizer with warmup</a> </li>\n<li><a href=\"https://nn.labml.ai/optimizers/noam.html\">Noam Optimizer</a> </li>\n<li><a href=\"https://nn.labml.ai/optimizers/radam.html\">Rectified Adam Optimizer</a> </li>\n<li><a href=\"https://nn.labml.ai/optimizers/ada_belief.html\">AdaBelief Optimizer</a> </li></ul>\n": "<h1><a href=\"https://nn.labml.ai/optimizers/index.html\">\u0db4\u0dca\u0dbb\u0dc1\u0dc3\u0dca\u0dad\u0d9a\u0dbb\u0dab\u0dba</a></h1>\n<h2>\u0db4\u0dca\u0dbb\u0dc1\u0dc3\u0dca\u0dad\u0dd2\u0d9a\u0dbb\u0dab\u0d9a\u0dca\u0dbb\u0dd2\u0dba\u0dcf\u0dad\u0dca\u0db8\u0d9a \u0d9a\u0dd2\u0dbb\u0dd3\u0db8\u0dca</h2>\n<ul><li><a href=\"https://nn.labml.ai/optimizers/adam.html\">\u0d86\u0daf\u0db8\u0dca \u0db4\u0dca\u0dbb\u0dc1\u0dc3\u0dca\u0dad\u0d9a\u0dbb\u0dab\u0dba</a> </li>\n<li><a href=\"https://nn.labml.ai/optimizers/amsgrad.html\">AMSGrad \u0db4\u0dca\u0dbb\u0dc1\u0dc3\u0dca\u0dad\u0d9a\u0dbb\u0dab\u0dba</a> </li>\n<li><a href=\"https://nn.labml.ai/optimizers/adam_warmup.html\">\u0d8b\u0dab\u0dd4\u0dc3\u0dd4\u0db8\u0dca \u0d9a\u0dd2\u0dbb\u0dd3\u0db8 \u0dc3\u0db8\u0d9f \u0d86\u0daf\u0db8\u0dca \u0db4\u0dca\u0dbb\u0dc1\u0dc3\u0dca\u0dad\u0d9a\u0dbb\u0dab\u0dba</a> </li>\n<li><a href=\"https://nn.labml.ai/optimizers/noam.html\">\u0db1\u0dc0 \u0db4\u0dca\u0dbb\u0dc1\u0dc3\u0dca\u0dad\u0d9a\u0dbb\u0dab\u0dba</a> </li>\n<li><a href=\"https://nn.labml.ai/optimizers/radam.html\">\u0db1\u0dd2\u0dc0\u0dd0\u0dbb\u0daf\u0dd2 \u0d9a\u0dbb\u0db1 \u0dbd\u0daf \u0d86\u0daf\u0db8\u0dca \u0db4\u0dca\u0dbb\u0dc1\u0dc3\u0dca\u0dad\u0d9a\u0dbb\u0dab\u0dba</a> </li>\n<li><a href=\"https://nn.labml.ai/optimizers/ada_belief.html\">ADABelief \u0db4\u0dca\u0dbb\u0dc1\u0dc3\u0dca\u0dad\u0d9a\u0dbb\u0dab\u0dba</a> </li></ul>\n",
 "Optimizers": "\u0db4\u0dca\u0dbb\u0dc1\u0dc3\u0dca\u0dad\u0d9a\u0dbb\u0dab\u0dba"
}