12 lines
1.2 KiB
Markdown
12 lines
1.2 KiB
Markdown
***Градинет*** - вектор, своим направлением указывающий направление наискорейшего роста некоторой скалярной величины.
|
|
|
|
***Градиентный спуск*** - математический метод, который итеративно находит веса и смещения, обеспечивающие модель с наименьшей функцией потерь. Градиентный спуск находит оптимальные веса и смещения, повторяя процесс заданное количество итераций.
|
|
|
|
Происходит это по данному алгоритму:
|
|
1. Расчет потерь при текущем весе (m) и смещении (b)
|
|
2. Определение направления перемещения весов (m) и смещения (b), что бы уменьшить потери
|
|
3. Слегка изменить значение веса и смещения в направлении, которое было определено.
|
|
4. Повтор алгоритма до тех пор, пока значение потерь не уменьшится еще меньше.
|
|
|
|
|