Similar to 非線形共役勾配法

• 

  鏡像降下法

  Mirror descent
  
• 

  近接勾配法

  Proximal gradient method
  
• 

  座標降下法

  Coordinate descent
  
• 

  バルジライ・ボールウェイン法

  Barzilai-Borwein method
  
• 

  フランク・ウルフのアルゴリズム

  Frank–Wolfe algorithm
  
• 

  BFGS法

  Broyden–Fletcher–Goldfarb–Shanno algorithm
  
• 

  BHHH法

  Berndt–Hall–Hall–Hausman algorithm
  
• 

  CMA-ES

  CMA-ES
  
• 

  L-BFGS法

  Limited-memory BFGS
  
• 

  SR1法

  Symmetric rank-one
  
• 

  アウトオブキルタ法

  Out-of-kilter algorithm
  
• 

  アフィンスケーリング法

  Affine scaling
  
• 

  0

  0
  ▲3 trends

  
• 

  1

  1
  ▲1 trends

  
• 

  2

  2
  ▲1 trends

  
• 

  3

  3
  
• 

  4

  4
  ▲1 trends

  
• 

  5

  5
  
• 

  6

  6
  ▲1 trends

  
• 

  7

  7
  
• 

  8

  8
  
• 

  9

  9
  
• 

  12345679

  
• 

  勾配法

  Gradient method
  
• 

  確率的勾配降下法

  Stochastic gradient descent
  
• 

  共役勾配法

  Conjugate gradient method
  
• 

  勾配消失問題

  Vanishing gradient problem
  
• 

  最急降下法

  Gradient descent