最小二乗法の正規方程式(行列形式)の導出

正規方程式の導出と計算例
http://mathtrain.jp/seikiequ
二次形式の微分
http://mathtrain.jp/quadraticform

 \frac{\partial (x^T A x)}{\partial x} = 2 A x を使うことで(2次形式の微分),
 \frac{\partial || A x - b ||^2}{\partial x} = 0 =>  A^T A x = A^T b となる。