矩阵的迹定义如下

矩阵的迹.png

定理1.png

乘积迹.jpg

定理2

定理3.png

121374283.jpg

定理4.png

定理56.png

定理7.png

迹方法.png

7.png
最小二乘法

最小二乘法1.png

最小二乘法2.png

377208968.jpg

624584112.jpg
最小二乘的概率解释

image

1.png

3.png

image
最小即可。这就解释了线性回归为什么要选用最小二乘作为衡量指标了。
更多资料见
cs231vecDerivs
cs229线性代数矩阵论
cs229-Probability Theory
The Matrix Cookbook