美文网首页
矩阵微积分

矩阵微积分

作者: 扎哈_ | 来源:发表于2021-11-15 16:13 被阅读0次

学习矩阵微积分,同时加强记忆同时方便查阅,故写本文章。
详细内容参考:矩阵微积分-维基百科

向量求导

向量对标量求导:

定义:
\vec y_{(n*1)} = \begin {bmatrix} y_1 \\ y_2 \\ \vdots \\ y_n \end {bmatrix}
\vec yx求导:
\frac { d\vec y}{dx}=\begin {bmatrix} \frac {dy_1}{dx} \\ \frac {dy_2}{dx} \\ \vdots \\ \frac {dy_n}{dx} \end {bmatrix}

标量对向量求导:

定义:
\vec x_{(n*1)} = \begin {bmatrix} x_1 \\ x_2 \\ \vdots \\ x_n \end {bmatrix}
y\vec x求导:
(与向量对标量不同的是,它是按\vec x^T排列的)
\frac {dy}{d\vec x}=\begin {bmatrix} \frac {dy}{dx_1} & \frac {dy}{dx_2}& \dots & \frac {dy}{dx_n} \end {bmatrix}

向量对向量求导

定义:
\vec y_{(m*1)} = \begin {bmatrix} y_1 \\ y_2 \\ \vdots \\ y_m \end {bmatrix} \vec x_{(n*1)} = \begin {bmatrix} x_1 \\ x_2 \\ \vdots \\ x_n \end{bmatrix}
\vec y\vec x求导:
\frac {d\vec y}{d\vec x} = \begin {bmatrix} \frac {dy_1}{dx_1} & \frac {dy_1}{dx_2} & \dots & \frac {dy_1}{dx_n} \\ \frac {dy_2}{dx_1} & \frac {dy_2}{dx_2} & \dots & \frac {dy_2}{dx_n} \\ \vdots& \vdots & \ddots & \vdots \\ \frac {dy_m}{dx_1} & \frac {dy_m}{dx_2} & \dots & \frac {dy_m}{dx_n} \end {bmatrix}

矩阵求导

矩阵对标量求导:

定义:
Y_{(m*n) }= \begin {bmatrix} y_{11} & y_{12} & \dots & y_{1n} \\ y_{21} & y_{22} & \dots & y_{2n} \\ \vdots & \vdots & \ddots & \vdots \\ y_{m1} & y_{m2} & \dots & y_{mn} \end {bmatrix}
Yx求导:
\frac {dY}{dx}= \begin {bmatrix} \frac {dy_{11}}{dx} & \frac {dy_{12}}{dx} & \dots & \frac {dy_{1n}}{dx} \\ \frac {dy_{21}}{dx} & \frac {dy_{22}}{dx} & \dots & \frac {dy_{2n}}{dx} \\ \vdots & \vdots & \ddots & \vdots \\ \frac {dy_{m1}}{dx} & \frac {dy_{m2}}{dx} & \dots & \frac {dy_{mn}}{dx} \end {bmatrix}

标量对矩阵求导:

定义:
X_{(m*n)}= \begin {bmatrix} x_{11} & x_{12} & \dots & x_{1n} \\ x_{21} & x_{22} & \dots & x_{2n} \\ \vdots & \vdots & \ddots & \vdots \\ x_{m1} & x_{m2} & \dots & x_{mn } \end {bmatrix}
yX求导:
(与矩阵对标量求导不同的是,分子是按X^T排列的,所得矩阵为n*m矩阵)
\frac {dy}{dX}= \begin {bmatrix} \frac {dy}{dx_{11}} & \frac {dy}{dx_{21}} & \dots & \frac {dy}{dx_{m1}} \\ \frac {dy}{dx_{12}} & \frac {dy}{dx_{22}} & \dots & \frac {dy}{dx_{m2}} \\ \vdots & \vdots & \ddots & \vdots \\ \frac {dy}{dx_{1n}} & \frac {dy}{dx_{2n}} & \dots & \frac {dy}{dx_{mn}} \end {bmatrix}

以下内容我也感到很困惑,以后搞明白了回来更新

矩阵对矩阵求导

在深度学习BP算法中:
定义:P = A·B \\ 则: \frac {dP}{dA} = B^T \\ \frac {dP}{dB} = A^T

相关文章

  • 矩阵微积分

    学习矩阵微积分,同时加强记忆同时方便查阅,故写本文章。详细内容参考:矩阵微积分-维基百科[https://zh.w...

  • Markdown中使用数学公式

    希腊字母 运算符 三角函数 戴帽符号 矩阵 箭头 微积分 累加 累乘 极限 微积分 范围 特殊符号

  • [图解机器学习] 预备知识

    微积分 (求导,极限,极值) 线性代数(矩阵表示、矩阵运算、特征根、特征向量) 算法精确算法、近似算法、启发式算...

  • 雅可比矩阵

    在向量微积分中,雅可比矩阵以一定方式排列成的矩阵,其行列式称为雅可比行列式。雅可比矩阵的重要性在于它体现了一个可微...

  • (转载)数学-矩阵计算 矩阵函数微积分前奏

    本文来自 仙守 的CSDN 博客https://blog.csdn.net/shouhuxianjian/arti...

  • MATLAB 符号计算

    7.1 概述 建立在Maple组件的基础上 符号表达式计算,化简 符号矩阵计算 符号微积分 符号函数画图 符号代数...

  • 被低估1000倍《度小满微积分》新手入门介绍

    度小满莱茨狗微积分项目正在国家工信部备案中! 微积分新手指南 未来的比特币 瑞波币 一、微积分介绍 微积分 微积分...

  • 通信-数学(待补充)

    1.基础 1)三角函数 2)复数 3)级数 3)向量坐标系 4)向量计算 5)工程矩阵 6)微积分 7)概率论 8...

  • 【Day2+HBLong】知识学习矩阵-将知识印入脑海

    今天看了《为什么你学得会微积分,学不会管理学》,有感于其知识问题矩阵,遂联系之前所得的学习工具,记录一下所得。 什...

  • 科协讲座预告——Matlab 脱菜讲座

    期中考试来啦,在复习中大家有没有这样的困惑呢?函数图像好难想象啊,物理模型画不出来,微积分、矩阵简单还要反复计算?...

网友评论

      本文标题:矩阵微积分

      本文链接:https://www.haomeiwen.com/subject/vtkqtrtx.html