跳到主要内容

矩阵及其运算

tips:我们这里介绍的都是极为感性的认识,追求的是直观理解,绝对谈不上严谨。我们的终极目标是教会你如何操作和使用这个数学工具。更严谨的数学推导和定义,建议在学校课堂或专业教材中深入学习!

矩阵​

在计算机图形学中矩阵是一个 矩形数表 ,其中可以放各种各样的数字,例如这样

A=[1π21]B=[ln⁡2120.57888114514]\mathbf{A} = \begin{bmatrix} 1 & \pi \\ 2 & 1 \end{bmatrix} \quad \mathbf{B} = \begin{bmatrix} \ln2 &\frac{1}{2} &0.5 \\ 78 & 88 &114514 \end{bmatrix}

我们用 Ai,j\mathbf{A}_{i,j} 表示矩阵 A\mathbf{A} 的第 ii 行第 jj 列的元素。

例如 A1,2\mathbf{A}_{1,2} 表示矩阵 A\mathbf{A} 的第 1 行第 2 列的元素,也就是元素 π\pi 。

矩阵的尺寸​

通过上面的例子我们可以看到矩阵的行数和列数是可以不同的。

上例中 A\mathbf{A} 是 2 行 2 列的矩阵, B\mathbf{B} 是 2 行 3 列的矩阵。
我们将 A\mathbf{A} B\mathbf{B} 的尺寸记作 Size(A)=2×2Size(A) = 2 \times 2 ,Size(B)=2×3Size(B) = 2 \times 3 。

对于更一般的矩阵 C\mathbf{C} ,设 C\mathbf{C} 为 nn 行 mm 列的矩阵,则 C\mathbf{C} 的形状记作 Size(C)=n×mSize(C) = n \times m 。 特别的,如果 m=nm = n ,我们称 C\mathbf{C} 是一个 方阵 。

这里的 ×\times 表示的是笛卡尔积,而不是普通的乘法。它不满足交换率,即 a×b≠b×aa \times b \neq b \times a。所以 2×32 \times 3 和 3×23 \times 2 表示的是不同尺寸的矩阵。

矩阵的运算​

矩阵的加减法​

矩阵的加减法规则简单到一句话就能概括:对应位置的元素直接相加/相减。

既然要“对应位置”,那两个矩阵的尺寸必须相同。
例如:
设 矩阵 A\mathbf{A} 和 B\mathbf{B} 形状都是 n×mn \times m 我们想计算: C=A±B\mathbf{C} = \mathbf{A} \pm \mathbf{B} 那我们只需要对所有下标 ii 和 jj 对应的元素进行实数加减法:Ci,j=Ai,j±Bi,j\mathbf{C}_{i,j} = \mathbf{A}_{i,j} \pm \mathbf{B}_{i,j}。最后得到的矩阵 C\mathbf{C} 的形状和 A\mathbf{A}、B\mathbf{B} 一模一样。

我们拿加法举例:

A=[111222333]B=[123123123]\mathbf{A} = \begin{bmatrix} 1 & 1 & 1\\ 2 & 2 & 2\\ 3 & 3 & 3 \end{bmatrix} \quad \mathbf{B} = \begin{bmatrix} 1 & 2 & 3\\ 1 & 2 & 3 \\ 1 & 2 & 3 \end{bmatrix}

那么

C=A+B=[1+12+11+32+12+22+33+13+23+3]=[234345456]\mathbf{C} = \mathbf{A}+\mathbf{B} = \begin{bmatrix} 1+1 & 2+1 & 1+3\\ 2+1 & 2+2 & 2+3\\ 3+1 & 3+2 & 3+3 \end{bmatrix}=\begin{bmatrix} 2 & 3 & 4\\ 3 & 4 & 5\\ 4 & 5 & 6 \end{bmatrix}

矩阵的转置​

矩阵的转置是线性代数中的一种新的运算,它是一个一元运算,在我们之前学习的代数中是没有这个运算的,或者是说这个运算在我们之前学习的代数中是没有意义的。

转置运算就是将矩阵的行和列进行交换,就像你拿着一个矩形的两个对角(不相邻的两个角),这将构成一个旋转轴,将这个矩形平面绕着这个轴旋转 180 度一样。

假设我们有一个矩阵 A\mathbf{A} ,那么我们将矩阵 A\mathbf{A} 的转置记作 AT\mathbf{A}^{T}。 对每个元素 Ai,j\mathbf{A}_{i,j} 有 (AT)i,j=Aj,i(\mathbf{A}^{T})_{i,j} = \mathbf{A}_{j,i}

例如:

A=[111222333]AT=[123123123]\mathbf{A} = \begin{bmatrix} 1 & 1 & 1\\ 2 & 2 & 2\\ 3 & 3 & 3 \end{bmatrix} \quad \mathbf{A}^{T} = \begin{bmatrix} 1 & 2 & 3\\ 1 & 2 & 3 \\ 1 & 2 & 3 \end{bmatrix}

为什么说在我们之前的代数中转置是没有意义的,因为对于一个 实数 kk 我们将它看作是一个 1×11 \times 1 的矩阵对于一个 1×1 1 \times 1 的矩阵做转置还是它本身

矩阵的数乘​

数乘就是让一个 实数 与 矩阵 相乘
规则是:对矩阵中的每个元素乘以这个数
假设我们有一个矩阵 A\mathbf{A} 和 实数 kk ,k⋅Ak\cdot \mathbf{A} 就是对每个元素 Ai,j\mathbf{A}_{i,j} 乘以 kk ,即 k⋅Ai,jk \cdot \mathbf{A}_{i,j} 。

例如:

A=[111222333]k=2k⋅A=2⋅A=[222444666]\mathbf{A} = \begin{bmatrix} 1 & 1 & 1\\ 2 & 2 & 2\\ 3 & 3 & 3 \end{bmatrix} \quad k = 2 \quad k \cdot \mathbf{A} = 2 \cdot \mathbf{A} = \begin{bmatrix} 2 & 2 & 2\\ 4 & 4 & 4\\ 6 & 6 & 6 \end{bmatrix}

矩阵的乘法​

在介绍矩阵的乘法前,我们先介绍一下向量(虽然你很熟悉,但是线性代数中的向量与高中阶段的向量有些不同的地方) 如果矩阵的尺寸是 1×n1 \times n 的,或者是 n×1n \times 1 的,则这样尺寸的矩阵就是我们熟悉的向量了,所以向量其实是一种特殊的矩阵。 例如:

v=[12]\mathbf{v} = \begin{bmatrix} 1 & 2 \end{bmatrix} x=[12]\mathbf{x} = \begin{bmatrix} 1 \\ 2 \end{bmatrix}

其中 1×n1 \times n 的向量我们叫做 行向量, n×1n \times 1 的向量我们叫做 列向量。

我们现在知道了向量其实是特殊形状的矩阵,它相对简单,我们首先看看向量(简单的矩阵)之间的乘法是怎么做的。

我们高中阶段都知道向量的点乘运算是对应元素相乘再求和(显然他们的元素个数应该相同)。

但是我们在线性代数中稍微有些不同,点乘(内积)在线性代数中定义为行向量与列向量的乘积,并且他们的元素个数也必须相同。

假设我们有向量 1×21 \times 2的行向量 v\mathbf{v} ,以及 2×12 \times 1 的列向量 x\mathbf{x} ,那么 他们做矩阵乘法就是 v×x=vx=∑i=12v1,i⋅xi,1=v1,1⋅x1,1+v1,2⋅x2,1\mathbf{v}\times\mathbf{x} = \mathbf{v}\mathbf{x} =\sum_{i=1}^{2}\mathbf{v}_{1,i} \cdot \mathbf{x}_{i,1} = \mathbf{v}_{1,1} \cdot \mathbf{x}_{1,1} + \mathbf{v}_{1,2} \cdot \mathbf{x}_{2,1}

有时候我们会将 “×\times” 省略

写成矩阵的形式:

v×x=[12][12]=1⋅1+2⋅2=5\mathbf{v} \times \mathbf{x} = \begin{bmatrix} 1 & 2 \end{bmatrix}\begin{bmatrix} 1 \\ 2 \end{bmatrix} = 1 \cdot 1 + 2 \cdot 2 = 5

注意,一定不能写成

x×v=[12][12]\mathbf{x} \times \mathbf{v} = \begin{bmatrix} 1 \\ 2 \end{bmatrix}\begin{bmatrix} 1 & 2 \end{bmatrix}

这样它会等于

x×v=[12]v=[1⋅v2⋅v]=[1224]\mathbf{x} \times \mathbf{v} = \begin{bmatrix} 1 \\ 2 \end{bmatrix}\mathbf{v} = \begin{bmatrix} 1 \cdot \mathbf{v}\\ 2\cdot \mathbf{v} \end{bmatrix}= \begin{bmatrix} 1 &2 \\ 2 &4 \end{bmatrix}

这个叫做向量的外积

由此我们可以看出,矩阵的乘法之间是没有交换律的,即 A×B≠B×A\mathbf{A} \times \mathbf{B} \neq \mathbf{B} \times \mathbf{A}


现在我们扩展到通常意义上的矩阵上,我们直接看例子:

对于一个 2×22 \times 2 的矩阵 A\mathbf{A}

A=[1π21]\mathbf{A} = \begin{bmatrix} 1 & \pi \\ 2 & 1 \end{bmatrix}

我们可以把 A\mathbf{A} 写成这样:

A=[v1v2]\mathbf{A}= \begin{bmatrix} \mathbf{v}_1 &\mathbf{v}_2 \end{bmatrix}

其中 v1=[12]T\mathbf{v}_1 = \begin{bmatrix} 1 & 2 \end{bmatrix}^T ,v2=[π1]T\mathbf{v}_2 = \begin{bmatrix} \pi & 1 \end{bmatrix}^T

或者我们还可以把 A\mathbf{A} 写成:

A=[v3v4]\mathbf{A}= \begin{bmatrix} \mathbf{v_3} \\ \mathbf{v_4} \end{bmatrix}

其中 v3=[1π]\mathbf{v}_3 = \begin{bmatrix} 1 & \pi \end{bmatrix} ,v4=[21]\mathbf{v}_4 = \begin{bmatrix} 2 & 1 \end{bmatrix}

可以看到矩阵的元素可以组合成向量,我们让矩阵与向量相乘

A×x=[1π21][12]=[v1v2][12]=v1⋅1+v2⋅2=[1⋅1+π⋅22⋅1+1⋅2]=[1+2π4]\mathbf{A} \times \mathbf{x} = \begin{bmatrix} 1 & \pi \\ 2 & 1 \end{bmatrix}\begin{bmatrix} 1 \\ 2 \end{bmatrix} = \begin{bmatrix} \mathbf{v}_1 &\mathbf{v}_2 \end{bmatrix}\begin{bmatrix} 1 \\ 2 \end{bmatrix} = \mathbf{v}_1 \cdot 1 + \mathbf{v}_2 \cdot 2= \begin{bmatrix} 1\cdot 1 + \pi\cdot 2 \\ 2\cdot 1 + 1\cdot 2 \end{bmatrix} = \begin{bmatrix} 1 + 2\pi \\ 4 \end{bmatrix}

有没有发现我们经过神奇的操作将矩阵乘法化为了我们熟悉的向量的点乘(行向量乘列向量),得到的结果依然是个向量。

我们可以大胆一点

A×A=[1π21][1π21]=[v1v2][v3v4]=v1v3+v2v4\mathbf{A} \times \mathbf{A} = \begin{bmatrix} 1 & \pi \\ 2 & 1 \end{bmatrix} \begin{bmatrix} 1 & \pi \\ 2 & 1 \end{bmatrix} = \begin{bmatrix} \mathbf{v}_1 &\mathbf{v}_2 \end{bmatrix}\begin{bmatrix} \mathbf{v_3} \\ \mathbf{v_4} \end{bmatrix} = \mathbf{v}_1 \mathbf{v}_3 + \mathbf{v}_2 \mathbf{v}_4

这是列向量乘以行向量的形式,得使用向量的外积

A×A=v1v3+v2v4=[12]v3+[π1]v4=[1v3+πv42v3+1v4]=[1+2π2π41+2π]\mathbf{A} \times \mathbf{A} = \mathbf{v}_1 \mathbf{v}_3 + \mathbf{v}_2 \mathbf{v}_4 = \begin{bmatrix} 1\\ 2 \end{bmatrix} \mathbf{v}_3 + \begin{bmatrix} \pi \\ 1 \end{bmatrix} \mathbf{v}_4 = \begin{bmatrix} 1\mathbf{v}_3 + \pi\mathbf{v}_4\\ 2\mathbf{v}_3 + 1\mathbf{v}_4 \end{bmatrix} = \begin{bmatrix} 1+2\pi & 2\pi \\ 4 & 1+2\pi \end{bmatrix}

恭喜你通过向量运算发明了矩阵乘法,但是在日常计算或者写代码时,我们更常用的是下面这个法则。

假设我们有两个矩阵 A\mathbf{A} 和 B\mathbf{B},我们要计算 C=AB\mathbf{C} = \mathbf{A}\mathbf{B}。

矩阵乘法不是你想乘就能乘的。必须满足 Size(A)=n×mSize(\mathbf{A}) = n \times m, Size(B)=m×pSize(\mathbf{B}) = m \times p, A\mathbf{A} 的列数(mm)必须等于 B\mathbf{B} 的行数(mm)。 而乘完之后得到的矩阵 C\mathbf{C},它的尺寸是:n×pn \times p。

对于结果矩阵 C\mathbf{C} 中的任意一个元素 Ci,j\mathbf{C}_{i,j},它的计算规则是:拿矩阵 A\mathbf{A} 的第 ii 行,去和矩阵 B\mathbf{B} 的第 jj 列做向量点乘。

写成数学公式就是:

Ci,j=∑k=1mAi,k⋅Bk,j\mathbf{C}_{i,j} = \sum_{k=1}^{m} \mathbf{A}_{i,k} \cdot \mathbf{B}_{k,j}

我们还拿矩阵 A\mathbf{A} 自己乘自己来试试:

A=[1π21]\mathbf{A} = \begin{bmatrix} 1 & \pi \\ 2 & 1 \end{bmatrix}

我们要计算 C=A×A\mathbf{C} = \mathbf{A} \times \mathbf{A}:

  • C1,1\mathbf{C}_{1,1}(第1行第1列):拿 A\mathbf{A} 的第1行 [1π]\begin{bmatrix}1 & \pi\end{bmatrix} 乘第1列 [12]\begin{bmatrix}1 \\ 2\end{bmatrix}   ⟹  1×1+π×2=1+2π\implies 1 \times 1 + \pi \times 2 = 1 + 2\pi
  • C1,2\mathbf{C}_{1,2}(第1行第2列):拿 A\mathbf{A} 的第1行 [1π]\begin{bmatrix}1 & \pi\end{bmatrix} 乘第2列 [π1]\begin{bmatrix}\pi \\ 1\end{bmatrix}   ⟹  1×π+π×1=2π\implies 1 \times \pi + \pi \times 1 = 2\pi
  • C2,1\mathbf{C}_{2,1}(第2行第1列):拿 A\mathbf{A} 的第2行 [21]\begin{bmatrix}2 & 1\end{bmatrix} 乘第1列 [12]\begin{bmatrix}1 \\ 2\end{bmatrix}   ⟹  2×1+1×2=4\implies 2 \times 1 + 1 \times 2 = 4
  • C2,2\mathbf{C}_{2,2}(第2行第2列):拿 A\mathbf{A} 的第2行 [21]\begin{bmatrix}2 & 1\end{bmatrix} 乘第2列 [π1]\begin{bmatrix}\pi \\ 1\end{bmatrix}   ⟹  2×π+1×1=1+2π\implies 2 \times \pi + 1 \times 1 = 1 + 2\pi

把它们拼起来:

C=[1+2π2π41+2π]\mathbf{C} = \begin{bmatrix} 1+2\pi & 2\pi \\ 4 & 1+2\pi \end{bmatrix}

矩阵乘法的性质​

  1. AB≠BA\mathbf{A}\mathbf{B} \neq \mathbf{B}\mathbf{A}
  2. (AB)C=A(BC)(\mathbf{A}\mathbf{B})\mathbf{C} = \mathbf{A}(\mathbf{B}\mathbf{C})
  3. A(B+C)=AB+AC\mathbf{A}(\mathbf{B}+\mathbf{C}) = \mathbf{A}\mathbf{B} + \mathbf{A}\mathbf{C},((A+B)C=AC+BC(\mathbf{A} +\mathbf{B})\mathbf{C} = \mathbf{A}\mathbf{C} + \mathbf{B}\mathbf{C})
  4. (AB)T=BTAT(\mathbf{A}\mathbf{B})^T = \mathbf{B}^T\mathbf{A}^T

这些性质如果读者感兴趣自行验证吧

矩阵的逆​

学了乘法我们来看看矩阵乘法的逆运算,或者称作矩阵的逆元,什么是逆元呢?在实数中 kk 的逆元是 1k=k−1、k≠0\frac{1}{k} = k^{-1} 、\quad k \neq 0

在学习矩阵的逆这个概念之前我们看看单位矩阵的概念,在实数中我们有一个单位元也就是 11 ,11 乘任何实数 kk 都等于 kk ,那么我们矩阵中存不存在这样的单位元呢?
令人失望的在所有尺寸的矩阵下不存在一个统一的单位元,但是对于定义在同一个线性空间中的 n×nn \times n 的矩阵来说存在单位元。

对于元素是 3×33 \times 3 的矩阵的线性空间,我们定义单位元为

I=[100010001] \mathbf{I} = \begin{bmatrix} 1 & 0 & 0 \\ 0 & 1 & 0 \\ 0 & 0 & 1 \end{bmatrix}

对于尺寸更大的方阵来说也类似,就是从左上角,到右下角,都是1,其他都是0

我们上面提到过单位元:无论怎么乘单位元,结果等于它本身

I×A=A×I=A\mathbf{I} \times \mathbf{A} = \mathbf{A} \times \mathbf{I} = \mathbf{A}

读者可以自行验证,可以发现无论怎么乘都是 A\mathbf{A} 本身

在实数中我们知道 当一个数乘以自己的逆的时候,结果等于 1

k×k−1=1k \times k^{-1} = 1

而在矩阵中,我们同样这么定义

A×A−1=A−1×A=I\mathbf{A} \times \mathbf{A}^{-1} = \mathbf{A}^{-1} \times \mathbf{A} = \mathbf{I}

由于我们的逆是定义在单位元下的,所以同样只有方形矩阵才有逆

逆的性质​

  1. (A−1)−1=A(\mathbf{A}^{-1})^{-1} = \mathbf{A}
  2. (AB)−1=B−1A−1(\mathbf{A}\mathbf{B})^{-1} = \mathbf{B}^{-1}\mathbf{A}^{-1}
  3. 如果一个矩阵的对角阵,并且主对角线上的元素都不为0,则它的逆就是对主对角线上的元素取逆
  4. 如果一个矩阵是正交矩阵,则它的逆就是它的转置矩阵,如果一个矩阵满足 AAT=ATA=I\mathbf{A}\mathbf{A}^T = \mathbf{A}^T\mathbf{A} = \mathbf{I},则它是正交矩阵
  5. 矩阵的逆是唯一的