線性代數筆記2：基本子空間的正交性及性質

基本子空間中有着更加特殊和精确的關系，由此可以引出向量空間的正交性及投影等問題。

正交性及正交補

定義：設 S S 和TT是 Rn R n 的兩個子空間（subspace），如果對于 ∀V∈S，w∈T，vTw=0 ∀ V ∈ S ， w ∈ T ， v T w = 0 ，則 S S 垂直于TT（S is perpendicular to T），并且，這個定義是對稱的，即 S S 垂直于TT<=> T T 垂直于SS。記做 S⊥T S ⊥ T 。也可以說 S S 和TT是正交的（S and T are orthogonal）。

幾個常見結論

1. 設 A=B1B2 A = B 1 B 2 ，其中 B1 B 1 是 n×r n × r 矩陣， B2 B 2 是 r×n r × n 矩陣，後兩矩陣秩都為 r r ，則AA是一個 n×n矩陣，且r(A)=r n × n 矩 陣 ， 且 r ( A ) = r 。

   A A 的每一列是B1B1的列向量的線性組合，是以 C(A)⊂C(B1) C ( A ) ⊂ C ( B 1 ) 。

   A A 的每一列是B2B2的行向量的線性組合，是以 C(AT)⊂C(BT2) C ( A T ) ⊂ C ( B 2 T ) 。

   B1 B 1 是列滿秩，則存在可逆 n×n n × n 矩陣 E1 E 1 ， E1B1=(Ir 0)T E 1 B 1 = ( I r   0 ) T 。

   B2 B 2 是行滿秩，則存在可逆 n×n n × n 矩陣 E2 E 2 ， B2E2=(Ir 0) B 2 E 2 = ( I r   0 ) 。

   C(A)=C(AE2)=C(B1(Ir 0))=C(B1) C ( A ) = C ( A E 2 ) = C ( B 1 ( I r   0 ) ) = C ( B 1 ) 。是以， dimC(A)=dimC(B1) d i m C ( A ) = d i m C ( B 1 ) ，即 r(A)=r(B1)=r r ( A ) = r ( B 1 ) = r 。

2. 若 A A 的列向量線性無關，則ATAATA為可逆方陣。

   A A 列滿秩 => Ax=0Ax=0隻有零解 => ATAx=0 A T A x = 0 隻有零解 => ATA A T A 列滿秩。

   又因為 ATA A T A 是 n×n n × n 方陣，是以為可逆矩陣。

3. 若 S∩T≠{0} S ∩ T ≠ { 0 } ，則 ∃v∈S∩T，vTv≠0 ∃ v ∈ S ∩ T ， v T v ≠ 0 。是以 S S 和TT不正交。

   命題：設 S S 和TT是 Rn R n 中的兩個子空間，且 dimS+dimT>n，則S和T d i m S + d i m T > n ， 則 S 和 T 不正交。

子空間的正交性

定理：設 A A 是 n×nn×n矩陣，則 C(A)和N(AT) C ( A ) 和 N ( A T ) 正交， C(AT) C ( A T ) 和 N(A) N ( A ) 正交。

設 α∈N(AT) α ∈ N ( A T ) ，則 αTA=0 α T A = 0 。

是以 α和A α 和 A 的全部列向量垂直。可以得到 N(AT)⊥C(A) N ( A T ) ⊥ C ( A ) 。

将 A A 換成ATAT，可以得到 C(AT)⊥N(A) C ( A T ) ⊥ N ( A ) 。

四個子空間還存在着如下的關系：

N(AT)+C(A)=Rm，C(A)+N(AT)=Rn N ( A T ) + C ( A ) = R m ， C ( A ) + N ( A T ) = R n

我們說 C(A)是N(AT) C ( A ) 是 N ( A T ) 在 Rm R m 上的正交補， C(AT) C ( A T ) 是 N(A) N ( A ) 在 Rn R n 上的正交補。

定義：設 V⊂Rn V ⊂ R n 是一個子空間， V V 在RnRn中的正交補定義為集合

{w∈Rn|vTw=0,∀v∈V} { w ∈ R n | v T w = 0 , ∀ v ∈ V }

子空間的性質

1. 若 A A 對稱，即A=ATA=AT，則 C(A)=C(AT) C ( A ) = C ( A T ) ，是以 C(A)⊥N(A) C ( A ) ⊥ N ( A ) 。

2. ATA A T A 為對稱陣，且 N(A)=N(ATA)，C(AT)=C(ATA) N ( A ) = N ( A T A ) ， C ( A T ) = C ( A T A ) 。

   Ax=0⇒ATAx=0⇒N(A)⊆N(ATA) A x = 0 ⇒ A T A x = 0 ⇒ N ( A ) ⊆ N ( A T A )

   ATAx=0⇒xTATAx=0⇒Ax=0⇒N(ATA)⊆N(A) A T A x = 0 ⇒ x T A T A x = 0 ⇒ A x = 0 ⇒ N ( A T A ) ⊆ N ( A )

   ⇒N(A)=N(ATA) ⇒ N ( A ) = N ( A T A )

3. 若 Ax=b A x = b 有解，則 Ax=b A x = b 在 C(AT) C ( A T ) 中有唯一解。

   存在性：設 Ax=b A x = b 有解，則 b∈C(A) b ∈ C ( A ) 。又因為 C(A)=C(AAT) C ( A ) = C ( A A T ) ，是以 b∈C(AAT) b ∈ C ( A A T )

   ∴∃y∈Rm⇒AATy=b ∴ ∃ y ∈ R m ⇒ A A T y = b

   letxr=ATy⇒Axr=b∴xr∈C(AT) l e t x r = A T y ⇒ A x r = b ∴ x r ∈ C ( A T )

   唯一性（反證法）：若 x1r，x2r∈C(AT)，and Ax1r=b=Ax2r x r 1 ， x r 2 ∈ C ( A T ) ， a n d   A x r 1 = b = A x r 2

   ∴A(x1r−x2r)=0⇒x1r−x2r∈N(A) ∴ A ( x r 1 − x r 2 ) = 0 ⇒ x r 1 − x r 2 ∈ N ( A )

   ∵x1r，x2r∈C(AT)∴x1r，x2r∈C(AT)∩N(A)={0} ∵ x r 1 ， x r 2 ∈ C ( A T ) ∴ x r 1 ， x r 2 ∈ C ( A T ) ∩ N ( A ) = { 0 }

   ∴x1r=x2r ∴ x r 1 = x r 2

歡迎關注我的個人部落格。