2-6向量范数与矩阵范数的相容性
向量与方阵的范数

x2 L xn ) ∈ R n , n 维向量空间 R n 上常用的向量范数有:
T
2 2 2
(1) .2-范数: || x || 2 = x1 + x 2 L + x n ; (2) .1-范数: || x ||1 =| x1 | + | x 2 | + L + | x n | ; (3) . ∞ 范数: || x ||∞ = max{ xi };
− A → 0 (k → ∞) 。
练习
⎛ 2 − 4⎞ ⎛ 1 ⎞ 1.设 A = ⎜ ⎟,x = ⎜ ⎟ 。求: x 1 , x 2 , x ∞ , A 1 , A 2 , A ∞ 。 ⎜1 − 3⎟ ⎜ − 2⎟ ⎠ ⎝ ⎝ ⎠
2.设 A 是 n × n 矩阵,证明: n −1 A 2 ≤ n
−1 2
1≤i ≤ n
(4) . p -范数: x
p
=
p
x1 + L + xn
p
p
。
可以证明,它们满足定义 1 中的三条性质。 例1 解:
|| x || 2 = 12 + ( −3) 2 + 0 2 + 2 2 = 14 ;
计算向量 x = (1 − 3 0 2 ) 的 2-范数,1-范数, ∞ 范数和 4-范数。
n
1≤ j ≤ n
(1)1-范数: A 1 = max ∑ aij ;
i =1
(2) ∞ 范数: || A || ∞ = max ∑ aij ;
1≤i ≤ n j =1
n
(3)2-范数: || A || 2 = λ max , λ max 为 AT A 的最大特征值; (4)Frobenius 范数: || A || F =
向量范数与矩阵范数的相容性

x v 1
v
例3 证明由n维向量的1-范数, ∞-范数和2-范数
所诱导的算子范数分别是(设A=(aij)n×n)
n
(1)
A
1
max j
i 1
aij
为从属于向量1 – 范数的矩阵范数
列模和之最大者:列和范数
n
(2)
A
max i
j 1
x
F
2
因此,可以用||A||F来刻画变换A 的结果。
对于给定的某种向量是否一定存在与它相容的矩阵 范数?
任意一个矩阵范数都有与之相容的向量范数吗?
从属于向量范数的矩阵范数
定理1 给定C n 上的向量范数 v ,ACnn 定义
Ax A max v
x x v
则
是Cnn上与向量范数
aij
2
2
与向量范数
证明:设 A (aij ) C n,n x 1,2 , ,n T C n
Ax 2
n i 1
a n
2
k 1 ik k
n(
i 1
n k 1
aikk
)2
n (
i 1
a n
k 1 ik
k )2
n [(
i 1
n k 1
aik
2 )(
n k 1
k
2
)]
n i 1
a n
2
k 1 ik
n
2
k1 k
A x
F
2
||A||F 与 ||x||2 相容的性质反映了 ||A||F 是像 Ax 的2-范 数 ||Ax||2 与原像 x 的2-范数之比的最大值,即
5-3 向量范数和矩阵范数的相容

的向量范数。 的向量范数。如果对任意的 A ∈ C n×n ( R n×n ), x ∈ C n ( R n ) 都有: 都有: Ax α ≤ A β x α
Department of Mathematics
则称矩阵范数 A β 与向量范数 x α 是相容的
定理1: 范数和F- 范数分别与 定理 :在Cn×n上的矩阵 m − 1 范数和 上的向量1–范数和 范数和2–范数相容 定义 在 Cn 上的向量 范数和 范数相容
≤ =
∑ [(∑
n i=1 n
n
k =1
aik )(∑k=1 ξk )]
2 2
∑ ∑
i=1
n k =1
aik
∑
n k =1
ξk
2
= AF⋅ x 2
所以,矩阵的 范数与向量的2 所以 矩阵的F – 范数与向量的 – 范数相容 矩阵的
Department of Mathematics
定理2: 上的矩阵 m∞ − 上的向量1定理 : n×n 范数与Cn上的向量 、2 -、 、 C 范数均相容 ∞− 证明: 证明:矩阵 m∞ − 范数与向量∞−范数的相容性
(1), (2),
A = max Ax
x γ =1
γ γ
y = x ⇔ x v =1 令 yv
A = max Ax
x γ ≤1
都是由 • γ 诱导出的算子范数
y = max A y≠0 yv
证(1) A = max
y≠0
Ay v yv
Ay = max y≠0 yv : x v = 1}
v
v
= max{ Department of MathematicsAx v
x≠0
矩阵范数详解.docx

《周国标师生交流讲席010》向量和矩阵的范数的若干难点导引(二)一.矩阵范数的定义引入矩阵范数的原因与向量范数的理由是相似的,在许多场合需要“测量”矩阵的“大小”,比如矩阵序列的收敛,解线性方程组时的误差分析等,具体的情况在这里不再复述。
最容易想到的矩阵范数,是把矩阵A C m n可以视为一个mn维的向量(采用所谓“拉直”的变换),所以,直观上可用C mn上的向量范数来作为A C m n的矩阵范数。
比如m n 1在∣1 -范数意义下,IIAl1 ;二Ia ijI= tr(A H A) 2; (1.1 )1Zl mn A2在I2-范数意义下,∣∣A∣∣F=∑∑同|2,(1.2)Iy j A J注意这里为了避免与以后的记号混淆,下标用“F”,这样一个矩阵范数,称为Frobenius范数,或F-范数。
可以验证它们都满足向量范数的3个条件。
那么是否矩阵范数就这样解决了?因为数学上的任一定义都要与其对象的运算联系起来,矩阵之间有乘法运算,它在定义范数时应予以体现,也即估计AB的“大小”相对于A与B的“大小”关系。
定义1设A C mn,对每一个A ,如果对应着一个实函数N(A),记为IlAll ,它满足以下条件:(1)非负性:|| A||_0 ;(1 a)正定性:A=O mn= IIAII= 0(2)齐次性:||〉A||=| |||A||, • C ;(3)三角不等式:||A||A B||—||A|| ||B||, -B C m n则称N(A)=|| A||为A的广义矩阵范数。
进一步,若对C m n,C n 1C m l上的同类广义矩阵范数|| || ,有(4)(矩阵相乘的)相容性:|| A || AB ||_|| A|||| B ||, B C n I , 则称N(A) =||A||为A的矩阵范数。
我们现在来验证前面(1.1 )和(1.2 )定义的矩阵范数是否合法?我们这里只考虑(1.2 ),把较容易的(1.1 )的验证留给同学们,三角不等式的验证。
矩阵范数标准详解

《周国标师生交流讲席010》向量和矩阵的范数的若干难点导引(二)一. 矩阵范数的定义引入矩阵范数的原因与向量范数的理由是相似的,在许多场合需要“测量”矩阵的“大小”,比如矩阵序列的收敛,解线性方程组时的误差分析等,具体的情况在这里不再复述。
最容易想到的矩阵范数,是把矩阵m nA C ⨯∈可以视为一个mn 维的向量(采用所谓“拉直”的变换),所以,直观上可用mn C上的向量范数来作为m nA C⨯∈的矩阵范数。
比如在1l -范数意义下,111||||||mniji j A a===∑∑()12tr()HA A =; ()在2l -范数意义下,12211||||||mnF ij i j A a ==⎛⎫= ⎪⎝⎭∑∑, () 注意这里为了避免与以后的记号混淆,下标用“F ”,这样一个矩阵范数,称为Frobenius范数,或F-范数。
可以验证它们都满足向量范数的3个条件。
那么是否矩阵范数就这样解决了因为数学上的任一定义都要与其对象的运算联系起来,矩阵之间有乘法运算,它在定义范数时应予以体现,也即估计AB 的“大小”相对于A B 与的“大小”关系。
定义1 设m nA C ⨯∈,对每一个A ,如果对应着一个实函数()N A ,记为||||A ,它满足以下条件:(1)非负性:||||0A ≥;(1a )正定性:||||0m nA O A ⨯=⇔=(2)齐次性:||||||||||,A A C ααα=∈;(3)三角不等式:||A ||||||||||||,m nA B A B B C ⨯+≤+∀∈则称()||||N A A =为A 的广义矩阵范数。
进一步,若对,,m nn l m l C C C ⨯⨯⨯上的同类广义矩阵范数||||•,有(4)(矩阵相乘的)相容性:||A ||||||||||||AB A B ≤, n lB C⨯∈,则称()||||N A A =为A 的矩阵范数。
我们现在来验证前面()和()定义的矩阵范数是否合法我们这里只考虑(),把较容易的()的验证留给同学们,三角不等式的验证。
矩阵范数理论及其应用

第四章 矩阵范数理论及其应用知识要点:1、向量范数及其性质(范数与赋范空间,n 维向量的1-范数1x 、2-范数2x 、p -范数px 和∞范数x∞,pp lim xx ∞→∞=,aP a xPx =,2H H PxPx x P Px ==,有限维赋范空间的范数是等价的)2、矩阵范数及其相容性(Frobenius 范数,FEn =,相容性:AB A B ≤,1E ≥)3、算子范数(定义,列范数,行范数,谱范数)4、矩阵范数的应用(矩阵序列及幂级数的收敛性,矩阵条件数,摄动理论、矩阵的谱半径)§4.1 向量范数及其性质一、范数与赋范线性空间定义1:如果线性空间V 中的任一向量x ,都对应—个实值函数()f x (记为x ),并满足以下三个条件(称为范数公理):(1)非负性:0x ≠时, x >0;0x =时, x =0。
(2)齐次性:ax =a x ,a K ∈,x V ∈。
(3)三角不等式:x y +≤x +y ,,x y V ∈。
则称x 为V 上向量x 的范数(norm ),V 称为赋范线性空间(normed linear space )。
易证x y -满足距离公理,称之为x 与y 的范数诱导的距离。
若0n x x -→,则称nx 收敛于x ,记为n x x →。
例1:对于连续函数空间[,]C a b 中的向量()f x ,可如下定义范数为:1()()baf t f t dt =⎰,()max ()a t bf t f t ∞≤≤=,1()()bpppa f t f t dt ⎡⎤=⎢⎥⎣⎦⎰,1p ≤<∞。
分别称之为1-范数,∞-范数,p -范数。
注:需要用到数学专业的一些函数不等式,才能证明上述范数的正确性。
性质1:对于赋范线性空间V 上任意的x ,定义实函数()f x x =,则()f x 为V 上的连续函数,即0x x →时,0()()f x f x →,其中0x V ∈。
向量和矩阵的范数

|| k Ax || | k ||| Ax || 2) || k A || max max | k ||| A || x0 x0 || x || || x || || Ax || 3) 由 || A || max ,则 || Ax |||| A |||| x || x R n x 0 || x || 于是 || ( A B ) x || || Ax Bx |||| A |||| (|| A || || B ||) || x ||
法则对应于一非负实数 ||
n
则称 || x || 为向量x的范数。
常见的向量范数
设向量x ( x1 , x2 ,..., xn )T || ||
x || | x |
1 i 1 i
n
x || || x ||
( | xi | ) ( x, x) ( xT x) 2
i 1
3.5 病态方程组与矩阵的条件数
例3.5.1 设线性方程组 0.99 x1 1.99 1 0.99 0.98 x 1.97 2 试分析系数矩阵和右端项有微小扰动, 解将产生 什么样的变化 ? 解 该方程组的精确解为x (1,1)T 。
||
Hale Waihona Puke x ||2 n ||
x ||
1 例如 : || n
1 n x ||1 | xi | || n i 1
x ||
max{| xi |} | xi |
1i n i 1
n
向量的收敛性
定义3.4.2 设R n中一向量序列{ x ( k ) }( k 1,2,...), 其中 (i 1,2,..., n)
向量范数与矩阵范数

kA max kAx k max Ax k A .
x 1
x 1
(3) 对任意的n×n矩阵 A 和 B, 有
A B max (A B)x max Ax Bx
x 1
x 1
max Ax Bx x 1
max Ax max Bx A B
正定性三角不等式积的范数小于等于范数的积矩阵范数与向量范数的相容性定义给定向量范数和矩阵范数如果对任和任意的nn矩阵a它们总满足则称所给的矩阵范数与向量范数是相容的
§1.3 向量范数与矩阵范数
为了研究线性方程组近似解的误差估 计和迭代法的收敛性,我们需要对 Rn 中 向量或 Rn×n 中矩阵的“大小”引进某种 度量----向量或矩阵的范数。向量范数是 三维欧氏空间中向量长度概念的推广,在 数值分析中起着重要作用。
1.3.1 向量范数
向量的范数是刻画向量大小的量, 又叫向量的模.
❖定义 Rn 上的实值函数‖·‖称为向量范数,如果 对任意的 x, y∈Rn, 它均满足下列3条性质:
(1)正定性: || x ||,且 0 x 0;|| x || 0
(2)齐次性:对 k ,有R
|| kx |;|| k | || x ||
以及
A. F
解 x | 3| | 5| |1| 9, 1
x 32 (5)2 12 35 2
x max{| 3|,| 5|,|1|} 5,
|1| | 2 | | 3 |,
A
1
max
|
5
|
|1|
|
8
|,
- 1、下载文档前请自行甄别文档内容的完整性,平台不提供额外的编辑、内容补充、找答案等附加服务。
- 2、"仅部分预览"的文档,不可在线预览部分如存在完整性等问题,可反馈申请退款(可完整预览的文档不适用该条件!)。
- 3、如文档侵犯您的权益,请联系客服反馈,我们会尽快为您处理(人工客服工作时间:9:00-18:30)。
n n 2 aij 与向量范数 i 1 j 1
T
1 2
A (aij ) C , x 1 , 2 , , n C n 证明:设
Ax 2
n i 1
n n
n k 1
aik k
2
2
i 1 ( k 1 aik k )
v
v
) max
x0
A( Bx ) v Bx Bx
v
v v
x
|| A( Bx ) || || Bx || max max A B Bx 0 || Bx || x 0 || x ||
即||A||满足相容性。
再证||A||与|| x ||v的相容性。
A max
x 0
Ax x
(2) 假设i=k时, | aij | 取得最大值,即
j 1 n
n
A
max aij
i j 1
n
max | aij | | akj |
i j 1 j 1
n
则对于满足||x||∞=1的任意n维向量x,有
Ax
Ax = maxn aij x j | aij | max | aij | n
j 1 j 1
max n ij x j max | aij || x j | a n
i i
n
n
n
max
i
i j 1
j 1 |a
ij |max | j
x j |1
j
| akj |
j 1
i
j 1
取x0的第j个分量xj为
akj , x j akj 1 , akj 0 akj 0
2 i 1
n
Ax 2 y H Dy i2 | i |2
2 i 1
n
因为 | i | y 2 1 ,所以 Ax 2 12
2 2
2
n
i 1
Ax 2 1
又由x的任意性可得 若取 x=u1 ,则显然有
Au1
2 2
max Ax 2 1
|| x||2 1
n i 1 n n 2 n
( k 1 aik k )2 i 1
n n 2
[( k 1 aik )( k 1 k )]
n k 1
i 1 2
aik
2
n k 1
k
2
AF x
||A||F 与 ||x||2 相容的性质反映了 ||A||F 是像 Ax 的2-范 数 ||Ax||2 与原像 x 的2-范数之比的最大值,即
m
x
H
v
x0
x0
x 0
H
x v x
m
0
x 0
H
x v x
H m
0
再证 v 与 m的相容性 nn x C n 由矩阵范数定义中的第4条 A C
Ax v ( Ax) H
m
A m x H
m
Am xv
定理3
设A为n阶方阵,则
x, y
则称矩阵范数 A 与向量范数 x 是相容的
例1 证明矩阵范数
x
1
A
xi
i 1
n
m1
aij 与向量范数
i 1 j 1
n
n
是相容的。
nn
A (aij ) C , x 1 , 2 , , n C n 证明:设
T
Ax 1 i 1 k 1 aik k i 1 ( k 1 aik k )
Ax 仍是C n ( Rn )上的向量, 上的向量范数,由于
所以: Ax A x
A 是 C nn ( Rnn ) x 是 C n ( Rn ) 上的矩阵范数, 上 定义1 设 的向量范数。如果对任意的 A C nn ( Rnn ), x C n ( Rn )
都有: Ax A x
2 2 D 12 , 2 , ..., n
从而有
T
Ax 2 x H U H DUx
2 2 2 H H 2
令 y Ux 1 ,2 , ...,n ,则 y 2 Ux 2 x U Ux x 2 1
故得
Ax 2 y H Dy i2 | i |2
v
v
Ax x
v
v
Ax v A x v
由向量范数诱导的矩阵的算子范数还有另外几个不 同的计算公式。
n n 定理2: 设 v 是 C ( R ) 上的向量范数,则
(1) (2)
A max Ax
x v 1
v
A max Ax
x v 1
v
都是由 v 诱导出的算子范数
y max A y0 yv
(1) || A ||2 max{| y H Ax | | || x ||2 1,|| y ||2 1}
(2) || A ||2 || A ||2 || AT ||2 || AH ||2
(3) || AH A ||2 || A ||2 2
(4) || A ||2 || UAV ||2 , U ,V U nn
m
就是 C n 上与 m相容的向量范数。 首先, 证明 v 是 C n 上的范数:
1.
三角不等式 x, y C n
m
x y v ( x y ) H
x H
m
y H
m
xv y
v
2, 绝对齐性
C
m
x v ( x) H
3, 正定性
x H
Ax x
2 2
A
F
因此,可以用||A||F来刻画变换A 的结果。 对于给定的某种向量是否一定存在与它相容的矩阵 范数? 任意一个矩阵范数都有与之相容的向量范数吗?
从属于向量范数的矩阵范数 给定C n 上的向量范数 v , A C nn 定义 定理1
A max
x
Ax x
v
x v 1 x v 1
Ax x
v
v
max
x 0
Ax x
v
v
A
故有,
max Ax v A
x v 1
例3
证明由n维向量的1-范数, ∞-范数和2-范数
n
所诱导的算子范数分别是(设A=(aij)n×n) (1)
A 1 max aij 为从属于向量1 – 范数的矩阵范数
j i 1
n
则有||x0||∞=1, 且Ax0的第k个分量为
a
j 1
kj
x j | akj | max | aij |
j 1 i j 1
n
n
(3) 任取 x x1 , x2 , ..., xn ,且 || x ||2=1, 则 2 H H H
Ax 2 ( Ax ) ( Ax ) x A Ax
证明 (1) 设A的各列向量为αi,即
A 1 2 n x x1 , x2 , ..., xn
Ax
1
T
A
1
max aij
j i 1
n
且
x
1
| xi | 1
i 1
n
x11 x2 2 ... xn n x1 1
H 证明 (1) 由于 | y Ax || ( y , Ax ) ||| y ||2 || Ax ||2
|| A ||2 || x ||2 || y ||2 || A ||2
而||A||2为||Ax||2在||x||2=1上的最大值,因此,存在x0, 使得 || Ax0 ||2 || A ||2 0
y x x v 1 令 yv
证(1) A max
y0
Ay y
v
v
Ay max y0 yv
v
v
max{ Ax v : x v 1}
(2)
显然
max Ax v max Ax
x v 1 x v 1
v
由(1)可知,
A max Ax
x v 1
v
max Ax v max
A max
x0
Ax x
v
v
0
即||A||满足正定性;另外,显然||A||=0当且仅当A=0。 (2) 对任意的常数k∈C,
kA max
x 0
kAx x
v
v
k max
x 0
Ax x
v
v
k A
即||A||满足齐次性。
(3) 对任意的方阵A,B∈Cn×n,
A B max
x 0
列模和之最大者:列和范数 (2)
A max aij 为从属于向量∞ – 范数的矩阵范数 i
j 1 n
行模和之最大者:行和范数 (3)
A 2 M 1 , M max{ : det( I AH A) 0}
为从属于向量2-范数的矩阵范数,也称谱范数。 为A的最大正奇异值。
n
k 1 max aij
j i 1
n i 1
,并取单位向量 ek 0, ..., 0,1, 0, ..., 0
Aek
1
T
则 ek 1 1 ,且有 k
1
,于是
Aek
1
| aik |
i 1
n
即||Ax||1在单位球面{ x | ||x||1=1 }上的极大值点为ek,