线性代数向量正交的条件(线性代数精华从正交向量到正交矩阵)
线性代数向量正交的条件(线性代数精华从正交向量到正交矩阵)
2024-11-22 07:21:38  作者:午夜寂寞  网址:https://m.xinb2b.cn/tech/ewn128300.html

我们今天一起来看正交向量和正交矩阵的概念,首先我们来复习一下向量相关。

向量内积

这个基本上是中学当中数学课本上的概念,两个向量的内积非常简单,我们直接看公式回顾一下:


这里X和Y都是n维的向量,两个向量能够计算内积的前提是两个向量的维度一样。从上面公式可以看出来,两个向量的内积就等于两个向量对应各个维度的分量的乘积的和

为了和矩阵乘法以及普通的乘法做区分,我们通常把两个向量的内积写成:


这里有一个很重要的性质,对于一个向量而言,我们可以用欧几里得公式计算它的长度。进一步,我们可以用向量的长度以及向量之间的夹角来表示向量的内积,如下:


其中的θ是x和y向量之间的夹角,对于三维及以下空间内的向量,这一点非常直观。对于高维度的向量,我们很难想象它的物理意义。不过没有关系,我们一样可以认为向量之间存在一个广义超空间内的一个夹角。在机器学习领域,我们通常用这个夹角来反应向量之间的相似度。两个向量越相似,那么它们之间的夹角应该越小,对应的cos余弦值应该越大。所以我们可以用两个向量之间的余弦值来反应它们之间的相似度。余弦值的计算就源于此。

正交向量

从上面的公式可以看出来,向量的内积等于两个向量长度乘上向量之间的夹角。对于非零向量而言,它们的长度都应该是大于0的。所以两个向量的内积的大小,就完全取决于向量之间的夹角θ。

如果θ小于90°,那么


,那么内积为正值。如果θ大于90°,那么余弦值为负值。所以我们可以通过余弦值正负判断夹角是锐角还是钝角。既然说到夹角,自然就离不开一种特殊情况——垂直

如果是在二维平面当中,两个向量夹角是90°,那么显然这两个向量垂直。在高维空间当中也是一样,不过我们一般不说垂直,而是会换一个词——正交。两个非零向量的内积为0,说明两个向量正交。

正交向量组

搞清楚了正交向量之后,正交向量组也就明确了。正交向量组是指一组两两正交且非零的向量组。

如果n维的向量组:


两两正交,那么,它们一定线性无关。也就是说不存在一组不为零的系数λ,使得:


这点很容易证明,由于向量组内向量均不为0,我们只需要在等式两边随便乘上一个向量即可,假设我们乘的是a1。由于它与其他向量两两正交,所以其他项全为0。如果要等式成立,那么必须要:


由于a1不为0,那么必然不为0,要使得等式成立,只能是λ1为0。

规范正交基

我们把正交向量组的概念和基的概念融合,如果向量组


是向量空间V的一个基。如果它们之间彼此正交,那么就称它们是一组规范正交基

对于向量a,我们可以很方便地求出它在规范正交基下各个维度的坐标:


也就是说向量a,在规范正交基下某一个维度的坐标, 等于它和整个维度的正交基向量的内积

如果说我们已经知道向量空间V中的一组基是


,我们怎么求V的规范正交基呢?

这里要用到一个算法,叫做施密特算法。通过这个算法,我们可以通过向量空间的一组基来求出它的正交基

这个算法很简单,我们可以直接写出它的公式:


我们随便取两个b向量乘一下就知道,b向量组之中两两正交。所以,我们只要将b向量组单位化一下,就可以求出对应的规范正交基了。

即:


这个算法虽然不难,但蛮重要。在机器学习领域中一些降维算法,很多都与施密特正交化方法有关。

正交矩阵

之前我们在介绍矩阵的时候,曾经说过,我们可以把一个矩阵看成是一个特定的向量组的结构。同样,我们也可以把一个规范正交基向量组看成是一个矩阵,那么这个矩阵就称为是正交矩阵。

它拥有如下性质:


其中I是单位矩阵,它的充要条件是矩阵A当中的每一列都是一个单位列向量,并且两两正交

最后,我们看一下正交矩阵的性质。它的主要性质有三个:

1. 如果A是正交矩阵,那么


,也是正交矩阵,并且


2. 如果A和B都是正交矩阵,并且它们阶数一样,那么AB也是正交矩阵。

3. 如果A是正交矩阵,向量y经过A变换之后行列式保持不变。

这三个性质都很简单,我们通过正交矩阵的性质基本上都可以直接推导得到,或者是非常直观,和我们的直觉吻合。其实怎么推导不是重点,对于算法工程师而言,更重要的是理解这些概念的意思,并且将它与算法模型当中起到的功能联系起来,这才是最重要的事情。

今天关于正交向量和矩阵的内容就到这里,希望大家学有收获,如果喜欢本文, 请点个关注或者转发支持作者吧~

  • 自来水放多久浇一次花(刚接的自来水别给花浇)
  • 2024-11-22刚接的自来水别给花浇天热之后,很多花都是因为浇水不当而死的,大家要改变一下浇水策略了!栀子花,刚接的自来水别浇了栀子花越养越黄叶,如果叶子颜色深、伴随褐色溃烂的斑块,可能是浇水太多、环境不通风闷的但如果叶子颜色暗淡变黄,。
  • 一带一路内涵丰厚(一带一路内涵丰厚)
  • 2024-11-22一带一路内涵丰厚“一带一路”贯穿亚欧非大陆,东面是活跃的东亚经济圈,西面是发达的欧洲经济圈,其间是广袤的潜力巨大的发展中国家“一带一路”倡议内涵丰厚,意义深远,将谱写各国合作共赢的新篇章“一带一路”比古“丝绸之路”的。
  • maxfactor粉底液评测(maxfactor粉底霜)
  • 2024-11-22maxfactor粉底霜OnlyLady女人志2015-02-0300:00:00maxfactor粉底霜瞩目全场之蜜丝佛陀水样触感粉底霜神奇三态变化,即刻呈现后台完美底妆首先是看起来是霜状的质地,性质非常稳定,便于携带运输。
  • 如何做青椒火腿土豆片呢(青椒火腿土豆片的做法)
  • 2024-11-22青椒火腿土豆片的做法食材:青椒适量,土豆适量,火腿适量,胡萝卜适量,耗油适量,盐适量,鸡精适量,白糖适量,黑胡椒粉适量,淀粉适量,生抽适量,香油适量将青椒、土豆、火腿、胡萝卜切成菱状锅中加入少许盐,水开后先放入胡萝卜烫3。
  • 特色小吃水爆肚的做法(好吃寻味尖叫菜)
  • 2024-11-22好吃寻味尖叫菜爆肚图/ICphoto爆肚是北京小吃中最著名的一种,早在清乾隆年间就有记载然而,爆肚也是被“误会”最深的:不熟悉爆肚的人,总是觉得在美食街和风景区餐饮摊位上那一塑料碗黑乎乎的肚丝加香菜有什么可吃的?其。
  • 机动部队电影剧情(不一样的警匪片)
  • 2024-11-22不一样的警匪片四名内地悍匪来港作案,他们准备械劫黑帮集团机动部队森、May等乘车往执勤途中与打劫得手的悍匪相遇,PTU被轰重案组探员肥棠嗜赌,欠下大笔债项,常被贵利雄追数,尊严尽失肥棠为躲避贵利雄的手下,搬到公寓住。
  • 5月你好励志祝福语句子(有什么5月你好励志句子)
  • 2024-11-22有什么5月你好励志句子这个世界并不是掌握在那些嘲笑者的手中,而恰恰掌握在能够经受得住嘲笑与批评不断往前走的人手中五月,早安!也许现在的你很累,但未来的路还很长,不要忘了当初为何而出发,是什么让你坚持到现在,勿忘初心,方得始。
  • 稻壳和米糠的区别(稻壳和米糠的区别介绍)
  • 2024-11-22稻壳和米糠的区别介绍成分不同稻壳:稻壳的主要成分因品种、产地、加工方法不同而有较大差异,一般其含水量为12%左右,含碳36%,含氮0.48%,含磷0.32%,含钾0.27%,稻壳与稻草的含量组成情况大致相似,但稻壳的硅酸。
  • 微信话费充值优惠骗局(朋友圈一个最新的骗局76充200话费)
  • 2024-11-22朋友圈一个最新的骗局76充200话费日赚1000,谁都想,真的可以的话,有生之年实现小目标也算是指日可待了当你看完这篇文章,或许你会很失望,1000不要想了,至少通过这个途径或许你应该感到庆幸,避免了一次上当受骗也一定有很多人希望这篇文。
  • 奇的意思是什么(奇的意思介绍)
  • 2024-11-22奇的意思介绍奇,汉语常用字,读作qi,jī,最早见于甲骨文,本义均是奇特、奇异,后延伸至特别、不可思议字源演变:“奇”是“骑”的本字甲骨文(大,成人)(马,力畜),表示一个人两腿跨坐在马的背上有的甲骨文将马的形象。
  • 济南海川中学有什么活动(济南海川中学群星璀璨)
  • 2024-11-22济南海川中学群星璀璨中国山东网讯(通讯员王广辉)5月19日晚,高新区海川中学的各班级教室里欢声笑语、歌舞飞扬高新区海川中学第一届“群星璀璨”星级评比颁奖活动在各班教室举行海川中学“群星璀璨”星级评比活动中荣获各个奖项的学。
  • 今日把试君谁为不平事的意思(今日把试君谁为不平事出处)
  • 2024-11-22今日把试君谁为不平事出处原句是:十年磨一剑,霜刃未曾试今日把示君,谁有不平事?意思是:十年辛苦劳作,磨出一把利剑,剑刃寒光闪烁,只是未试锋芒如今取出,给您一看,谁有不平之事,不妨如实告我出自唐代诗人贾岛创作的一首五言绝句《剑。