线性代数向量正交的条件(线性代数精华从正交向量到正交矩阵)
线性代数向量正交的条件(线性代数精华从正交向量到正交矩阵)
2024-11-24 04:49:25  作者:午夜寂寞  网址:https://m.xinb2b.cn/know/ewn128300.html

我们今天一起来看正交向量和正交矩阵的概念,首先我们来复习一下向量相关。

向量内积

这个基本上是中学当中数学课本上的概念,两个向量的内积非常简单,我们直接看公式回顾一下:


这里X和Y都是n维的向量,两个向量能够计算内积的前提是两个向量的维度一样。从上面公式可以看出来,两个向量的内积就等于两个向量对应各个维度的分量的乘积的和

为了和矩阵乘法以及普通的乘法做区分,我们通常把两个向量的内积写成:


这里有一个很重要的性质,对于一个向量而言,我们可以用欧几里得公式计算它的长度。进一步,我们可以用向量的长度以及向量之间的夹角来表示向量的内积,如下:


其中的θ是x和y向量之间的夹角,对于三维及以下空间内的向量,这一点非常直观。对于高维度的向量,我们很难想象它的物理意义。不过没有关系,我们一样可以认为向量之间存在一个广义超空间内的一个夹角。在机器学习领域,我们通常用这个夹角来反应向量之间的相似度。两个向量越相似,那么它们之间的夹角应该越小,对应的cos余弦值应该越大。所以我们可以用两个向量之间的余弦值来反应它们之间的相似度。余弦值的计算就源于此。

正交向量

从上面的公式可以看出来,向量的内积等于两个向量长度乘上向量之间的夹角。对于非零向量而言,它们的长度都应该是大于0的。所以两个向量的内积的大小,就完全取决于向量之间的夹角θ。

如果θ小于90°,那么


,那么内积为正值。如果θ大于90°,那么余弦值为负值。所以我们可以通过余弦值正负判断夹角是锐角还是钝角。既然说到夹角,自然就离不开一种特殊情况——垂直

如果是在二维平面当中,两个向量夹角是90°,那么显然这两个向量垂直。在高维空间当中也是一样,不过我们一般不说垂直,而是会换一个词——正交。两个非零向量的内积为0,说明两个向量正交。

正交向量组

搞清楚了正交向量之后,正交向量组也就明确了。正交向量组是指一组两两正交且非零的向量组。

如果n维的向量组:


两两正交,那么,它们一定线性无关。也就是说不存在一组不为零的系数λ,使得:


这点很容易证明,由于向量组内向量均不为0,我们只需要在等式两边随便乘上一个向量即可,假设我们乘的是a1。由于它与其他向量两两正交,所以其他项全为0。如果要等式成立,那么必须要:


由于a1不为0,那么必然不为0,要使得等式成立,只能是λ1为0。

规范正交基

我们把正交向量组的概念和基的概念融合,如果向量组


是向量空间V的一个基。如果它们之间彼此正交,那么就称它们是一组规范正交基

对于向量a,我们可以很方便地求出它在规范正交基下各个维度的坐标:


也就是说向量a,在规范正交基下某一个维度的坐标, 等于它和整个维度的正交基向量的内积

如果说我们已经知道向量空间V中的一组基是


,我们怎么求V的规范正交基呢?

这里要用到一个算法,叫做施密特算法。通过这个算法,我们可以通过向量空间的一组基来求出它的正交基

这个算法很简单,我们可以直接写出它的公式:


我们随便取两个b向量乘一下就知道,b向量组之中两两正交。所以,我们只要将b向量组单位化一下,就可以求出对应的规范正交基了。

即:


这个算法虽然不难,但蛮重要。在机器学习领域中一些降维算法,很多都与施密特正交化方法有关。

正交矩阵

之前我们在介绍矩阵的时候,曾经说过,我们可以把一个矩阵看成是一个特定的向量组的结构。同样,我们也可以把一个规范正交基向量组看成是一个矩阵,那么这个矩阵就称为是正交矩阵。

它拥有如下性质:


其中I是单位矩阵,它的充要条件是矩阵A当中的每一列都是一个单位列向量,并且两两正交

最后,我们看一下正交矩阵的性质。它的主要性质有三个:

1. 如果A是正交矩阵,那么


,也是正交矩阵,并且


2. 如果A和B都是正交矩阵,并且它们阶数一样,那么AB也是正交矩阵。

3. 如果A是正交矩阵,向量y经过A变换之后行列式保持不变。

这三个性质都很简单,我们通过正交矩阵的性质基本上都可以直接推导得到,或者是非常直观,和我们的直觉吻合。其实怎么推导不是重点,对于算法工程师而言,更重要的是理解这些概念的意思,并且将它与算法模型当中起到的功能联系起来,这才是最重要的事情。

今天关于正交向量和矩阵的内容就到这里,希望大家学有收获,如果喜欢本文, 请点个关注或者转发支持作者吧~

  • 什么是五味子五味子的用途(五味子是什么植物)
  • 2024-11-24五味子是什么植物五味子是什么植物呢?五味子的功效与作用有哪些呢?下面小编整理了一些相关资料,下面一起来看看吧一、五味子是什么植物五味子为木兰科植物五味子或华中五味子的干燥成熟果实前者习称“北五味子”,后者习称“南五味。
  • 腊肉是放冰箱里好还是挂起来好(腊肉怎么保存)
  • 2024-11-24腊肉怎么保存腊肉放冰箱保存会更好一点腊肉是一种很常见的土特产,尤其是在中国北方的农村地区农村人常用的储藏方法是把腊肉挂起来风干,然后冷冻在冰箱里首先,新鲜熏出的腊肉应该存放一段时间在沉淀过程中,不得直接放入冰箱只。
  • dnf有哪些稀有光剑?DNF老玩家拿出一把蓝色光剑
  • 2024-11-24dnf有哪些稀有光剑?DNF老玩家拿出一把蓝色光剑DNF这游戏武器装备还是非常多的,毕竟作为一款老游戏,地下城也是在不断地更新当中的而在这不断更新的十多年期间,这游戏也是出现了很多的装备,而这些装备的属性和外观也是各有特色的不过大部分的装备都被版本所。
  • 如何做酸辣汤家常做法(一道传统的川菜小吃)
  • 2024-11-24一道传统的川菜小吃大家好,这里是【刘一手美食】,关注老刘,每天分享一道好吃又实用的家常菜1、酸辣汤是一道传统的川菜小吃,属于川菜或湘菜系2、今天老刘就来分享一下“酸辣汤”做法,喜欢的朋友可以先收藏,有空自己试一下3、下。
  • G89次列车运行线路图(G89次列车运行线路图)
  • 2024-11-24G89次列车运行线路图G89次列车运行线路图:北京西站开往成都东站G89次列车是由北京西开往成都东的高速动车组列车,途经北京、河北、河南、陕西、四川5省市区,早上6时53分从北京西站发车,下午14时38分到达成都东站,全程。
  • 会计学最好的十所大学(这3所大学是会计人的圣地)
  • 2024-11-24这3所大学是会计人的圣地会计学这门专业是一门热门专业,每年都有很多的考生选择该专业今天就给大家介绍几所学校,是会计人的圣地,如果能够考到这几所大学的会计专业,毕业轻松进入有名的大企业,就业超稳定一、厦门大学厦门大学是一所98。
  • urs是什么意思(urs的含义)
  • 2024-11-24urs的含义URS即,是指使用方对设备RS(userrequirementspecification)即用户需求说明指使用方对设备、厂房、硬件设施系统等提出的自己的期望使用需求说明,设计方依据这个需求等提出自己具。
  • 柏拉图式的爱情是什么意思 柏拉图式的爱情是什么
  • 2024-11-24柏拉图式的爱情是什么意思 柏拉图式的爱情是什么爱情一直是男女之间亘古不变的话题,经常听一些单身朋友说渴望有一份柏拉图式的爱情,那么柏拉图式的爱情是什么意思柏拉图式的爱情是什么呢?下面小编就为大家来介绍一下柏拉图式爱情(精神爱情)柏拉图式爱情,也称。
  • 孔雀戒指正确戴法(孔雀戒指应该带在哪个手指头上)
  • 2024-11-24孔雀戒指应该带在哪个手指头上孔雀戒指带在哪个手指上应根据自身情况来决定:右手小指:不谈恋爱;左手小指:右手无名指:热恋中;左手无名指:结婚;右手中指:名花有主;左手中指:订婚;右手食指:单身贵族;左手食指:未婚大拇指都是代表权势。
  • 挂面下多久合适(买挂面时谨记三不买)
  • 2024-11-24买挂面时谨记三不买面条是我们日常主食之一,也是中国传统食物,早在四千年前就已经得以流传发展,随着中国的饮食文化传播,也让面条因制作方式的不同,而延伸出不同风格与样式的面条,长的、短的、细圆的、宽体的等等,有现做现卖的湿。
  • 巩俐有没有孩子
  • 2024-11-24巩俐有没有孩子没有,结婚过两次,而且二婚丈夫是一个外国人,而自己结婚时候已经很大年龄了,也没有考虑生育一个孩子,并且也错过最佳时间,所以没有孩子。
  • 为什么长租公寓这么大(青年居住报告②)
  • 2024-11-24青年居住报告②澎湃研究所研究员赵忞“十四五”期间,有关完善住房市场体系和住房保障体系,加快构建高端有市场、低端有保障的住房制度再次被提上日程2021年7月,国务院办公厅印发《关于加快发展保障性租赁住房的意见》,首次。