线性代数向量正交的条件(线性代数精华从正交向量到正交矩阵)
线性代数向量正交的条件(线性代数精华从正交向量到正交矩阵)
2024-11-05 08:52:31  作者:午夜寂寞  网址:https://m.xinb2b.cn/sport/ewn128300.html

我们今天一起来看正交向量和正交矩阵的概念,首先我们来复习一下向量相关。

向量内积

这个基本上是中学当中数学课本上的概念,两个向量的内积非常简单,我们直接看公式回顾一下:


这里X和Y都是n维的向量,两个向量能够计算内积的前提是两个向量的维度一样。从上面公式可以看出来,两个向量的内积就等于两个向量对应各个维度的分量的乘积的和

为了和矩阵乘法以及普通的乘法做区分,我们通常把两个向量的内积写成:


这里有一个很重要的性质,对于一个向量而言,我们可以用欧几里得公式计算它的长度。进一步,我们可以用向量的长度以及向量之间的夹角来表示向量的内积,如下:


其中的θ是x和y向量之间的夹角,对于三维及以下空间内的向量,这一点非常直观。对于高维度的向量,我们很难想象它的物理意义。不过没有关系,我们一样可以认为向量之间存在一个广义超空间内的一个夹角。在机器学习领域,我们通常用这个夹角来反应向量之间的相似度。两个向量越相似,那么它们之间的夹角应该越小,对应的cos余弦值应该越大。所以我们可以用两个向量之间的余弦值来反应它们之间的相似度。余弦值的计算就源于此。

正交向量

从上面的公式可以看出来,向量的内积等于两个向量长度乘上向量之间的夹角。对于非零向量而言,它们的长度都应该是大于0的。所以两个向量的内积的大小,就完全取决于向量之间的夹角θ。

如果θ小于90°,那么


,那么内积为正值。如果θ大于90°,那么余弦值为负值。所以我们可以通过余弦值正负判断夹角是锐角还是钝角。既然说到夹角,自然就离不开一种特殊情况——垂直

如果是在二维平面当中,两个向量夹角是90°,那么显然这两个向量垂直。在高维空间当中也是一样,不过我们一般不说垂直,而是会换一个词——正交。两个非零向量的内积为0,说明两个向量正交。

正交向量组

搞清楚了正交向量之后,正交向量组也就明确了。正交向量组是指一组两两正交且非零的向量组。

如果n维的向量组:


两两正交,那么,它们一定线性无关。也就是说不存在一组不为零的系数λ,使得:


这点很容易证明,由于向量组内向量均不为0,我们只需要在等式两边随便乘上一个向量即可,假设我们乘的是a1。由于它与其他向量两两正交,所以其他项全为0。如果要等式成立,那么必须要:


由于a1不为0,那么必然不为0,要使得等式成立,只能是λ1为0。

规范正交基

我们把正交向量组的概念和基的概念融合,如果向量组


是向量空间V的一个基。如果它们之间彼此正交,那么就称它们是一组规范正交基

对于向量a,我们可以很方便地求出它在规范正交基下各个维度的坐标:


也就是说向量a,在规范正交基下某一个维度的坐标, 等于它和整个维度的正交基向量的内积

如果说我们已经知道向量空间V中的一组基是


,我们怎么求V的规范正交基呢?

这里要用到一个算法,叫做施密特算法。通过这个算法,我们可以通过向量空间的一组基来求出它的正交基

这个算法很简单,我们可以直接写出它的公式:


我们随便取两个b向量乘一下就知道,b向量组之中两两正交。所以,我们只要将b向量组单位化一下,就可以求出对应的规范正交基了。

即:


这个算法虽然不难,但蛮重要。在机器学习领域中一些降维算法,很多都与施密特正交化方法有关。

正交矩阵

之前我们在介绍矩阵的时候,曾经说过,我们可以把一个矩阵看成是一个特定的向量组的结构。同样,我们也可以把一个规范正交基向量组看成是一个矩阵,那么这个矩阵就称为是正交矩阵。

它拥有如下性质:


其中I是单位矩阵,它的充要条件是矩阵A当中的每一列都是一个单位列向量,并且两两正交

最后,我们看一下正交矩阵的性质。它的主要性质有三个:

1. 如果A是正交矩阵,那么


,也是正交矩阵,并且


2. 如果A和B都是正交矩阵,并且它们阶数一样,那么AB也是正交矩阵。

3. 如果A是正交矩阵,向量y经过A变换之后行列式保持不变。

这三个性质都很简单,我们通过正交矩阵的性质基本上都可以直接推导得到,或者是非常直观,和我们的直觉吻合。其实怎么推导不是重点,对于算法工程师而言,更重要的是理解这些概念的意思,并且将它与算法模型当中起到的功能联系起来,这才是最重要的事情。

今天关于正交向量和矩阵的内容就到这里,希望大家学有收获,如果喜欢本文, 请点个关注或者转发支持作者吧~

  • 高铁与地铁有什么区别
  • 2024-11-06高铁与地铁有什么区别高铁和地铁有以下区别:1:列车速度不同高铁列车一般速度都在200公里以上,而地铁列车一般速度都在120公里以下2:管理部门不同高铁一般属于国有,由铁路局管理地铁属于城市公共交通体系,一般由城市地铁公司。
  • 济南满分教育在哪学(济南满分现场学习)
  • 2024-11-06济南满分现场学习1月6日,济南市公安局召开新闻通报会,围绕济南市公安局制定的“服务经济社会高质量发展十项举措”进行专题通报济南市公安局交警支队支队长李海介绍,对于在一个记分周期内有12分以上满分记录和持AB类驾驶证一。
  • 长沙王陵遗址规划图(曙光798旧厂变身)
  • 2024-11-06曙光798旧厂变身长沙晚报全媒体记者颜家文斑驳的老墙,错落有致的工业厂房,明亮的玻璃和射灯,时尚的店招和商品logo,让历史与现实、工业与艺术在这里完美结合,打扮前卫的时尚青年穿梭其间,让你仿若来到国际时尚前沿阵地这里。
  • 人类探索月球的未解之谜(独行月球大火的背后)
  • 2024-11-06独行月球大火的背后自2022年7月29日上映至8月19日,由张迟昱执导,沈腾、马丽主演的科幻喜剧片《独行月球》票房已破26亿有网友表示:《独行月球》的热度,简直堪比这炎热的夏天,一点就着也许,除了影片本身的搞笑元素,更。
  • 外汇开户需要准备什么(外汇公司开户要注意哪些)
  • 2024-11-06外汇公司开户要注意哪些外汇公司开户要注意哪些?1、目前比较靠谱的外汇公司,集中在美国、英国、瑞士,香港、新加坡、澳大利亚也有一些2、按监管力度来看,美国是最严格的,经常会有处罚交易商违规的记录公布出来,提醒交易者注意风险,。
  • 30多岁练劈叉要多久(30多岁练劈叉要的时间)
  • 2024-11-0630多岁练劈叉要的时间3个月左右前一个星期稍微活动下筋骨,让身体慢慢适应一个月后,压腿再觉得疼痛时应该继续往下压,尽量用胸去贴腿,保持时间长点每次压腿或压腰要先去跑步热身劈叉为柔韧性训练的高级阶段是武术舞蹈体操,瑜伽形体训。
  • 为什么十二生肖这么长时间没有猫(十二生肖为什么没有猫)
  • 2024-11-06十二生肖为什么没有猫猫是现在家庭中常饲养的宠物之一,与狗狗在家庭地位中有着差不多的分量当然狗作为六畜(猪、牛、羊、马、鸡、狗)之一,人类最忠实的朋友之,自然而然的进入中国传统的十二生肖当中但是猫亦作为人类的朋友,为什么没。
  • 财务分析模型统计图(企业财务分析中的流动比率解析)
  • 2024-11-06企业财务分析中的流动比率解析流动比率是流动资产对流动负债的比率,用来衡量企业流动资产在短期债务到期以前,可以变为现金用于偿还负债的能力一般说来,比率越高,说明企业资产的变现能力越强,短期偿债能力亦越强;反之则弱一般认为流动比率应。
  • 散文爱是一生的相守(散文诗爱的赠予)
  • 2024-11-06散文诗爱的赠予当我走近你时我本想要一粒糖果你却送给我所有的甜蜜当我走近你时我本想要一粥一饭你却赐给我锦衣玉食当我走近你时我本想要一杯清茶你却送给我整片茶园当我走近你时我本想要一句安慰你却送给我千言万语当我走近你时我。
  • 不要面包要爱情(面包爱情)
  • 2024-11-06面包爱情#爱情和面包哪个更重要#爱情和面包,这是个经久不衰的话题?无非是权衡两者之间孰轻孰重!我们来理性分析一下如果,面包=生存;爱情=寄托,的话那么,问题就清晰了很多对于生存和繁衍来说,显然生存是更重要一些。
  • 月球属于什么星(月球知识科普)
  • 2024-11-06月球知识科普月球是地球的卫星,并且是太阳系中第五大的卫星月球直径大约是地球的四分之一,质量大约是地球的八十一分之一月球是地球已知的质量最大的卫星,月球表面布满了由小天体撞击形成的撞击坑月球与地球的平均距离约38.。