吴恩达机器学习课程学习记录(3.线性代数回顾)

学过线性代数的朋友们可以略过这节不看,这节老师主要是带着我们复习一下机器学习中涉及到的基本的线性代数知识,笔记嘛,那还是记全好一些。不过解释写的不多,更多还是一些要点的截图和整理。

2020.10.9完成 第二周

章节三:线性代数回顾 目录

课时14:矩阵和向量

课时15:加法和标量乘法

课时16:矩阵向量乘法

课时17:矩阵乘法

课时18:矩阵乘法特征

课时19:逆和转置

1、矩阵(matrix)和向量(vector)的定义

注意向量在这里的定义:一个向量是一种特殊的矩阵,向量是只有一列的矩阵。

矩阵和向量的定义
2、矩阵的加法

(只能把相同维度的矩阵进行相加,最终会得到一个相同维度的另一个矩阵),矩阵的加法就是把对应位置的元素进行相加。维度不同的矩阵不能进行相加。


矩阵的加法
3、矩阵与标量的乘法运算

(对应位置的元素与常量相乘)

矩阵与标量的乘法运算
4、本节所有运算的集合
上述运算集合
5、矩阵与矩阵的乘法

(两个矩阵的列数和行数要相匹配)

矩阵与矩阵的乘法
矩阵与矩阵的乘法
矩阵与矩阵的乘法
6、实际应用:根据房子的大小预估房价
实际应用:根据房子的大小预估房价
实际应用:根据房子的大小预估房价

利用矩阵运算可以简化代码,使程序高效

7、矩阵向量相乘这一节的内容会用在后面讲的线性回归模型中
8、矩阵乘以矩阵
矩阵乘以矩阵
矩阵乘以矩阵
9、实例应用:

通过让原始数据矩阵(raw numbers:四个房子的大小)和参数矩阵(不同回归模型对应的参数)相乘可以得到四个房子用三个不同的模型预估出来的不同价格

实例应用

第一列就是使用第一个预估函数得到的预估房价值

第二列就是使用第二个预估函数得到的预估房价值

第三列就是使用第三个预估函数得到的预估房价值

一次矩阵乘法运算就可以得到12个不同的预测值,很高效。

很多线性代数运算库包含矩阵相乘的高效实现函数

!!参数矩阵就可以代表预估函数本身

10、矩阵乘法的一些特性(property):

交换律不适用与矩阵与矩阵的乘法,但是适用于标量乘法

结合律适用于矩阵与矩阵的乘法

单位矩阵(identity matrix):类似于代数运算中数字1的意义,任何矩阵(但要满足行列数匹配)乘以单位矩阵将得到该矩阵本身。

矩阵乘法的一些特性
矩阵乘法的一些特性

矩阵与单位矩阵相乘,此时交换律适用。但是要注意交换前后的单位矩阵维度是不一样的,因为矩阵乘法要时刻满足行列匹配。所以也不是严格意义上的满足交换律。

矩阵乘法的一些特性
11、特殊的矩阵运算

矩阵的逆(matrix inverse)和矩阵的转置(matrix transpose)

类比实数的运算,逆矩阵相当于“倒数”。

矩阵乘以其逆矩阵的结果是单位矩阵。但并不是所有矩阵都有其对应的逆矩阵,比如:如果一个矩阵中的所有数据元素都为0,那么它依然没有对应的逆矩阵。(这种矩阵称为奇异矩阵/退化矩阵)

特殊的矩阵运算

矩阵的转置:

矩阵的转置

以上是这门课涉及到的线性代数部分需要了解的知识。这些线性代数知识将帮助我们在之后推导更强大的学习算法。

最后编辑于
©著作权归作者所有,转载或内容合作请联系作者
  • 序言:七十年代末,一起剥皮案震惊了整个滨河市,随后出现的几起案子,更是在滨河造成了极大的恐慌,老刑警刘岩,带你破解...
    沈念sama阅读 157,198评论 4 359
  • 序言:滨河连续发生了三起死亡事件,死亡现场离奇诡异,居然都是意外死亡,警方通过查阅死者的电脑和手机,发现死者居然都...
    沈念sama阅读 66,663评论 1 290
  • 文/潘晓璐 我一进店门,熙熙楼的掌柜王于贵愁眉苦脸地迎上来,“玉大人,你说我怎么就摊上这事。” “怎么了?”我有些...
    开封第一讲书人阅读 106,985评论 0 237
  • 文/不坏的土叔 我叫张陵,是天一观的道长。 经常有香客问我,道长,这世上最难降的妖魔是什么? 我笑而不...
    开封第一讲书人阅读 43,673评论 0 202
  • 正文 为了忘掉前任,我火速办了婚礼,结果婚礼上,老公的妹妹穿的比我还像新娘。我一直安慰自己,他们只是感情好,可当我...
    茶点故事阅读 51,994评论 3 285
  • 文/花漫 我一把揭开白布。 她就那样静静地躺着,像睡着了一般。 火红的嫁衣衬着肌肤如雪。 梳的纹丝不乱的头发上,一...
    开封第一讲书人阅读 40,399评论 1 211
  • 那天,我揣着相机与录音,去河边找鬼。 笑死,一个胖子当着我的面吹牛,可吹牛的内容都是我干的。 我是一名探鬼主播,决...
    沈念sama阅读 31,717评论 2 310
  • 文/苍兰香墨 我猛地睁开眼,长吁一口气:“原来是场噩梦啊……” “哼!你这毒妇竟也来了?” 一声冷哼从身侧响起,我...
    开封第一讲书人阅读 30,407评论 0 194
  • 序言:老挝万荣一对情侣失踪,失踪者是张志新(化名)和其女友刘颖,没想到半个月后,有当地人在树林里发现了一具尸体,经...
    沈念sama阅读 34,112评论 1 239
  • 正文 独居荒郊野岭守林人离奇死亡,尸身上长有42处带血的脓包…… 初始之章·张勋 以下内容为张勋视角 年9月15日...
    茶点故事阅读 30,371评论 2 241
  • 正文 我和宋清朗相恋三年,在试婚纱的时候发现自己被绿了。 大学时的朋友给我发了我未婚夫和他白月光在一起吃饭的照片。...
    茶点故事阅读 31,891评论 1 256
  • 序言:一个原本活蹦乱跳的男人离奇死亡,死状恐怖,灵堂内的尸体忽然破棺而出,到底是诈尸还是另有隐情,我是刑警宁泽,带...
    沈念sama阅读 28,255评论 2 250
  • 正文 年R本政府宣布,位于F岛的核电站,受9级特大地震影响,放射性物质发生泄漏。R本人自食恶果不足惜,却给世界环境...
    茶点故事阅读 32,881评论 3 233
  • 文/蒙蒙 一、第九天 我趴在偏房一处隐蔽的房顶上张望。 院中可真热闹,春花似锦、人声如沸。这庄子的主人今日做“春日...
    开封第一讲书人阅读 26,010评论 0 8
  • 文/苍兰香墨 我抬头看了看天上的太阳。三九已至,却和暖如春,着一层夹袄步出监牢的瞬间,已是汗流浃背。 一阵脚步声响...
    开封第一讲书人阅读 26,764评论 0 192
  • 我被黑心中介骗来泰国打工, 没想到刚下飞机就差点儿被人妖公主榨干…… 1. 我叫王不留,地道东北人。 一个月前我还...
    沈念sama阅读 35,412评论 2 269
  • 正文 我出身青楼,却偏偏与公主长得像,于是被迫代替她去往敌国和亲。 传闻我的和亲对象是个残疾皇子,可洞房花烛夜当晚...
    茶点故事阅读 35,299评论 2 260

推荐阅读更多精彩内容