作者文章归档:course

标量-


在数学及相关领域中,“scalar”通常指“标量”,以下是关于标量的详细介绍:

1. 定义

  • 标量是只有大小,没有方向的量。与之相对的是向量(vector),向量既有大小又有方向。例如,常见的温度、质量、时间、长度等物理量都是标量。像室内的温度是25摄氏度,这里的“25摄氏度”仅体现了数值大小,不存在方向的概念,所以温度就是一个标量;再比如一个物体的质量是5千克,“5千克”同样只是一个表示多少的数值,属于标量范畴。

2. 与向量的区别

  • 几何表示差异
    • 向量在几何上通常用有向线段来表示,线段的长度表示向量的大小(模长),箭头所指的方向表示向量的方向。比如在平面直角坐标系中,向量可以用坐...

Read more

李沐-深度学习-在线课程官网


动手学深度学习在线课程

官网

github

这是动手学深度学习在线课程的相关介绍,课程于2021年3月20日开始,预计7月结束,内容涵盖深度学习基础、卷积神经网络、计算机视觉、循环神经网络、自然语言处理等方面,具有以下特点:

  1. 课程背景与特点

  2. 背景:深度学习发展迅速但模型复杂,本课程从零开始教授,只需基础Python编程和数学知识。

  3. 特点:讲述模型算法同时用PyTorch实现细节,含四次课程竞赛,内容紧靠《动手学深度学习》第二版,被近200所大学采用。

  4. 讲师与参与方式

  5. 讲师:AWS资深首席科学家、美国卡内基梅隆大学计算机系博士李沐。

  6. 参与方式:无需注册或缴费,直播时...

Read more

动手学深度学习


动手学深度学习是一种强调通过实践来深入理解和掌握深度学习知识与技能的学习方式,其核心在于将理论学习与实际操作紧密结合,使学习者能够在实践中真正理解深度学习模型的原理、算法以及应用场景。

核心要点

  • 实践导向:不仅仅是理论知识的学习,更注重让学习者亲自上手操作,实现深度学习模型,从而加深对概念的理解。例如在课程中会教授如何用代码实现各种深度学习算法,像线性回归、卷积神经网络等模型的从零开始构建,让学习者明白模型内部的运行机制。
  • 涵盖广泛内容:包括深度学习基础、多种类型的神经网络(如卷积神经网络、循环神经网络、注意力机制等)以及在计算机视觉和自然语言处理等领域的应用。以课程安排为例,从基础的...

Read more

审计框架-


  1. 定义
  2. 审计框架(Audit Framework):是一套用于系统地规划、执行、监督和报告审计工作的结构化体系。它包括一系列的政策、程序、方法和标准,目的是确保审计过程的科学性、公正性和有效性。在传统审计领域,主要用于财务审计等方面,检查财务报表是否真实、准确地反映了企业的财务状况。
  3. 机器学习(Machine Learning):是一门多领域交叉学科,涉及概率论、统计学、逼近论、凸分析、算法复杂度理论等多门学科。它专门研究计算机怎样模拟或实现人类的学习行为,以获取新的知识或技能,重新组织已有的知识结构使之不断改善自身的性能。在数据挖掘、自然语言处理、图像识别等众多领域有广泛应用。

  4. ...

Read more

多类别指标


  1. 定义和背景
  2. 在多类别分类问题(如将图像分为多个不同的物体类别、文本分类到多个主题类别等)中,需要使用特定的评估指标来衡量模型的性能,这些指标被称为多类别指标(Multi - Class Metrics)。与二分类问题不同,多分类问题的评估更为复杂,因为涉及到多个类别之间的混淆情况。

  3. 常见的多类别指标

  4. 宏平均(Macro - averaging)
    • 计算方法:先分别计算每个类别的评估指标(如精确率、召回率、F1 - score),然后对这些类别指标求算术平均值。例如,对于一个三分类问题,类别为(A)、(B)、(C),分别计算出类别(A)的精确率(P_A)、类别(B)的精确率(P_B...

Read more

数据增强-


  1. 基本概念
  2. 数据增强(Data Augmentation)是一种在数据层面进行操作的技术,主要用于扩充数据集。在机器学习和深度学习的模型训练过程中,数据的数量和质量对模型的性能有着至关重要的影响。数据增强通过对原始数据进行一系列变换,生成新的、与原始数据相似的数据样本,从而增加数据的多样性和规模。

  3. 在计算机视觉中的应用

  4. 几何变换
    • 旋转(Rotation):将图像围绕一个中心点按照一定的角度进行旋转。例如,对于一个手写数字识别任务,把数字图像进行不同角度(如0 - 30度、30 - 60度等)的旋转,生成新的图像样本。这样可以让模型学会识别处于不同倾斜角度的数字,增强模型的鲁棒性。...

Read more

混淆矩阵-


  1. 定义
  2. 混淆矩阵(Confusion Matrix)是在机器学习和统计学的分类问题中,用于评估分类模型性能的一种工具。它是一个表格,展示了分类模型预测结果和实际真实标签之间的比较情况。
  3. 对于一个二分类问题,混淆矩阵是一个(2\times2)的矩阵,包含真正例(True Positive,TP)、假正例(False Positive,FP)、真反例(True Negative,TN)和假反例(False Negative,FN)这四个元素。例如,在判断一封邮件是否为垃圾邮件的任务中,如果模型正确地将垃圾邮件预测为垃圾邮件,这就是一个真正例;如果将正常邮件错误地预测为垃圾邮件,就是假正例。...

Read more

F1 - score-


  1. F1 - score的定义与意义
  2. F1 - score是精确率(Precision)和召回率(Recall)的调和平均数,用于综合评估分类模型的性能。在分类任务中,精确率和召回率往往存在一种权衡关系,单独使用其中一个指标可能无法全面衡量模型的好坏。F1 - score能够平衡这种权衡,提供一个更全面的评估指标。
  3. 其计算公式为(F1 = 2\times\frac{Precision\times Recall}{Precision + Recall})。例如,在信息检索任务中,精确率关注的是检索出的结果中有多少是真正相关的,召回率关注的是所有相关的内容中有多少被检索出来了。F1 - sc...

Read more

逻辑函数-


  1. 定义
  2. Sigmoid函数,也称为逻辑函数(Logistic Function),其数学表达式为(y = \frac{1}{1 + e^{-x}}),其中(e)是自然常数(约为(2.71828)),(x)是自变量。
  3. 这个函数的定义域是((-\infty,+\infty)),值域是((0,1))。例如,当(x = 0)时,(y=\frac{1}{1 + e^{0}}=\frac{1}{2});当(x\to+\infty)时,(y\to1);当(x\to-\infty)时,(y\to0)。

  4. 函数性质

  5. 单调性:Sigmoid函数是单调递增函数。这意味着当(x)的值增加时,(y)的值也会...

Read more

函数集-


  1. 定义
  2. 函数集(Function Set)是指一组具有某种共同性质或用于特定目的的函数的集合。这些函数可以是数学函数、编程语言中的函数或者机器学习模型中的函数族。
  3. 例如,在数学中,所有的多项式函数构成一个函数集。一个(n)次多项式函数的一般形式为(y = a_0 + a_1x + a_2x^2+\cdots+a_nx^n),其中(a_0,a_1,\cdots,a_n)是系数,所有这样的多项式函数(无论(n)取何值,系数如何取值)组成了多项式函数集。

  4. 分类

  5. 按函数类型分类
    • 线性函数集:包括所有形如(y = mx + b)的函数,其中(m)是斜率,(b)是截距。例如(y = 2x +...

Read more