分类目录归档：人工智能
一、定义
“Estimate confidence”（估计置信度）主要是在统计学和机器学习等领域中使用的概念。它是指对某个估计结果（如参数估计、预测结果等）的可靠性或确定性程度的一种量化评估。
例如，在市场调研中，我们通过抽样调查来估计某产品的市场占有率。除了得到一个占有率的估计值（如30%）之外，还需要知道这个估计有多大的可信度，这就是估计置信度要解决的问题。
二、统计中的置信区间与置信水平
一、定义
Open - set recognition（开放集识别）是一种在计算机视觉、模式识别等领域中使用的概念。它主要处理的情况是在训练阶段和测试阶段的数据分布不同，测试阶段会出现训练阶段没有见过的类别（即未知类别）的数据。
传统的分类任务（如闭集分类）假设测试数据中的类别都是在训练数据中出现过的，而开放集识别则更贴近现实世界的复杂情况。例如，在一个人脸识别系统的训练过程中，我们只使用了公司内部员工的人脸图像进行训练。但在实际使用场景中，可能会有外来人员（未知类别）出现在摄像头前，开放集识别就是要在识别出已知员工的同时，能够判断出未知人员。
二、关键要素
一、定义
Network intrusion detection（网络入侵检测）是一种用于监控计算机网络活动，识别任何试图破坏网络安全、未经授权访问网络资源或者恶意利用网络漏洞的安全技术。它的主要目的是在入侵行为对网络系统造成严重损害之前检测并发出警报，同时也可以协助收集有关入侵活动的证据。
例如，当外部攻击者试图通过端口扫描来寻找网络系统中的开放端口，以便后续发动攻击时，网络入侵检测系统可以检测到这种异常的扫描行为，并提醒网络管理员采取相应的防范措施。
二、工作原理
一、定义
Anomaly detection（异常检测）是指在数据集中识别与正常行为模式或预期模式显著不同的数据点或模式的过程。这些异常点可能代表了系统中的错误、故障、欺诈行为、安全漏洞或者其他罕见但具有重要意义的事件。
例如，在网络流量监测中，正常情况下流量的大小、频率和流向等都有一定的规律。如果突然出现大量的数据传输到一个异常的外部服务器，这就可能是数据泄露的异常行为；在工业生产中，机器正常运转时的温度、振动频率等参数在一个合理的范围内波动，当这些参数出现明显偏离正常范围的情况时，可能意味着机器出现故障。
二、应用场景
随机梯度下降（Stochastic Gradient Descent，SGD）是一种常用的优化算法，主要用于在机器学习和深度学习中，通过迭代的方式来最小化目标函数，以找到最优的模型参数。以下是关于随机梯度下降的详细介绍：
在机器学习领域，“计算任务”是指在处理ML workload过程中涉及的各种需要进行计算操作的具体工作，以下是详细介绍：
pandas库中的drop_duplicates函数去除重复行，使用fillna方法填充缺失值等。Min-Max归一化和Z-Score标准化，需要进行相应的数学运算。“ML workload”指的是机器学习（Machine Learning）工作负载，即运行机器学习任务所需要的计算资源、数据处理量以及模型训练和推理等操作的综合需求，以下是具体介绍：
无监督文本摘要（Unsupervised Summarization）是一种自然语言处理任务，旨在在没有人工标注的摘要数据（如没有给定摘要样本作为训练参考）的情况下，自动从文本中提取或生成摘要。它主要依赖文本自身的特征，如词频、句子位置、语义相似性等来确定文本的关键内容，从而生成简洁、能够代表原文主要思想的摘要。
主要方法
定义与概念
在不同领域的应用及体现
自然语言处理（NLP）
离散表示（Discrete Representation）是一种将数据或信息表示为离散值的方式。与连续表示（如实数范围内的数值）相对，离散表示的取值是有限个或者可数无穷个孤立的值。例如，在数字电路中，信号只有0和1两种状态，这就是一种离散表示；在自然语言处理中，词汇表中的单词可以看作是离散的符号，每个单词就是一个离散的表示单元。
在不同领域的应用及示例