机器学习——期末复习

机器学习—期末复习

文章目录

机器学习—期末复习

填空题

第一章机器学习基础

机器学习系统的含义：是指能够在一定程度上实现机器学习的系统

机器学习按对人类学习的模拟方式分类：符号主义学习、统计学习、连接主义学习等。

学习系统基本模型4部分：

机器学习任务：1、分类、回归、聚类 2、降维、去噪 3、机器翻译、异常检测

机器学习基本流程：数据处理、训练、验证、预测

数据集划分（判断是哪个数据集）：训练集。用于训练模型。验证集。用于调整模型。测试集。用于评估模型

模型效果描述（给出意义描述写术语）：拟合是模型与训练数据和测试数据具有较好的拟合性、过拟合是指的是模型出现拟合过度的情况。过拟合表现为模型在训练数据中表现良好，在预测时却表现较差、欠拟合是欠拟合是指在训练数据和预测结果时，模型精确度均不高的情况。

机器学习三种类型（区分分类和回归、聚类和降维概念）：

监督学习：监督学习算法是给定一组输入x和输出y的训练集，学习如何关联输入和输出
- 分类：分类任务是对离散结果的预测，也就是提供的标签是离散的。
- 回归：回归任务是对连续结果的预测，也就是提供的标签是连续的。
无监督学习：
- 聚类：聚类是将数据集中的样本划分为若干个不相交的子集(簇)，每个簇可能对应于一些潜在的概念
- 降维：在高维情况下出现的数据样本稀疏、距离计算困难等问题被称为维度灾难,解决维度灾难的一个途径就是降维。降维是将原始高维空间转变为一个低维空间即高维空间的一个低维嵌入。
强化学习：就是一个智能体采取行动从而改变自己的状态获得奖励与环境发生交互的循环过程。

模型性能描述

准确率、查准率、查全率
- 准确率：分类正确的样本占总样本的比例
- 查准率：正确被检索的样本占所有实际被检索得到的样本的比例
- 查全率：正确被检索出的样本占所有应该检索的样本的比例
MSE(均方差)、RMSE（均方根误差）
F1、ROC

第二章数据预处理

数据预处理（3个给定义写术语）：数据清洗、数据转换、数据压缩

数据清洗( Data Cleaning ) 主要是通过填补缺失值、光滑噪声数据，平滑或删除离群点，并解决数据的不一致性来“清理”数据。自然数据中的异常值等问题可能会影响机器学习模型并产生有偏差的结果。常见问题数据如下：
- 缺失值：它指的是现有数据集中某个或某些属性的值是不完全的，可能直接导致算法无法直接分析数据。
- 离群值：它指在一份数据中,与其他观察值具有明显不同特征的那些观察值，可能会使数据的分布失真影响模型判断。
数据转换:数据转换（Data Transformation）就是修改数据的表示形式，使其符合机器学习模型的输入要求，并使机器学习模型的优化算法更容易生效。
- 数字化：一般在计算型任务中需要用数值特征，因此会遇到非数值特征转换为数值特征情况。
- 离散化：有时数据为连续值，而模型只能处理离散型数据，则需要将连续数据转换为离散数据。
- 正规化：数据压缩到一个范围内赋予所有属性相等的权重，进行规范化处理。
- 数值转换：数值变换能够增加数据的非线性特征捕获特征之间的关系，有效提高模型的复杂度。
数据压缩：数据压缩是一种有助于减少数据集的数据量或维数或两者兼得的技术，从而使模型的学习过程更加有效，并帮助模型获得更好的性能，防止过度拟合问题并修复不均匀的数据分布
- 降维：将高维数据转换为低维，有利于模型计算和可视化等操作
- 实例选择和采样：通过减少数据样本，寻求以最小的性能损失来训练模型的机会。如通过K近邻分类算法选择实例，随机采样收集部分样本。