机器学习朴素贝叶斯分配

作业1:优化代码(lgz同学提供的代码)实现:(1)面向过程的朴素贝叶斯(ver1)要求不能使用sklearn。

作业源码(主要借鉴lgz大佬)

import numpy as np


class GaussianNB:

    def __init__(self, feature, label):
        self.feature = feature  # 特征
        self.label = label  # 标签

    @staticmethod
    def GaussianProbability(x, mean, var):  # 高斯概率密度函数
        return np.array(
            [1 / (np.sqrt(2 * np.pi) * var[i]) *
             np.exp(-np.power(x[i] - mean[i], 2) / (2 * np.power(var[i], 2))) for i in range(len(x))])

    @staticmethod
    def fit():  # 求均值&方差
        mean_var = [[np.mean(X[y == label], axis=0), np.var(X[y == label], axis=0)] for label in np.unique(y)]
        return mean_var

    def score(self, feature, label):  # 模型评估
        return np.sum(np.array([[np.argmax(np.array([np.array(
            self.GaussianProbability(sample, np.array([i[0] for i in self.fit()])[j],
                                     np.array([i[1] for i in self.fit()])[j])).prod() for j in
                                                     range(len(np.unique(label)))]))] for sample in
                                feature]).ravel() == label) / label.size
if __name__ == '__main__':
    # 读取数据
    data = np.loadtxt("iris.csv",  # 数据源
                      dtype='str',  # 读取类型
                      delimiter=',',  # 分割符号
                      skiprows=1)

    # 数据预处理
    X = data[::, 0:-1].astype('float32')
    y = data[:, -1]
    y = [0 if i == 'Setosa' else i for i in list(y)]
    y = [1 if i == 'Versicolor' else i for i in list(y)]
    y = [2 if i == 'Virginica' else i for i in list(y)]

    # 选择模型
    bayes = GaussianNB(X, np.array(y))

	# 训练选择模型及结果
    print(f'模型准确率为:{bayes.score(X, np.array(y)) * 100}%')

手撕代码

作为监督学习中的一种方法,朴素贝叶斯需要有特征值和标签
机器学习朴素贝叶斯分配
GaussianNB实现了运用于分类的高斯朴素贝叶斯算法。特征的可能性(即概率)假设为高斯分布:
高斯分布
高斯分布
上面的公式需要编码
机器学习朴素贝叶斯分配
在对上式进行编码的过程中,需要得到特征值的均值和方差。为了操作方便,将它们封装为方法
机器学习朴素贝叶斯分配
模型评测还没有完全看懂,等看懂了就分享给大家。
机器学习朴素贝叶斯分配
模型评估的核心思想从知乎转移到本帖
请添加图片描述
原创不易复制,转载请注明出处
如果对你有帮助,别忘了点赞支持请添加图片描述

文章出处登录后可见!

已经登录?立即刷新

共计人评分,平均

到目前为止还没有投票!成为第一位评论此文章。

(0)
扎眼的阳光的头像扎眼的阳光普通用户
上一篇 2022年4月20日 下午5:10
下一篇 2022年4月20日 下午5:20

相关推荐