码农知识堂 - 1000bd
  •   Python
  •   PHP
  •   JS/TS
  •   JAVA
  •   C/C++
  •   C#
  •   GO
  •   Kotlin
  •   Swift
  • 【吴恩达机器学习-笔记整理】异常检测与高斯分布


    目录:

    • 🌵🌵🌵前言
        • 一、异常检测
        • 二、高斯分布/正态分布
        • 三、异常检测算法
        • 四、异常检测系统(开发与评估)
            • 划分
        • 五、异常检测VS监督学习
        • 六、选择要使用的功能
            • 1、变换为高斯分布
            • 2、异常算法的特征
        • 七、多变量高斯分布
        • 八、使用高斯分布的异常检测
            • 多元高斯模型,在捕捉特征方面的关系有较多优点
            • 当在拟合多元高斯模型的时候,若协方差矩阵为奇异矩阵(不可逆)时:
    • ❤️❤️❤️忙碌的敲代码也不要忘了浪漫鸭!

    🌵🌵🌵前言

    ✨你好啊,我是“ 怪& ”,是一名在校大学生哦。
    🌍主页链接:怪&的个人博客主页
    ☀️博文主更方向为:课程学习知识、作业题解、期末备考。随着专业的深入会越来越广哦…一起期待。
    ❤️一个“不想让我曾没有做好的也成为你的遗憾”的博主。
    💪很高兴与你相遇,一起加油!

    一、异常检测

    举例:
    请添加图片描述
    请添加图片描述

    二、高斯分布/正态分布

    公式:
    请添加图片描述

    不同参数模型:

    请添加图片描述

    参数估计(此处示例的是极大似然估计)

    请添加图片描述

    三、异常检测算法

    异常分析算法详情:

    请添加图片描述
    请添加图片描述

    图形示例:设置阈值,若计算p值小于该阈值,则视此为异常

    请添加图片描述

    四、异常检测系统(开发与评估)

    评估异常算法

    划分

    训练集:无标签
    交叉验证集和测试集为有标签。(用于评估准确率等)
    请添加图片描述

    建议选择下图第一种方式(常用做法),第二个选择是不建议的

    请添加图片描述

    算法评估:
    设定不同的阈值,比较效果,如何选择较好效果的阈值

    请添加图片描述

    五、异常检测VS监督学习

    异常检测:正负样本数相差巨大,有许多不同种类的异常(此数量较少,若通过使用监督学习,很难去学习到异常到底是什么,且将来出现的异常与已有的截然不同)
    监督学习:正负样本数基本持平,或相差不大

    请添加图片描述

    六、选择要使用的功能

    关于如何设计和选择异常检测算法的特征

    1、变换为高斯分布

    请添加图片描述

    2、异常算法的特征

    先根据训练集建立模型
    再测试,将异常值找出,并以此建立新的特征来捕捉此异常

    请添加图片描述

    建立新的特征,帮助捕捉异常

    请添加图片描述

    七、多变量高斯分布

    协方差矩阵

    请添加图片描述
    请添加图片描述

    多元高斯分布的优点:可给数据的相关性建立模型

    请添加图片描述

    负相关
    请添加图片描述
    请添加图片描述

    八、使用高斯分布的异常检测

    请添加图片描述
    请添加图片描述

    多元高斯模型,在捕捉特征方面的关系有较多优点

    多元高斯模型会自动捕捉不同特征之间的关系
    原始模型计算成本比较低

    请添加图片描述

    当在拟合多元高斯模型的时候,若协方差矩阵为奇异矩阵(不可逆)时:

    1、没有满足样本数m>n
    2、存在冗余特征(两个一样的特征或者高度相关的特征,即线性相关)

    请添加图片描述

    ❤️❤️❤️忙碌的敲代码也不要忘了浪漫鸭!

  • 相关阅读:
    【@property的参数copy Objective-C语言】
    datagridview设置随窗口改变大小
    Ansible之变量
    使用win_b64做CATIA的开发测试
    Qt5开发及实例V2.0-第十三章-Qt数据库
    操作系统Linux面试题库和答案
    自定义mvc增删改查
    CDC一键入湖:当 Apache Hudi DeltaStreamer 遇见 Serverless Spark
    三维重建---第四章 三维重建及极几何
    qt使用http get和post
  • 原文地址:https://blog.csdn.net/qq_21471309/article/details/126491452
  • 最新文章
  • 攻防演习之三天拿下官网站群
    数据安全治理学习——前期安全规划和安全管理体系建设
    企业安全 | 企业内一次钓鱼演练准备过程
    内网渗透测试 | Kerberos协议及其部分攻击手法
    0day的产生 | 不懂代码的"代码审计"
    安装scrcpy-client模块av模块异常,环境问题解决方案
    leetcode hot100【LeetCode 279. 完全平方数】java实现
    OpenWrt下安装Mosquitto
    AnatoMask论文汇总
    【AI日记】24.11.01 LangChain、openai api和github copilot
  • 热门文章
  • 十款代码表白小特效 一个比一个浪漫 赶紧收藏起来吧!!!
    奉劝各位学弟学妹们,该打造你的技术影响力了!
    五年了,我在 CSDN 的两个一百万。
    Java俄罗斯方块,老程序员花了一个周末,连接中学年代!
    面试官都震惊,你这网络基础可以啊!
    你真的会用百度吗?我不信 — 那些不为人知的搜索引擎语法
    心情不好的时候,用 Python 画棵樱花树送给自己吧
    通宵一晚做出来的一款类似CS的第一人称射击游戏Demo!原来做游戏也不是很难,连憨憨学妹都学会了!
    13 万字 C 语言从入门到精通保姆级教程2021 年版
    10行代码集2000张美女图,Python爬虫120例,再上征途
Copyright © 2022 侵权请联系2656653265@qq.com    京ICP备2022015340号-1
正则表达式工具 cron表达式工具 密码生成工具

京公网安备 11010502049817号