人工智能11监督学习33384.pptx
《人工智能11监督学习33384.pptx》由会员分享,可在线阅读,更多相关《人工智能11监督学习33384.pptx(46页珍藏版)》请在淘文阁 - 分享文档赚钱的网站上搜索。
1、第11章 监督学习剩余课程安排本周是第八周,周四结束所有课程第八周第2节结束实验三验收第9周考试,考试时间11.018周.周日晚上交实验三的报告大纲分类逻辑斯特回归支持向量机SVM神经网络Bagging and Boosting回归自主学习课程论文3:SVR实例Logistic回归基本理论和方法回归基本理论和方法研究某一事件发生的概率P=P(y=1)与若干因素之间的关系 在在0和和1之间之间任意范围之间的数量任意范围之间的数量若干个状态的标量若干个状态的标量logistic变换logistic变换Logistic回归模型 优势比优势比概率概率p的预测的预测P与多因素之间的关系预测P与单特征之间
2、的关系图与单特征之间的关系图px1最可能成功范围最可能成功范围最不可能成功范围最不可能成功范围LR模型公式二分类:多项逻辑斯特回归(Multinomial logistic regression,MLR):注意:在实际分类应用时,因为特征向量往往维数较多,标签值的分类,优先选择MLR模型支持向量机SVM在机器学习领域,支持向量机SVM(Support Vector Machine)是一个有监督的学习模型,通常用来进行模式识别、分类、以及回归分析。线性分类器Binary classification can be viewed as the task ofseparating classes i
3、n feature space(特征空间):Linear ClassificationWhich of the linear separators is optimal?Classification Margin(间距)Classification Margin(间距)Maximum Margin Classification最大间距分类Maximizing the margin is good according to intuition and PAC theory.意味着分类时只考虑支持向量,其他的训练样本被忽略。Maximum Margin Classification最大间距分类Ma
4、ximizing the margin is good according to intuition and PAC theory.意味着分类时只考虑支持向量,其他的训练样本被忽略。Maximum Margin ClassificationMathematicallyMaximum Margin ClassificationMathematically非线性SVMs非线性SVMs:特征空间课堂讨论神经网络问题求解求解线性子问题激活函数图形化描述求解过程图形化描述求解过程图形化描述求解过程深度神经网络Baggingbagging是一种用来提高学习算法准确度的方法,这种方法通过构造一个预测函数系列
5、,然后以一定的方式将它们组合成一个预测函数基本思想1.给定一个弱学习算法,和一个训练集;2.单个弱学习算法准确率不高;3.将该学习算法使用多次,得出预测函数序列,进行投票;4.最后结果准确率将得到提高Bagging算法1.For t=1,2,T Do从数据集S中取样(放回选样)训练得到模型Ht对未知样本X分类时,每个模型Ht都得出一个分类,得票最高的即为未知样本X的分类2.也可通过得票的平均值用于连续值的预测要求的分类算法Bagging要求“不稳定”(不稳定是指数据集的小的变动能够使得分类结果的显著的变动)的分类方法。比如:决策树,神经网络算法Boosting发展历史BoostingAdaBo
- 配套讲稿:
如PPT文件的首页显示word图标,表示该PPT已包含配套word讲稿。双击word图标可打开word文档。
- 特殊限制:
部分文档作品中含有的国旗、国徽等图片,仅作为作品整体效果示例展示,禁止商用。设计者仅对作品中独创性部分享有著作权。
- 关 键 词:
- 人工智能 11 监督 学习 33384
限制150内