神经网的原理及在金融中的应用PPT.ppt
《神经网的原理及在金融中的应用PPT.ppt》由会员分享,可在线阅读,更多相关《神经网的原理及在金融中的应用PPT.ppt(70页珍藏版)》请在淘文阁 - 分享文档赚钱的网站上搜索。
1、人工神经网络的金融应用人工神经网络的金融应用原理及应用原理及应用1人工神经网络方法人工神经网络方法人工神经网络背景介绍人工神经网络背景介绍人工神经网络原理人工神经网络原理金融应用领域金融应用领域神经网络的实证分析神经网络的实证分析2人工神经网络背景介绍人工神经网络背景介绍对人的脑神经的抽象模拟人工神经网络的发展史人工神经网络应用领域31从模拟人的脑神经出发从模拟人的脑神经出发 人类大脑分为两个半球(左半球人类大脑分为两个半球(左半球-左脑;右半球左脑;右半球-右脑)右脑),左脑支配人体的左脑支配人体的右侧右侧,右脑支配人体的左侧右脑支配人体的左侧,左右脑具有不同的功能。左右脑具有不同的功能。左
2、半球倾向于按顺序处理信息,右半球却习惯同时处理信息。左半球倾向于按顺序处理信息,右半球却习惯同时处理信息。4 基于逻辑思维,如电子计算机就是模拟人脑逻辑思维的人工智能系统.现行计算机运算速度是人脑神经元速度的几百万倍 计算机在解决与形象思维和灵感思维相关的问题时,却显得无能为力。人工神经网络则是探索人的形象思维,即针对右脑人工神经网络则是探索人的形象思维,即针对右脑的认知规律的研究产物。的认知规律的研究产物。人工智能工程人工智能工程人类左脑功能人类左脑功能5 人脑与人脑与“电脑电脑”的信息处理能力差距:的信息处理能力差距:记忆与联想能力方面记忆与联想能力方面:人脑具有非凡的创造能力。良好的学习
3、和认知能力(刚生婴儿大脑几乎空白,但是在成长中通过对外界环境的感知及意识,知识和经验与日俱增)。信息综合能力方面:信息综合能力方面:人脑善于知识归纳,类比和概括,也可以是经验地、模糊地甚至是直觉地做出判断等。信息处理速度方面:信息处理速度方面:人脑中的信息处理是以神经细胞为单位,而神经细胞的传递速度只能达毫秒级,比计算机电子元件纳秒级的计算速度慢得多。实际上数值处理方面确实如此。但在图形声音等类信息的处理方面则不同。如几个月婴儿从人群中一眼认出母亲,而计算机解决此类问题则需要一幅具有几百万个像素的逐点处理,并提取脸谱特征进行识别,等等。6 人脑与电脑的信息处理机制不同人脑与电脑的信息处理机制不
4、同 人脑中的神经网络是一种高度并行的非线性信息处理系统,虽然单个神经信息处理速度为毫秒级,但大规模神经细胞(人脑有约1.410个)的群体协同并行处理方式是高效的而计算机采用的是有限集中的串行信息处理机制(基于冯诺依曼工作原理Von Neumann)。即存储器与处理器相互独立,处理信息必须是形式化信息(用二进制定义)。神经元神经元 形成神经网络形成神经网络 每个神经元有数以千计的通道 同其他神经元互连,形成复杂的生物神经网络。生物神经网络以神经元为基本信息处理单元,对信息进行分布式存储与加工。这处信息加工与存储相结合的群体协同工作方式使得人脑呈现出神奇智能。为了模拟人脑形象思维方式,人们从模拟人
5、脑生物神经网络的信息存储加工处理机制入手,设计具有人类思维特点的智能机器,无疑是最有希望的途经之一。78ANNANN定义:定义:ANN是以数学和物理方法以及信息处理的角度对人脑神经网络进行抽象,并建立某种简化模型。ANN是生物学上的真实人脑神经网络的结构以及若干基本特性的某种理论抽象,简化模拟而构成的一种信息处理系统。ANN是采用物理可实现的系统来模仿人脑神经细胞和结构和功能的系统。应该明确:ANN远不是人脑生物神经网络的真实写照,而只是对它的简化,抽象与模拟。目前已提出上百种ANN模型,这些简化模型的确能反映出人脑的许多基本特征。它们在模式识别、系统辨识、信号处理、自动控制、组合优化、预测估
6、计、故障诊断、医学与经济学等许多领域已成功地解决了许多用计算机等方法难解决的实际问题,表现出良好的智能特征和潜在的应用前景。9 人工神经网络应用系统的研究,需要硬件制作技术的新突破,以便制作出ANN设备,据报道神经网络计算机已取得令人瞩目的进展。ANN的研究内容极具丰富,涉及的面宽而又有相当深的理论有待进一步研究(涉及多学科知识)。研究内容大体上有基本理论、模型、算法、应用和实现等五大方面,每方面都有很多问题尚未解决或完善解决,尚需用各种方法从各方面开展对ANN进行更深入研究。102.2.人工神经网络发展简史人工神经网络发展简史 早早期期低低潮潮期期复复兴兴时时期期新新时时期期112.2.人工
7、神人工神经经网网络发络发展展简简史史早期(启蒙时期)早期(启蒙时期)1943年,美国心理学家W.S.MeCuLLoch和数学家W.H.Pitts合作,在分析总结神经元基本特性的基础上,提出神经元数学模型,简称MPMP模型模型。从脑科学研究来看,MP模型是第一个用数理语言描述人脑的信息处理过程的模型。后来此模型又有发展,至今沿用人工神经网络之先驱人工神经网络之先驱。1957年,F.Rosenblatt设计制作了“感知机”(Perceptron),是一种三层神经网络三层神经网络。用于文字、声音识别、声纳信号识别,及学习记忆问题研究。1962年,Widrow和Hoff等提出了自适应线性元件网络自适应
8、线性元件网络,简称Adline(Adaptive Linear elemlnt),用硬件电路实现设计,用于自适应信号处理,雷达无线控制等方面。12低潮期:低潮期:20世纪60年代末 人们对感知机兴趣开始衰落人们对感知机兴趣开始衰落,即线性感知机功能有限,只能进行线性分类和求解一阶谓词问题,不能进行非线性分类和解决比较复杂的高阶谓词问题(如异或(XOR)等)。学术界有地位和影响力的人的悲观论调学术界有地位和影响力的人的悲观论调 典型代表人物:Minsky和Papert(美麻省理工学院著名人工智能学者)(作了大量数学研究,在当时技术条件下,他们在多层网络的有效学习方法上遇到了极大困难),很多领域的
9、专家纷纷放弃了这方面课题的研究,开始了神经网络发展史上长达10年的低潮期。集成电路和微电子技术的迅猛发展集成电路和微电子技术的迅猛发展 70年代以来集成电路和微电子技术的迅猛发展,使传统的Von Nedmann型计算机进入全盛期,基于逻辑符号处理方法的人工智能(AI)得到迅速发展并取得显著成就)13复兴时期(新高潮期)(世纪复兴时期(新高潮期)(世纪8080年代)年代)标志是美国加州工学院物理学家John Hopfield1982和1984年在美国科学院院刊上发表两篇论文,提出了仿人脑的ANN模型。著名的Hopfield模型,获得工程技术与学术界的重视。Hopfield Hopfield的主要
10、贡献是:的主要贡献是:根据网络的非线性微分方程,引用能量函数(Lyapunov函数李雅普诺夫函数)的概念,使ANN的平衡稳定状态有了明确的判据方法;利用模拟电路的基本元件构作了ANN的硬件原理模型,为硬件实现奠定了基础。开拓了神经网络用于联想记忆和优化计算等方面的新途径。14人们重认识到人们重认识到ANNANN的威力,的威力,大批学者和研究人员围绕Hopield新方法开展进一步工作,使该学科研究升温。1985年,Terrence Sejnowski和Hinton.Ackley提出Bottzmann(玻尔兹曼)机,首次采用多层网络的学习算法,并用模拟退火过程来模拟外界环境。1986年,Rumel
11、hart和Mc.Clelland提出多层网络的“逆推”(或称“反传”back propation)学习算法,简称BP网络。BP迄今为止,是用的比较广泛和流行的最普通的网络。15 新时期(热潮期(新时期(热潮期(8080年代后期到现今)年代后期到现今)1987年国际神经网络学会成立(INNS)宣告神经网络计算机学科的诞生。掀起人类向生物学习,研究和开发及应用神经网络的热潮。1991年IJCNN(国际联合神经网络会议)主席D.Rumelhart在开幕词中讲到“神经网络的发展已进入转折点,它的范围正在不断扩大,领域几乎包括各个方面”。16(1)(1)理论上导求研究新进展理论上导求研究新进展(2)(2
12、)人工神经网络技术与当前技术相结合人工神经网络技术与当前技术相结合 现在ANN技术正进入和AI(人工智能),视觉与语声识别系统,专家系统、机器人以及化学和医学等的结合。目前各国发展重点是以应用为导向,以发展高性能的混合计算机为目标。(3)(3)应用领域广泛应用领域广泛新时期特点新时期特点17我国我国ANNANN研究现状研究现状 19881988年年,北京大学组织召开了第一次关于神经网络的讨论会,一些知名学者在会上作了专题报告。19891989年年,北京和广州等地召开了神经网络及其应用讨论会和第一届全国信号处理神经网络学术会议。19901990年年1212月月,由中国电子学会及计算机学会等八个学
13、会联合发起并组织了中国第一次神经网络会议,参加人数400余人,搜集到会议记录中的论文358篇,内容涉及生物、人工神经网络模型、理论、分析应用及实现等各方面。19911991年年1212月月由13个单位发起和组织召开第二次全国神经网络会议,录用论文280篇。在南京成立中国神经网络学会。在南京成立中国神经网络学会。19921992年年中国神经网络委员会在北京承办了世界性的国际神经网络学术大会。经过10几年的发展,我国人工神经网络和研究和应用正迈向新的高科技时代。183 3人工神经网络的应用领域人工神经网络的应用领域主要介绍一下几个主要应用领域。信息领域信息领域信号处理:信号处理:自适应信号处理和非
14、线性信号处理都可以。模式识别:模式识别:可以处理静态模式如固定图象,固定能谱等,还可以处理动态模式如视频图象,连续语音等。数据压缩:自动化领域系统辨识:系统辨识:如自动控制中,被控对象的数学模型建立等问题。神经控制器:神经控制器:控制器在实时控制系统中起着“大脑”的作用,神经网络具有自学习和自适应等智能特点非常适合作控制器。近年神经网络控制器在工业、航空以及机器人等领域的控制系统中取得了可喜的应用成果。智能检测智能检测:检测中对干扰量的处理、传感器输入输出特性的非线性补偿零点和量程的自动校正以及自动诊断等。19工程工程领领域域(1 1)汽汽车车工工程程:利用神经网络的非线性映射能力,通过学习优
15、秀驾驶员的换挡经验数据,可自动提取最佳挡规律。神经网络在汽车的最佳刹车系统ABS的智能控制中应用;神经网络在重载车柴油机燃烧系统方案优化中的应用等。(2 2)军军事事工工程程神经网络同红外搜索与跟踪系统配合实现发现和跟踪飞行器;借助神经网络的语音分析与信号处理的经验,对声纳信号进行分析研究,对水下目标的识别率可达90%;密码学方面应用如:语音开关、指纹开关。(3 3)化化学学工工程程 制药配方、生物化学、化学工程等领域取得不少应用成果。(4 4)水水利利工工程程水利发电过程辨识和控制、河流水质分类、水资源规划、供坝优化设计、岩土类型识别、工程造价分析等。20医学领域医学领域(1 1)检测数据分
16、析)检测数据分析 神经网络在许多医学检测设备中应用普遍。如用ANN进行多适脑电棘波的检测,对早期癫痫病人进行实时检测预报。(2 2)生物活性研究)生物活性研究ANN对生物学检测数据进行分析。如分子致癌性的ANN预测具有生物学检测不具备的优点。(3 3)医疗诊断设备的专家系统中有许多应用。)医疗诊断设备的专家系统中有许多应用。以非线性并行分布或处理为基础的ANN为专家系统的研究开辟了新途经,特别在并行推理等问题取得了良好效果。经济领经济领域域(1 1)信)信贷贷分析分析,如:信用评估系统等。(2 2)市)市场预测场预测,如:股票趋势预测等等。21人工神经网络原理人工神经网络原理ANN 的结构人工
17、神经网络的学习规则传统统计模型与神经网络ANN模型的选择ANN 中的统计推断构建模型时需注意的两个方面22神经网络模型的种类神经网络模型的种类 按照拓扑结构可以分为反馈神经网络模型和前向神经网络模型;按照性能按照性能可以分为连续型和离散型神经网络模型,确定型和随机型神经网络模型;按照学习方按照学习方式式可以分为有教师学习和无教师学习神经网络;按照按照连接突触性质连接突触性质可以分为一阶线性关联神经网络模型和高阶非线性关联神经网络模型。常见的人工神经网络常见的人工神经网络模型,主要包括感知器(模型,主要包括感知器(PerceptronPerceptron)神经网络、线)神经网络、线性神经网络、前
18、馈神经网络、径向基函数神经网络、性神经网络、前馈神经网络、径向基函数神经网络、自组织竞争神经网络、回归神经网络等。自组织竞争神经网络、回归神经网络等。23l神经网络模拟了一个具有许多相对简单的个体单元高度联系、平行计算的结构。个体单元编成三层:输入层、中间层和输出层。前馈网络单方向将输入映射成输出,即从输入层到中间层再到输出层。ANN 的结构的结构2425其中F、G是传递函数可以解释为代表所描述的三层前馈神经网络的非线性函数。2627 人工神经网络的学习规则人工神经网络的学习规则神经网络的学习过程学习过程,一般是,1、首先设定初时权值,如果无先验的知识,初时权值可设定为随机值。2、接着输入样本
19、数据进行学习,参照评价标准进行评判。3、如果达到要求,就停止学习,否则按照给定的学习法则调整权值,继续进行学习,直到取得满意的结果为止。28神经网络的学习规则,主要包括误差传播式学习、联想学习、竞争性(Competitive)学习和基于知识的学习等。各种学习规则都是以Hebb规则为基础的。ANN最广泛的学习规则是误差后向传递误差后向传递(error back propagation),是二十世纪八十年代中期引发多层神经网络的兴趣再度空前高涨再度空前高涨的一个主要原因无监督学习规则,赫布认为神经网络的学习过程最终是发生在神经元之间的突触部位,突触的联结强度随着突触前后神经元的活动而变化,变化的量
- 配套讲稿:
如PPT文件的首页显示word图标,表示该PPT已包含配套word讲稿。双击word图标可打开word文档。
- 特殊限制:
部分文档作品中含有的国旗、国徽等图片,仅作为作品整体效果示例展示,禁止商用。设计者仅对作品中独创性部分享有著作权。
- 关 键 词:
- 神经 原理 金融 中的 应用 PPT
限制150内