数学建模模拟退火算法.ppt
《数学建模模拟退火算法.ppt》由会员分享,可在线阅读,更多相关《数学建模模拟退火算法.ppt(49页珍藏版)》请在淘文阁 - 分享文档赚钱的网站上搜索。
1、第三章第三章 模拟退火算法模拟退火算法 智能优化计算智能优化计算浙江大学3.1 3.1 模拟退火算法及模型模拟退火算法及模型模拟退火算法及模型模拟退火算法及模型 3.1.1 3.1.1 物理退火过程物理退火过程物理退火过程物理退火过程 3.1.2 3.1.2 组合优化与物理退火的相似性组合优化与物理退火的相似性组合优化与物理退火的相似性组合优化与物理退火的相似性 3.1.3 3.1.3 模拟退火算法的基本思想和步骤模拟退火算法的基本思想和步骤模拟退火算法的基本思想和步骤模拟退火算法的基本思想和步骤 3.2 3.2 模拟退火算法的马氏链描述模拟退火算法的马氏链描述模拟退火算法的马氏链描述模拟退火
2、算法的马氏链描述 3.2.1 3.2.1 马尔可夫链马尔可夫链马尔可夫链马尔可夫链 3.2.2 3.2.2 模拟退火算法与马尔可夫链模拟退火算法与马尔可夫链模拟退火算法与马尔可夫链模拟退火算法与马尔可夫链 3.3 3.3 模拟退火算法的关键参数和操作的设计模拟退火算法的关键参数和操作的设计模拟退火算法的关键参数和操作的设计模拟退火算法的关键参数和操作的设计 3.3.1 3.3.1 状态产生函数状态产生函数状态产生函数状态产生函数 3.3.2 3.3.2 状态接受函数状态接受函数状态接受函数状态接受函数 3.3.3 3.3.3 初温初温初温初温 3.3.4 3.3.4 温度更新函数温度更新函数温
3、度更新函数温度更新函数 3.3.5 3.3.5 内循环终止准则内循环终止准则内循环终止准则内循环终止准则 3.3.6 3.3.6 外循环终止准则外循环终止准则外循环终止准则外循环终止准则 智能优化计算智能优化计算浙江大学3.4 3.4 模拟退火算法的改进模拟退火算法的改进模拟退火算法的改进模拟退火算法的改进 3.4.1 3.4.1 模拟退火算法的优缺点模拟退火算法的优缺点模拟退火算法的优缺点模拟退火算法的优缺点 3.4.2 3.4.2 改进内容改进内容改进内容改进内容 3.4.3 3.4.3 一种改进的模拟退火算法一种改进的模拟退火算法一种改进的模拟退火算法一种改进的模拟退火算法3.5 3.5
4、 模拟退火算法实现与应用模拟退火算法实现与应用模拟退火算法实现与应用模拟退火算法实现与应用 3.5.1 303.5.1 30城市城市城市城市TSPTSP问题(问题(问题(问题(d*=423.741 by D B d*=423.741 by D B FogelFogel)3.5.2 3.5.2 模拟退火算法在管壳式换热器优化设计中的应用模拟退火算法在管壳式换热器优化设计中的应用模拟退火算法在管壳式换热器优化设计中的应用模拟退火算法在管壳式换热器优化设计中的应用智能优化计算智能优化计算浙江大学3.1 模拟退火算法及模型模拟退火算法及模型 智能优化计算智能优化计算浙江大学w算法的提出算法的提出 模拟
5、退火算法最早的思想由模拟退火算法最早的思想由Metropolis等(等(1953)提出,提出,1983年年Kirkpatrick等将其应用于组合优化。等将其应用于组合优化。w算法的目的算法的目的 解决解决NP复杂性复杂性问题;问题;克服优化过程陷入局部极小;克服优化过程陷入局部极小;克服初值依赖性。克服初值依赖性。3.1.1 3.1.1 物理退火过程物理退火过程物理退火过程物理退火过程3.1 模拟退火算法及模型模拟退火算法及模型 智能优化计算智能优化计算浙江大学w物理退火过程物理退火过程 什么是退火:什么是退火:退火是指将固体加热到足够高的温度,使分子呈随退火是指将固体加热到足够高的温度,使分
6、子呈随机排列状态,然后逐步降温使之冷却,最后分子以机排列状态,然后逐步降温使之冷却,最后分子以低能状态排列,固体达到某种稳定状态。低能状态排列,固体达到某种稳定状态。3.1.1 3.1.1 物理退火过程物理退火过程物理退火过程物理退火过程3.1 模拟退火算法及模型模拟退火算法及模型 智能优化计算智能优化计算浙江大学w物理退火过程物理退火过程 加温过程加温过程增强粒子的热运动,消除系统原先可增强粒子的热运动,消除系统原先可能存在的非均匀态;能存在的非均匀态;等温过程等温过程对于与环境换热而温度不变的封闭系对于与环境换热而温度不变的封闭系统,系统状态的自发变化总是朝自由能减少的方向统,系统状态的自
7、发变化总是朝自由能减少的方向进行,当自由能达到最小时,系统达到平衡态;进行,当自由能达到最小时,系统达到平衡态;冷却过程冷却过程使粒子热运动减弱并渐趋有序,系统使粒子热运动减弱并渐趋有序,系统能量逐渐下降,从而得到低能的晶体结构。能量逐渐下降,从而得到低能的晶体结构。3.1.1 3.1.1 物理退火过程物理退火过程物理退火过程物理退火过程3.1 模拟退火算法及模型模拟退火算法及模型 智能优化计算智能优化计算浙江大学w数学表述数学表述 在温度在温度T,分子停留在状态,分子停留在状态r满足满足Boltzmann概率分概率分布布 3.1.1 3.1.1 物理退火过程物理退火过程物理退火过程物理退火过
8、程3.1 模拟退火算法及模型模拟退火算法及模型 智能优化计算智能优化计算浙江大学w数学表述数学表述 在在同一个温度同一个温度T,选定两个能量,选定两个能量E1E2,有,有 在同一个温度,分子停留在能量小的状态的概率比在同一个温度,分子停留在能量小的状态的概率比停留在能量大的状态的概率要大。停留在能量大的状态的概率要大。3.1.1 3.1.1 物理退火过程物理退火过程物理退火过程物理退火过程03.1 模拟退火算法及模型模拟退火算法及模型 智能优化计算智能优化计算浙江大学w数学表述数学表述 若若|D|为状态空间为状态空间D中状态的个数,中状态的个数,D0是具有最低能是具有最低能量的状态集合:量的状
9、态集合:当温度很高时,每个状态概率基本相同,接近平均当温度很高时,每个状态概率基本相同,接近平均值值1/|D|;状态空间存在超过两个不同能量时,具有最低能量状态空间存在超过两个不同能量时,具有最低能量状态的概率超出平均值状态的概率超出平均值1/|D|;当温度趋于当温度趋于0时,分子停留在最低能量状态的概率时,分子停留在最低能量状态的概率趋于趋于1。3.1.1 3.1.1 物理退火过程物理退火过程物理退火过程物理退火过程能量最低状态能量最低状态 非能量最低状态非能量最低状态3.1 模拟退火算法及模型模拟退火算法及模型 智能优化计算智能优化计算浙江大学wMetropolis准则(准则(1953)以
10、概率接受新状态以概率接受新状态 固体在恒定温度下达到热平衡的过程可以用固体在恒定温度下达到热平衡的过程可以用Monte Carlo方法方法(计算机随机模拟方法)加以模拟,虽(计算机随机模拟方法)加以模拟,虽然该方法简单,但必须大量采样才能得到比较精确然该方法简单,但必须大量采样才能得到比较精确的结果,计算量很大。的结果,计算量很大。3.1.1 3.1.1 物理退火过程物理退火过程物理退火过程物理退火过程3.1 模拟退火算法及模型模拟退火算法及模型 智能优化计算智能优化计算浙江大学wMetropolis准则(准则(1953)以概率接受新状态以概率接受新状态 若在温度若在温度T,当前状态,当前状态
11、i 新状态新状态j 若若Ej=randrom0,1 s=sj;Until 抽样稳定准则满足;抽样稳定准则满足;退温退温tk+1=update(tk)并令并令k=k+1;Until 算法终止准则满足;算法终止准则满足;输出算法搜索结果。输出算法搜索结果。3.1.3 3.1.3 模拟退火算法的基本思想和步骤模拟退火算法的基本思想和步骤模拟退火算法的基本思想和步骤模拟退火算法的基本思想和步骤3.1 模拟退火算法及模型模拟退火算法及模型 智能优化计算智能优化计算浙江大学w影响优化结果的主要因素影响优化结果的主要因素 给定初温给定初温t=t0,随机产生初始状态,随机产生初始状态s=s0,令,令k=0;R
12、epeat Repeat 产生新状态产生新状态sj=Genete(s);if min1,exp-(C(sj)-C(s)/tk=randrom0,1 s=sj;Until 抽样稳定准则满足;抽样稳定准则满足;退温退温tk+1=update(tk)并令并令k=k+1;Until 算法终止准则满足;算法终止准则满足;输出算法搜索结果。输出算法搜索结果。3.1.3 3.1.3 模拟退火算法的基本思想和步骤模拟退火算法的基本思想和步骤模拟退火算法的基本思想和步骤模拟退火算法的基本思想和步骤三函数两准则三函数两准则初始温度初始温度3.2 模拟退火算法的马氏链描述模拟退火算法的马氏链描述 智能优化计算智能优
13、化计算浙江大学w定义定义 3.2.1 3.2.1 马尔科夫链马尔科夫链马尔科夫链马尔科夫链3.2 模拟退火算法的马氏链描述模拟退火算法的马氏链描述 智能优化计算智能优化计算浙江大学w定义定义 一步转移概率:一步转移概率:n步转移概率:步转移概率:若解空间有限,称马尔可夫链为若解空间有限,称马尔可夫链为有限状态有限状态;若若 ,称马尔可夫链为,称马尔可夫链为时齐的时齐的。3.2.1 3.2.1 马尔科夫链马尔科夫链马尔科夫链马尔科夫链3.2 模拟退火算法的马氏链描述模拟退火算法的马氏链描述 智能优化计算智能优化计算浙江大学w模拟退火算法对应了一个马尔可夫链模拟退火算法对应了一个马尔可夫链 模拟退
14、火算法:新状态接受概率仅依赖于新状态和模拟退火算法:新状态接受概率仅依赖于新状态和当前状态,并由温度加以控制。当前状态,并由温度加以控制。若固定每一温度,算法均计算马氏链的变化直至平若固定每一温度,算法均计算马氏链的变化直至平稳分布,然后下降温度,则称为稳分布,然后下降温度,则称为时齐算法时齐算法;若无需各温度下算法均达到平稳分布,但温度需按若无需各温度下算法均达到平稳分布,但温度需按一定速率下降,则称为一定速率下降,则称为非时齐算法非时齐算法。w分析收敛性分析收敛性 3.2.2 3.2.2 模拟退火算法与马尔科夫链模拟退火算法与马尔科夫链模拟退火算法与马尔科夫链模拟退火算法与马尔科夫链3.3
15、 模拟退火算法关键参数和操作的设计模拟退火算法关键参数和操作的设计智能优化计算智能优化计算浙江大学w原则原则 产生的候选解应遍布全部解空间产生的候选解应遍布全部解空间w方法方法 在当前状态的邻域结构内以一定概率方式(均匀分在当前状态的邻域结构内以一定概率方式(均匀分布、正态分布、指数分布等)产生布、正态分布、指数分布等)产生 3.3.1 3.3.1 状态产生函数状态产生函数状态产生函数状态产生函数3.3 模拟退火算法关键参数和操作的设计模拟退火算法关键参数和操作的设计智能优化计算智能优化计算浙江大学w原则原则 (1)在固定温度下,接受使目标函数下降的候选解的在固定温度下,接受使目标函数下降的候
16、选解的概率要大于使目标函数上升的候选解概率;概率要大于使目标函数上升的候选解概率;(2)随温度的下降,接受使目标函数上升的解的概率随温度的下降,接受使目标函数上升的解的概率要逐渐减小;要逐渐减小;(3)当温度趋于零时,只能接受目标函数下降的解。当温度趋于零时,只能接受目标函数下降的解。w方法方法 具体形式对算法影响不大具体形式对算法影响不大 一般采用一般采用min1,exp(-C/t)3.3.2 3.3.2 状态接受函数状态接受函数状态接受函数状态接受函数3.3 模拟退火算法关键参数和操作的设计模拟退火算法关键参数和操作的设计智能优化计算智能优化计算浙江大学w收敛性分析收敛性分析 通过理论分析
17、可以得到初温的解析式,但解决实际通过理论分析可以得到初温的解析式,但解决实际问题时难以得到精确的参数;问题时难以得到精确的参数;初温应充分大;初温应充分大;w实验表明实验表明 初温越大,获得高质量解的机率越大,但花费较多初温越大,获得高质量解的机率越大,但花费较多的计算时间;的计算时间;3.3.3 3.3.3 初温初温初温初温3.3 模拟退火算法关键参数和操作的设计模拟退火算法关键参数和操作的设计智能优化计算智能优化计算浙江大学w方法方法 (1)均匀抽样一组状态,以各状态目标值得方差)均匀抽样一组状态,以各状态目标值得方差为初温;为初温;(2)随机产生一组状态,确定两两状态间的最大)随机产生一
18、组状态,确定两两状态间的最大目标值差,根据差值,利用一定的函数确定初温;目标值差,根据差值,利用一定的函数确定初温;(3)利用经验公式。)利用经验公式。3.3.3 3.3.3 初温初温初温初温3.3 模拟退火算法关键参数和操作的设计模拟退火算法关键参数和操作的设计智能优化计算智能优化计算浙江大学w时齐算法的温度下降函数时齐算法的温度下降函数 (1),越接近越接近1 1温度下降越慢,温度下降越慢,且其大小可以不断变化;且其大小可以不断变化;(2),其中,其中t0为起始温度,为起始温度,K为算法温度下为算法温度下降的总次数。降的总次数。3.3.4 3.3.4 温度更新函数温度更新函数温度更新函数温
19、度更新函数3.3 模拟退火算法关键参数和操作的设计模拟退火算法关键参数和操作的设计智能优化计算智能优化计算浙江大学w非时齐模拟退火算法非时齐模拟退火算法 每个温度下只产生一个或少量候选解每个温度下只产生一个或少量候选解w时齐算法时齐算法常用的常用的Metropolis抽样稳定准则抽样稳定准则 (1)检验目标函数的均值是否稳定;)检验目标函数的均值是否稳定;(2)连续若干步的目标值变化较小;)连续若干步的目标值变化较小;(3)按一定的步数抽样。)按一定的步数抽样。3.3.5 3.3.5 内循环终止准则内循环终止准则内循环终止准则内循环终止准则3.3 模拟退火算法关键参数和操作的设计模拟退火算法关
- 配套讲稿:
如PPT文件的首页显示word图标,表示该PPT已包含配套word讲稿。双击word图标可打开word文档。
- 特殊限制:
部分文档作品中含有的国旗、国徽等图片,仅作为作品整体效果示例展示,禁止商用。设计者仅对作品中独创性部分享有著作权。
- 关 键 词:
- 数学 建模 模拟 退火 算法
限制150内