SCTP链路IP地址配置错误导致切换入该站小区全部失败案例解析.doc

-/SCTP链路IP地址配置错误导致切换入小区全部失败一、问题发现问题现象：核查7月7日TOP小区发现D2_YQ河庄村ZLF_H-3小区切换成功率仅为5.23%，全天切换失败次数为22343次；针对该小区切换严重差问题启动TOP差处理流程；网元小区名称切换成功率失败次数小区216923D2_YQ河庄村ZLF_H-35.23%223433224360A2_JY晋源ZLF_H-277.83%67752224505A2_WB义井西一里ZLD_H-292.94%52832224493A2_WB福利大厦ZLD_H-263.35%41212224144B2_GJ国税宿舍南ZLF_H-392.59%32583216633A2_WB新道村ZLF_H-271.82%29172224219D2_YQ荣家庄ZLF_H-386.73%25743224486B2_QX新紫金大酒店ZLF_H-296.35%23022224171D2_YQ马坡ZLF_H-288.21%21342224368A2_JY晋源镇西(高速)ZLF_H-288.16%19842二、问题分析问题定位：提取D2_YQ河庄村ZLF_H-3小区邻区对切换指标发现D2_YQ河庄村ZLF_H-3切换向225049:1、225049:2、225049:3小区全部失败；小区名称邻区关系LTE系统内小区间切换出请求次数(小区对)LTE系统内小区间切换出成功次数(小区对)LTE系统内小区间切换出成功率(小区对)LTE系统内每相邻关系目标小区无响应原因导致的切换出准备失败次数LTE系统内每相邻关系目标小区回复切换准备失败消息导致切换出准备失败次数D2_YQ河庄村ZLF_H-30:460:00:216721:300100.00%00D2_YQ河庄村ZLF_H-30:460:00:216923:110880.00%00D2_YQ河庄村ZLF_H-30:460:00:216923:2104273970.92%00D2_YQ河庄村ZLF_H-30:460:00:225049:11205300.00%10620318D2_YQ河庄村ZLF_H-30:460:00:225049:220100.00%1970D2_YQ河庄村ZLF_H-30:460:00:225049:3970300.00%7999422D2_YQ河庄村ZLF_H-30:460:00:225239:111100.00%00D2_YQ河庄村ZLF_H-30:460:00:225239:2272177.78%00D2_YQ河庄村ZLF_H-30:460:00:225239:354546485.14%00D2_YQ河庄村ZLF_H-30:460:00:225249:200100.00%00 核查关于225049，D2_YQ河庄村北fbsZLF_H基站相关指标，发现周围小区切向225049三个小区请求全部失败，问题定位指向D2_YQ河庄村北fbsZLF_H，且切换失败原因为“系统内每相邻关系目标小区无响应原因导致的切换出准备失败”；小区名称邻区关系LTE系统内小区间切换出请求次数(小区对)LTE系统内小区间切换出成功次数(小区对)LTE系统内小区间切换出成功率(小区对)LTE系统内每相邻关系目标小区无响应原因导致的切换出准备失败次数LTE系统内每相邻关系目标小区回复切换准备失败消息导致切换出准备失败次数D2_YQ河庄村ZLF_H-10:460:00:225049:139400.00%3799D2_YQ河庄村ZLF_H-10:460:00:225049:26000.00%245D2_YQ河庄村ZLF_H-10:460:00:225049:317500.00%1741D2_YQ河庄村ZLF_H-20:460:00:225049:1120100.00%102242D2_YQ河庄村ZLF_H-20:460:00:225049:23200.00%311D2_YQ河庄村ZLF_H-20:460:00:225049:339700.00%3016D2_YQ河庄村ZLF_H-30:460:00:225049:11205300.00%10620318D2_YQ河庄村ZLF_H-30:460:00:225049:220100.00%1970D2_YQ河庄村ZLF_H-30:460:00:225049:3970300.00%7999422D2_YQ河庄铁路ZLF_H-10:460:00:225049:2579500.00%417446D2_YQ河庄铁路ZLF_H-20:460:00:225049:11900.00%10D2_YQ河庄铁路ZLF_H-20:460:00:225049:2237500.00%1704167D2_YQ河庄铁路ZLF_H-20:460:00:225049:3500.00%00D2_YQ河庄铁路ZLF_H-30:460:00:225049:26000.00%471针对D2_YQ河庄村北fbsZLF_H，进行问题排查：1、干扰排查D2_YQ河庄村北fbsZLF_H无明显干扰情况，三小区平均底噪均低于-110dB；2、告警故障排查D2_YQ河庄村北fbsZLF_H无故障告警发生；3、信令跟踪排查利用网管信令平台跟踪小区级信令，发现切换失败原因为”S1切换源侧准备失败由于切换响应定时器超时”,根据信令观察发现，0707-16:06:22.480 ENODB21692-3上发handover required到MME，之后ENODB21692-3等待来自handover command超时，于16:06:32.470向MME发送handover cancer（切换取消）；问题汇交于ENODB21692-3切换源小区向MME发送handover required后，MME无响应超时导致切换失败；其中通过信令观察handover required是由eNODB向MME，经由S1链路发送向MME后，MME没有通过S1向225049-1小区发出handover request，导致切换准备超时；在这个阶段目前有几个需要排查的问题1、MME是否收到ENODB21692-3上发的handover required；2、MME假如成功接收到handover required后，是否向目标小区下发handover request信令；关于问题1，根据切换对指标，发现周围基站小区均是切换向D2_YQ河庄村北fbsZLF_H（225049）S1切换准备失败，切向其他小区的切换成功率均较高（指标下图），说明源小区侧ENODB21692-3到MME的S1链路是正常的；小区名称邻区关系LTE系统内小区间切换出请求次数(小区对)LTE系统内小区间切换出成功次数(小区对)LTE系统内小区间切换出成功率(小区对)LTE系统内每相邻关系目标小区无响应原因导致的切换出准备失败次数LTE系统内每相邻关系目标小区回复切换准备失败消息导致切换出准备失败次数D2_YQ河庄村ZLF_H-30:460:00:216923:110880.00%00D2_YQ河庄村ZLF_H-30:460:00:216923:2104273970.92%00D2_YQ河庄村ZLF_H-30:460:00:225239:2272177.78%00D2_YQ河庄村ZLF_H-30:460:00:225239:354546485.14%00通过上述判断，对于问题2可以初步断定，MME是可以正常收到源小区ENODB21692-3 D2_YQ河庄村ZLF_H-3上发的handover required，但是MME下发向目标小区的D2_YQ河庄村北fbsZLF_H（225049）的handover reques未被收到，问题在于MME到D2_YQ河庄村北fbsZLF_H（225049）的S1链路上；4、参数核查我们针对S1链路SCTP参数核查，D2_YQ河庄村北fbsZLF_H（225049）IP地址如下；ENODB21692-3 D2_YQ河庄村ZLF_H-3的S1链路SCTP参数IP地址如下我们发现D2_YQ河庄村北fbsZLF_H（225049）S1链路的IP地址与周围站小区的IP地址明显不同，我们判断是由于D2_YQ河庄村北fbsZLF_H（225049）链路的IP地址在MME侧未做切换功能的登记，导致该S1的IP地址无法进行S1切换信令交互，导致切换准备失败；三、原理分析正常的S1切换流程：S1切换流程与X2切换类似，只不过所有的站间交互信令及数据转发都需要通过S1口到核心网进行转发，时延比X2口略大。协议36.300中规定eNodeB间切换一般都要通过X2接口进行，但当如下条件中的任何一个成立时则会触发S1接口的eNodeB间切换：（1）源eNodeB和目标eNodeB之间不存在X2接口；（2）源eNodeB尝试通过X2接口切换，但被目标eNodeB拒绝。从LTE网络结构来看，可以把两个eNodeB与MME之间的S1接口连同MME实体看做是一个逻辑X2接口。相比较于通过X2接口的流程，通过S1接口切换的流程在切换准备过程和切换完成过程有所不同。S1切换的前提条件：目标基站和源基站没有配置X2链路，或是配置的X2链路不可用。如果同时配置了X2和S1链路，优先走X2切换。下图中的流程没有跨MME和SGW，相对简单。即使涉及跨MME，主流程差异不大，主要在核心网的信令会更多一点而已。S1切换流程说明其中步骤1到9为切换准备过程，步骤10、11为切换执行过程，步骤12到16为切换完成过程。14) 图中14步骤与X2切换相同，不做累述；5) 源eNB通过S1接口的HANDOVER REQUIRED消息发起切换请求，消息中包含MME UE S1AP ID、源侧分配的eNB UE S1AP ID等信息。6) MME向目标eNB发送HANDOVER REQUEST消息，消息中包括MME分配的MME UE S1AP ID、需要建立的EPS列表以及每个EPS承载对应的核心网侧数据传送的地址等参数。78) 目标eNB分配后目标侧的资源后，进行切换入的承载接纳处理，如果资源满足，小区接入允许就给MME发送HANDOVER REQUEST ACKNOWLEDGE消息，包含目标侧侧分配的eNB UE S1AP ID，接纳成功的EPS承载对应的eNodeB侧数据传送的地址等参数。9) 源eNB收到HANDOVER COMMAND，获知接纳成功的承载信息以及切换期间业务数据转发的目标侧地址 。10) 源eNB向UE发送RRCConnectionReconfiguration消息，指示UE切换指定的小区.11) 源eNB通过eNB Status Transfer消息，MME通过MME Status Transfer消息 ，将PDCP序号通过MME从源eNB传递到目标eNB。目标eNB收到UE发送的RRC Connection Reconfiguration Complete消息，表明切换成功。12）目标eNodeB向MME发送PATH SWITCH REQUEST消息请求，请求MME更新业务数据通道的节点地址，通知MME切换业务数据的接续路径，从源eNB到目标eNB，消息中包含原侧侧的MME UE S1AP ID、目标侧侧分配的eNB UE S1AP 、EPS承载在目标侧将使用的下行地址； 13) MME成功更新数据通道节点地址，向目标eNodeB发送PATH SWITCH REQUEST ACKNOWLEDGE消息，表示可以在新的SAE bearers上进行业务通信；14）目标侧eNB发送HANDOVER NOTIFY消息，通知MME目标侧UE已经成功接入。15）源ENB收到“UE CONTEXT RELEASE COMMAND”消息后，开始进入释放资源的流程。切换定时器采样点：本案例，切换准备失败的信令示意图：四、解决方案我们把D2_YQ河庄村北fbsZLF_H（225049）S1链路的SCTP IP地址与周围站点参数同步；参数修改如下：五、解决效果修改后D2_YQ河庄村ZLF_H-3切换入D2_YQ河庄村北fbsZLF_H（225049）成功率上升，周围小区切入也恢复正常；开始时间LTE系统内小区间切换出请求次数(小区对)LTE系统内小区间切换出成功次数(小区对)LTE系统内小区间切换出成功率(小区对)8:00:003525.71%8:15:002827.14%8:30:00414204.83%8:45:00469377.89%9:00:0038513.16%9:15:00675111.63%9:30:003438.82%9:45:0071591.26%修改时间点22836.36%10:15:00375375100.00%10:30:00111090.91%10:45:0056100.00%11:00:00363363100.00%11:15:002828100.00%11:30:00209209100.00%11:45:00131292.31%12:00:0047447299.58%12:15:00190190100.00%12:30:001212100.00%12:45:00253253100.00%13:00:001313100.00%13:15:001212100.00%13:30:0015715699.36%13:45:0033100.00%14:00:00359359100.00%14:15:0088100.00%14:30:0088100.00%14:45:00139139100.00%恢复正常后信令跟踪图解：