2011年揭阳移动端到端用户感知评估体系建立与优化项目1(28)Prepared(alsosubjectresponsibleifother)杨汉河Approved:杨汉河Checked:Date:2011-11-28Rev:V1.0Reference:2011年揭阳移动端到端用户感知评估体系建立与优化项目基于Gb口信令的KPI统计—PS业务(10月30日至12月10日)广州瀚信通信科技股份有限公司2011年揭阳移动端到端用户感知评估体系建立与优化项目2(28)Prepared(alsosubjectresponsibleifother)杨汉河Approved:杨汉河Checked:Date:2011-11-28Rev:V1.0Reference:1.概述目前的2G网络,PS域的业务主要包括网页浏览、手机QQ、彩信、FTP下载和手机流媒体。通过Gb口信令数据结合PS域业务流程,从而统计得出各类成功率指标、各类时延、业务完成率和下载速率等指标,同时结合话务统计得出覆盖率,从而获得PS域业务体验相关的系列KQI分析数据,最终建立PS域的端到端用户感知评估体系。2.PS域端到端用户感知评估体系模型搭建步骤在揭阳移动的配合下,选定主要覆盖普宁城区的JYM06B4和JYM06B5两个BSC,有重点地开展数据采集分析和建模工作。工作步骤如下:网页浏览业务用户感知评估手机QQ业务用户感知评估彩信业务用户感知评估FTP下载业务用户感知评估手机流媒体业务用户感知评估PS域端到端用户感知评估体系2011年揭阳移动端到端用户感知评估体系建立与优化项目3(28)Prepared(alsosubjectresponsibleifother)杨汉河Approved:杨汉河Checked:Date:2011-11-28Rev:V1.0Reference:2.1Gb口信令采集:网元:JYM06B4和JYM06B5数据采集时段:JYM06B5:2011年11月07日-2011年11月11日24小时JYM06B4:2011年11月14日-2011年11月18日24小时采集方式:Gb口为接入网与核心网的交互接口,用户使用数据业务访问PS域需通过Gb口与各网元进行交互,进而与互联网连接。通过对Gb口上的数据进行采集分析,可以研究各种数据业务的用户行为特征,本次信令数据采集根据现网中Gb链路的类型采用Interquest信令仪表进行采集。2011年揭阳移动端到端用户感知评估体系建立与优化项目4(28)Prepared(alsosubjectresponsibleifother)杨汉河Approved:杨汉河Checked:Date:2011-11-28Rev:V1.0Reference:2.2数据预处理(利用M-TRIX软件):混合:多个接口数据包进行合并解包:如针对Gb口存在多个协议层消息进行解包组包:针对彩信和流媒体业务,为了适应传输,以上业务在发送前进行了数据分拆。2.3流程定义定义标准的业务流程,便于数据提取。以WAP为例,在统计web服务器连接成功率时,需要定义的消息有,终端向服务器发出的“syn”;服务器向终端回复的“ack,syn”;终端再回复服务器的“ack”。2.4数据入库根据定义的信令流程定制M-TRIX软件所需的FD和FS,然后利用M-TRIX软件Dump出数据库。2.5统计分析数据入库完成后,利用SQL对抽取出的信令消息进行统计分析,例如统计PDP激活成功率等。3.PS域各业务KPI-KQI模型的确定3.1网页浏览业务KQI与KPI聚类映射模型3.1.1网页浏览信令流程:终端用户发起Web网页浏览2011年揭阳移动端到端用户感知评估体系建立与优化项目5(28)Prepared(alsosubjectresponsibleifother)杨汉河Approved:杨汉河Checked:Date:2011-11-28Rev:V1.0Reference:建立无线侧的信息交互终端与核心网之间的交互(Attach和PDP激活)DNS查询交互终端与Web服务器之间的交互,包括TCP三步握手、网页获取及完成终端与Web服务器断TCP去PDP激活释放空口其在M-TRIX中的定制FS为:2011年揭阳移动端到端用户感知评估体系建立与优化项目6(28)Prepared(alsosubjectresponsibleifother)杨汉河Approved:杨汉河Checked:Date:2011-11-28Rev:V1.0Reference:3.1.2网页浏览业务KQI定义:信号良好率信号强度高于特定门限值(例如-84dBm)的抽采次数占总抽样次数的比例网页打开成功率指终端用户输入欲访问的网址并回车后,终端能够与相应的Web服务器建立TCP连接,并且Web服务器对终端发起的第一个HTTPGet,即:GPRS附着成功率*PDP激活成功率*DNS查询成功率*web服务器TCP连接成功率*web服务器响应成功率*100%网页打开时延指从“Web连接成功率指终端用户输入欲访问的网址并回车”到“终端能够与相应的Web服务器建立TCP连接,并且Web服务器对终端发起的第一个HTTPGet或Post请求成功响应”之间的时间间隔。即:GPRS附着平均时延+PDP激2011年揭阳移动端到端用户感知评估体系建立与优化项目7(28)Prepared(alsosubjectresponsibleifother)杨汉河Approved:杨汉河Checked:Date:2011-11-28Rev:V1.0Reference:活时延+DNS查询时延+web服务器TCP连接时延+web服务器响应时延(毫秒)Web服务未完成率指终端与web服务器之间成功建立TCP连接后,无法完成网页或网页元素下载的概率。即:1-网页打开成功率。网页下载速率指用户打开网页过程中,每秒内终端接收到网页实体的字节数。即:终端发出get或post请求后接收到的相应的HTTP数据段字节数之和/从“终端发出get到或post请求”到“终端收到与该请求相应的response消息”之间的时间间隔(KB/s)3.1.3网页浏览业务与KQI相关联的KPI指标的定义:RxLevel依据DT和CQT测试得到的信号强度高于特定门限值(例如-84dBm)的抽采次数占总抽样次数的比例Attach附着成功率SGSN返回AttachAccept消息的次数/终端发起AttachRequest消息的次数*100%PDP激活成功率终端收到ActivatePDPContextAccept消息的次数/终端发起ActivatePDPContextRequest消息的次数*100%DNS查询成功率终端收到DNS服务器成功回复的次数/终端向DNS服务器发起查询请求Query的次数*100%Web服务器TCP连接成功率Web服务器收到终端“TCPACK”响应消息的次数/终端向Web服务器发出“SYN”消息的次数*100%2011年揭阳移动端到端用户感知评估体系建立与优化项目8(28)Prepared(alsosubjectresponsibleifother)杨汉河Approved:杨汉河Checked:Date:2011-11-28Rev:V1.0Reference:Web服务器响应成功率Web服务器成功响应HTTPGet或Post请求的次数/终端发起的HTTPGet或Post请求的次数*100%Attach附着平均时延指从“终端向SGSN发起AttachRequest消息”到“终端收到AttachAccept消息”之间的时间间隔。GPRS附着不区分具体业务。PDP激活平均时延指从“终端发起PDP上下文激活请求”到“终端成功激活PDP上下文”之间的时间间隔。PDP激活时延不区分具体业务。DNS查询平均时延指从“终端向DNS服务器发起查询请求”到“终端收到DNS服务器成功回复”之间的时间间隔。DNS查询时延不区分具体业务。Web服务器TCP连接平均时延指从“终端发起TCP同步消息”到“终端能够与Web服务器成功建立TCP连接”之间的时间间隔。Web服务器响应平均时延指从“终端向Web服务器发出HTTPGET请求”到“终端收到Web服务器成功响应”之间的时间间隔。具体统计公式如下表:业务KQI相关联KPI相关KPI统计方法(M-TRIX统计公式)网页浏览信号良好率RxLevel话统提取+测试统计(dbm)网页打开成功率Attach成功率Attach_accept/Attach_Request*100%PDP激活成功率PDP_Act_accept/PDP_Act_Request*100%DNS查询成功率Response/Query*100%Web服务器TCP连接成功率SYN_Ack/SYN*100%2011年揭阳移动端到端用户感知评估体系建立与优化项目9(28)Prepared(alsosubjectresponsibleifother)杨汉河Approved:杨汉河Checked:Date:2011-11-28Rev:V1.0Reference:Web服务器响应成功率Response/Get2X*100%网页打开时延GPRS附着平均时延AVG(Attach_Accept_delayFirst)(ms)PDP激活时延AVG(PDP_Act_Accept_delayFirst)(ms)DNS查询时延AVG(Response_delayFirst)(ms)web服务器TCP连接时延AVG(SYN_Ack_delayFirst)(ms)web服务器响应时延AVG(Response_delayFirst)(ms)Web服务未完成率——(1-网页打开成功率)*100%网页下载速率——Content_Length/Response_delayFirst(核对)(KB/s)3.1.4网页浏览业务KPI指标统计:KPIRxLevel(dbm)Attach成功率(%)PDP激活成功率(%)DNS查询成功率(%)Web服务器TCP练级成功率(%)Web服务器响应成功率(%)Attach时延(ms)PDP激活时延(ms)DNS查询时延(ms)Web服务器TCP连接时延(ms)Web服务器响应时延(ms)Web服务未完成率(%)网页下载速率(KB/s)JYM06B4JYM06B52011年揭阳移动端到端用户感知评估体系建立与优化项目10(28)Prepared(alsosubjectresponsibleifother)杨汉河Approved:杨汉河Checked:Date:2011-11-28Rev:V1.0Reference:3.1.5网页浏览业务KQI指标统计KQI信号良好率(%)网页打开成功率(%)网页打开时延(ms)Web服务未完成率(%)网页下载速率(KB/s)JYM06B4JYM06B53.2手机QQ业务KQI与KPI聚类映射模型3.2.1手机QQ信令流程:手机发起QQ业务应用请求后,首先将建立无线连接,并接着完成GPRS附着和PDP激活流程建立无线侧的信息交互与QQ服务器建立TCP连接手机与QQ服务器的业务信息交互以“push,ack”形式进行的,相应的“ack”对接收的信息进行确认从业务流程分析,在QQ业务中TCP传输数据包若以“push,ack”的形式出现,表明TCP传输层一旦收到TCP数据包就会传送给应用层MSRNCSGSNGGSNQQ服务器空口连接建立GPRS附着PDP激活手机QQ登录请求SynSyn,AckAckPush,AckAck流媒体文件获取与控制终端与QQ服务器建立TCP连接Push,AckAckPush,AckAck2011年揭阳移动端到端用户感知评估体系建立与优化项目11(28)Prepared(alsosubjectresponsibleifother)杨汉河Approved:杨汉河Checked:Date:2011-11-28Rev:V1.0Reference:3.2.2手机QQ业务KQI定义:信号良好