竞品分析测试方案要领.docx

竞品分析测试方案测试哪些竞品？将RCS的业务进行划分，各自选择1~2款当前最流行的APP应用作为竞争产品进行分析，其中：视频业务区分ios平台和android平台，分别选择FaceTime和微信作为分析对象；消息类业务区分国内外的流行软件，国内主要是微信，海外主要是whatsapp业务，分析过程中同时拿两款app作为分析对象；呈现类业务，目前做的最好的软件微信作为分析对象；综合指标部分选择和RCS业务最相似的微信和skype作为分析对象。对比项RCS微信SkypeWhatsappFaceTime音频业务√√视频业务√√√消息类业务√√√登录注销√√呈现类业务√√性能指标√√√测试哪些维度？测试维度功能完备性Qos主观评价音频业务静音、外放、DTMF、音量控制方式、业务触发入口、其它特色功能、编解码、拨号盘、历史记录在不同网络质量下的通话质量、最优质量的网络要求结合主观概念进行综合评价视频业务静音、外放、DTMF、音量控制方式、摄像头切换、音视频互换、窗口隐藏、业务触发入口、编解码、其它特色功能在不同网络质量下的通话质量、最优质量的网络要求结合主观概念进行综合评价消息类业务回执、输入状态、表情、共享内容、群聊、业务触发入口在不同网络质量下的业务成功率.时延等结合主观概念进行综合评价登录注销自动登陆、静默登陆、网络状态提示、其它特殊业务对网络状态的敏感程度、登陆耗时结合主观概念进行综合评价呈现类业务呈现信息的内容、内容大小，图片质量各种呈现信息更新的成功率和时延结合主观概念进行综合评价性能指标业务场景下的流量、电量、内存、CPU、安装包大小不涉及结合主观概念进行综合评价用例体验评估RCS的用户体验以及对比分析竞品之间的差异Qos测试基于网络有一定网络话务模型下进行竞品测试。根据《QoS话务模型性能规格》（2013-7-22刷新）中的定义，典型网络QoS模型如下：注：其中WIFI/宽带接入为必选场景，3G接入/2G接入为可选场景。“丢包率、时延、抖动”等数值均指一侧的数据，即指UE-SBC-IMS(AS)的数据。需要注意的是，在测试部分场景时，需要在两个UE侧加扰，比如在测试音频的“WIFI:较差”场景时，需要在UE1-SBC-IMS(AS)一侧按照丢包：11.5%，时延：215ms，抖动：100ms加扰，同时需要在UE2-SBC一侧也按照丢包：11.5%，时延：215ms，抖动：100ms加扰。测试哪些项？音频业务功能完备性针对音频呼叫的功能完备性，进行如下维度的功能完备性测试类型功能点测试点描述音频呼叫业务发起入口来电铃声大小控制来电铃声的大小控制，在各种手机情景模式下的来电铃声接听方式包括锁屏状态下的接听、正常下的接通界面呈现信息在振铃态通话态各自能够呈现多少信息？静音功能是否支持外放功能是否支持DTMF信息查询在通话态能够并行操作多少业务转CS呼叫编解码支持哪些编解码切换视频呼叫补充业务与呼叫的冲突包括PS业务的冲突和CS呼叫的冲突通话记录通话记录查询通话记录删除功能通话记录详情界面信息呈现拨号盘拨号盘有哪些信誉好的足球投注网站拨号盘删除功能其它其它特色功能Qos质量在对比测试过程中，各个影响参数的设置如下：设置项RCSSkype组网RCS的主流组网（内置SVN）默认配置（安装后默认配置）编解码使用默认编解码opus2198冗余支持（按照默认配置支持二级冗余）针对语音呼叫的Qos分析，需要测试的关键指标如下（包括统计方法）：关键指标RCSSkype接通率连续测试10次，计算接通率连续测试10次，计算接通率接续时长从日志中获取接续时长通过外部计时的方式实现（秒表）语音时延以DSLA的测试数据为准以DSLA的测试数据为准MOS以DSLA的测试数据为准以DSLA的测试数据为准视频业务功能完备性针对视频频呼叫的功能完备性，进行如下维度的功能完备性测试类型功能点测试点描述视频呼叫业务发起入口来电铃声大小控制来电铃声的大小控制，在各种手机情景模式下的来电铃声接听方式包括锁屏状态下的接听、正常下的接通界面呈现信息在振铃态通话态各自能够呈现多少信息？静音功能是否支持外放功能是否支持DTMF摄像头切换窗口切换窗口隐藏信息查询在通话态能够并行操作多少业务编解码支持哪些编解码切换音频呼叫补充业务与呼叫的冲突包括PS业务的冲突和CS呼叫的冲突其它其它特色功能Qos质量在对比测试过程中，各个影响业务的参数设置如下：设置项RCSFaceTime/微信组网RCS的主流组网（内置SVN）默认配置（安装后默认配置）编解码音频编解码视频opus；视频编解码使用H.2642198冗余支持（按照默认配置支持二级冗余）针对视频呼叫的Qos分析，需要测试的关键指标如下（包括统计方法）关键指标RCSSkype接通率连续测试10次，计算接通率连续测试10次，计算接通率接续时长从日志中获取接续时