中国电信运营商骨干网络架构

国内运营商骨干网络架构简介（企业机密）2SpeedupChina中国电信163中国电信CN2中国联通169（原网通）Q&A内容提要历史从不寂寞变革造就伟大3SpeedupChina中国电信ChinaNet网络简介ChinaNet全称：中国电信宽带互联网ChinaNet分为骨干网和城域网两层结构承载业务：很少，很单纯网络规模和结构：很大，很复杂国内部分骨干网核心层和汇接层覆盖全国47个城市，200多个城域网4SpeedupChina中国电信ChinaNet网络架构骨干网层面，又可分为三层：核心层、汇接层和接入层，另外核心层还连接有国际出入口层、互联互通层骨干网分为3大片区：北京、上海、广州骨干网3大片区又细分为9个大区：北京片区：北京大区、天津大区、西安大区上海片区：上海大区、南京大区、杭州大区广州片区：广州大区、武汉大区、成都大区5SpeedupChina中国电信ChinaNet骨干网络设备角色G:=Global,GlobalRRC:=Core,核心路由器D:=Distribution,汇接路由器A:=Access,边缘接入路由器I:=Internet,国际出口路由器E：=Exchange，国内网间互连路由器X:=eXchange，国际网间互连路由器F：=POP，国际海外POP点路由器T：=Transit国际穿透路由器6SpeedupChina中国电信ChinaNet网络简介核心层（C）：超级核心：北京、上海、广州普通核心：天津、西安、南京、杭州、武汉、成都核心节点间Full-Mesh连接负责各省份间信息交互，超级核心还负责与国内其他运营商、国际访问的流量交互7SpeedupChina中国电信ChinaNet网络简介汇接层（D）：北方省份落地设备，南方省份省网汇聚设备各省份双方向上联，分别连接到一个超级核心和一个普通核心节点，部分省份三方向上联接入层（A）：未完成扁平化的省份还有地市接入层设备，用于接入省内城域网8SpeedupChina中国电信ChinaNet网络骨干拓扑陕西江苏广东山西甘肃新疆宁夏青海西藏河南内蒙古黑龙江吉林辽宁河北山东福建江西云南广西贵州海南湖南湖北青岛济南沈阳大连长春吉林哈尔滨太原兰州乌鲁木齐银川拉萨贵阳唐山石家庄郑州洛阳通辽呼和浩特三亚海口柳州南宁天津天津广东浙江温州上海江苏重庆重庆北京北京安徽四川西宁武汉无锡西安深圳芜湖合肥九江南昌福州厦门长沙衡阳昆明南京广州成都天津上海杭州12×10G20×10G16×10G16×10G20×10G4×40G20×10G16×10G12×10G2×2.5G12×10G12×10G12×10G12×10G16×10G16×10G12×10G12×10G12×10G12×10G16×10G12×10G12×10G16×10G10×10G10×10G12×10G12×10G2×2.5G北京上海1×40G12×10G16×10G上海9SpeedupChina中国电信ChinaNet网络省内拓扑结构汇接层东华二枢C-12416DH-D-2C-12416DH-D-1C-12416ES-D-1C-12416ES-D-2城域网昆明城域网玉溪城域网C-12008-2C-12008-1曲靖城域网C-12008C-12416楚雄城域网C-12008-1C-12008-2红河城域网C-12012C-12416文山城域网C-12012-1C-12012-2昭通城域网C-12012-1C-12012-2普洱城域网C-12012-1C-12012-2大理城域网C-12012C-12008保山城域网C-12012-1C-12012-2丽江城域网C-12008-1C-12008-2昆明昆明IDC昆明SDC2×2.5G2×2.5G2×2.5G2×2.5G10SpeedupChinaChinaNet－国内互联互通国内互联互通层：在北京、上海、广州三个超级核心设有互联互通设备（E路由器），互联互通设备（E路由器）直接连接在超级核心C路由器ChinaNet通过互联互通设备与部分其它运营商互联和流量互访11SpeedupChinaChinaNet－国内互联互通网络拓扑上海北京广州C-12816XD-E-1163北京西单节点互联互通路由器C-12816WS-E-2C-12816WS-E-3163上海武胜节点互联互通路由器C-12816TH-E-2C-12816TH-E-3163广州天河节点互联互通路由器其它运营商网络C-12816XD-E-2C-CRSMMS-C-3C-CRSMMS-C-4A类WS-C-1A类WS-C-2B类JA-C-3C-CRSXD-C-4B类JA-C-1B类XD-C-2J-TXTH-C-3J-TXJCX-C-1C-CRSMJCX-C-2C-CRSMTH-C-412SpeedupChinaChinaNet－国际网间互联国际网间互联在北京、上海、广州三个超级核心下挂国际网间互联设备（X路由器），ChinaNet通过X路由器与世界上其他运营商互联和流量互访13SpeedupChinaChinaNet－国际网间互联拓扑14SpeedupChinaChinaNet－二级RR结构示意图15SpeedupChinaChinaNet－RR路由转发策略国际出入口路由器和互联互通路由器通过与一级RR的IBGP连接将国际路由表和国内路由表发送给一级RR上一级RR之间FullMash的IBGP路由转发不做任何限制，这样所有一级RR上都具有国际全路由表和国内全路由表一级RR在与其Client之间的路由传播配置可以设置过滤策略一级RR对核心路由器（C）和国际出口路由器（I）发布国际全路由表和国内全路由表一级RR对汇接路由器（D/二级RR路由器）和国内网间互连路由器（E）发布国内全路由表和BGP缺省路由（BGP缺省路由在I路由器上起源）16SpeedupChinaChinaNet－RR路由转发策略（续）二级RR路由器（D）将国内BGP路由和BGP缺省路由转发给接入路由器(A)接入路由器（A）再将国内BGP路由和BGP缺省路由发送给城域网或IDC，使骨干网流量从城域网或IDC出口就可以选择最优路径转发接入路由器（A）从城域网或IDC收到BGP路由后发送给二级RR路由器，再有二级RR路由发送给一级RR路由器，从而转发到整个ChinaNet骨干网17SpeedupChinaChinaNet－流量模型骨干网通过isis的metric分为两个逻辑平面：平面一：由三个超级核心及其之间的链路、各省第一出口链路组成；超级核心节点设备同时与国际出入口路由器、互联互通路由器相连平面二：由六个普通核心节点由器及其之间链路，各省第二出口链路组成访问国际和互联互通：通过超级核心转发18SpeedupChinaChinaNet－流量模型（续）片区内省间互访：通过超级核心转发跨片区省间互访：若该省无第三方向至对方片区，则通过第二方向的普通核心间链路转发；若该省有第三方向至对方片区，则由第三方向所连核心直接转发，或由第三方向所连核心至对方所连普通核心链路转发访问普通核心合设省份访问普通核心合设省份通过普通核心间链路转发19SpeedupChinaChinaNet－访问国际流量湖南C-12816TH-IXR-2C-12816TH-IXR-1海外网络C层面I层面IXR层面广州第二汇接节点第一汇接节点J-TXJCX-C-1C-CRSMJCX-C-2J-TXTH-C-3C-CRSMTH-C-4C-12816TH-I-4C-12816TH-I-3C-12816TONGHE-I-5C-12416TONGHE-I-6广东省广州C-12816SH-IXR-2C-12816SH-IXR-1上海C-12816SH-I-4C-12816SH-I-3C-12816SH-I-5C-12416SH-I-6江苏省第一汇接节点C-CRSMMS-C-3C-CRSMMS-C-4A类WS-C-2A类WS-C-1上海访问国际的流量由各省第一方向通过北京/上海/广州三个超级核心节点路由器直接转发。20SpeedupChinaChinaNet－国内互联互通流量访问国内互联互通的流量由各省第一方向通过北京/上海/广州三个超级核心节点路由器直接转发21SpeedupChinaChinaNet－片区内大区间互访片区内大区间非合设核心所在省份互访由各省第一方向通过超级核心转发22SpeedupChinaChinaNet－大区内省间互访一般情况下，大区内省间互访原则上通过本片区超级核心直接转发23SpeedupChinaChinaNet－片区间互访原则上通过第二方向普通核心间链路转发由于普通核心之间的metric值小于超级核心之间的metric24SpeedupChina中国电信163中国电信CN2中国联通169（原网通）Q&A内容提要25SpeedupChinaCN2网络业务定位具有SLA保证的赢利业务同时支持语音、数据、视频、专线等业务的统一核心承载平台承载中国电信自身关键赢利业务和具有QoS保证的SLA业务网络规划与设计之初完全保证CN2的可控和可管理、充分考虑目前当时出现的业务、并适当考虑未来的应用26SpeedupChina提供的关键盈利品牌类业务中国电信提供的大客户和商业客户的VPN业务，专线接入业务中国电信3G、NGN语音业务PSTN网络长途语音业务（VoIP）视频类业务流媒体等业务游戏业务中国电信提供的视讯会议、可视电话等视频类业务27SpeedupChinaCN2网络结构山西河南内蒙古黑龙江吉林辽宁河北山东福建江西云南广西贵州海南湖南图例：Juniper设备Cisco设备6×10G4×10G2×2.5G2×10G1×10G1×2.5G4×2.5G4×155M安徽江苏广东四川湖北陕西南京成都西安青岛济南沈阳大连长春吉林哈尔滨太原兰州乌鲁木齐银川西宁拉萨贵阳合肥重庆深圳唐山石家庄南昌衡阳长沙昆明上海郑州洛阳通辽呼和浩特北京4×2.5G天津武汉福州厦门三亚海口4×2.5G6×2.5G九江浙江杭州广州甘肃新疆宁夏青海西藏海外网络柳州南宁Alcatel设备Huawei设备新增1×2.5G新增1×10G4×2.5G8×2.5G3×2.5G3×2.5G3×2.5G8×2.5G28SpeedupChina七大核心结构2*10G4*10G2*10G4*10G6*10G2*10G2*10G2*10G4*10G2*10G北京上海2*10G2*10G2*10G2*10G2*10G2*10G广州南京武汉成都西安2*10G2*10G2*10G4*10G2*10G4*10G2*10G2*10G2*10GG2*10G4*10G北京上海2*10G2*10G2*10G2*10G2*10G2*10G广州南京武汉成都西安2*10G2*10G2*10G2*10G29SpeedupChina海外网络在香港、东京、新加坡、伦敦、法兰克福、纽约、华盛顿、圣何塞、洛杉矶设置了POP节点，可提供国际Internet接入和网间互连业务。目前CN2国际网络与部分国际运营商已经互联，其中欧洲POP点与TeliaSonera互联，此外与日本运营商NTTCom、与香港运营商Reach实现了互联，具备了一定的国际访问通道保证。30SpeedupChina海外网络31SpeedupChinaCDNCDN全国管理中心和内容中心设在北京，全国管理中心后台系统CDN全国管理中心和内容中心设在北京，全国管理中心后台系统经防火墙直接接入CN2北京骨干路由器，全国内容中心直接接入CN2骨干路由器。各省中心的CDN骨干POP点、省级CDN内容中心和CDN省级管理中心接入省会节点IDC，省CDN区域中心接入同城市IDC，省会节点IDC和区域中心IDC双挂ChinaNet和CN2。CDN边缘POP节点接入城域网。不单独为城域网内和IDC内的CDNPOP点设置专门链路连接CN2。经防火墙直接接入CN2北京骨干路由器，全国内容中心直接接入CN2骨干路由器。各省中心的CDN骨干POP点、省级C