高清云网可观测之全链路追踪实战v4

1 .高清云网可观测 之全链路追踪实战 李倩／云杉网络 高级产品经理 2022年7月6日 原力释放 云原生可观测性分享会 

2 .内容目录 云网缺乏可观测性的车祸现场 高清云网络全链路追踪的必备要素 实战案例：精准定位K8s网络问题引发的应用故障 实战案例：精准定位NFV云网关性能瓶颈引发的应用故障 原力释放 云原生可观测性分享会 

3 .云网缺乏可观测性的车祸现场—应用 客户端没问题！服务端没问题！问题在哪里？ 原力释放 云原生可观测性分享会 

4 .云网缺乏可观测性的车祸现场—工具 各种工具缺乏！堆人抓包定位问题！效率如何保障？ 原力释放 云原生可观测性分享会 

5 .云网缺乏可观测性的车祸现场—网络 徘徊在云的外围！只能全包存储！资源消耗/查询困难，如何破？ 原力释放 云原生可观测性分享会 

6 .云网缺乏可观测性的车祸现场—网关 层层隧道/层层NAT，流量迷失！如何追踪？ IPIP Flannel 云上访问云下 IP LB 云下访问云上 GRE Calico 云内互访 VXLAN Weave 云内访问LB Kube-OVN NAT 云内跨地域互访 Fabric Firewall 专线网关 原力释放 云原生可观测性分享会 

7 .内容目录 云网缺乏可观测性的车祸现场 高清云网络全链路追踪的必备要素 实战案例：精准定位K8s网络问题引发的应用故障 实战案例：精准定位NFV云网关性能瓶颈引发的应用故障 原力释放 云原生可观测性分享会 

8 .必备要素-高清云网络全链路追踪 全景 全栈 智能 流量拓扑 路径追踪 NAT追踪 黄 金 路径追踪 NAT追踪 指 标 流量 流 追 下载 全包 全网 重传 踪 PCAP报文 时序图 流日志 Payload追踪 包追踪 建连 失败 时延 自动标签 云服务器 容器节点 POD 工作负载 数据库 VPC 区域 原力释放 云原生可观测性分享会 

9 .必备要素-高清云网络全链路追踪 全景 全栈 智能 流量拓扑 路径追踪 NAT追踪 黄 金 路径追踪 NAT追踪 指 标 流量 流 追 下载 全包 踪 全网 重传 PCAP报文 时序图 流日志 Payload追踪 包追踪 建连 失败 时延 自动标签 云服务器 容器节点 POD 工作负载 数据库 VPC 区域 原力释放 云原生可观测性分享会 

10 . 全景流量拓扑 全局视野观测应用调用关系 云网络黄金指标： • 流量大小、重传比例、建连失败比例 • 建连时延、数据传输时延 全景 全栈 智能 全网 全包 原力释放 云原生可观测性分享会 流量拓扑 路径追踪 NAT追踪 流日志 时序图 

11 . 全景流量拓扑—追踪应用路径 第一步：结合圆圈大小+阈值观察 追踪到应用某服务 圆圈大小/线条粗细：表示指标量大小 红色：表示超过阈值 全景 全栈 智能 全网 全包 原力释放 云原生可观测性分享会 流量拓扑 路径追踪 NAT追踪 流日志 时序图 

12 . 全景流量拓扑—追踪应用路径 第二步：高亮服务 追踪服务关联的路径 全景 全栈 智能 全网 全包 原力释放 云原生可观测性分享会 流量拓扑 路径追踪 NAT追踪 流日志 时序图 

13 . 全景流量拓扑—追踪应用路径 第三步：追踪服务上游路径 追踪服务被loadgenerator服务访问时发生重传 全景 全栈 智能 全网 全包 原力释放 云原生可观测性分享会 流量拓扑 路径追踪 NAT追踪 流日志 时序图 

14 .全景流量拓扑—追踪应用路径 第四步：追踪服务下游路径 访问下游product服务重传比例最高 原力释放 云原生可观测性分享会 

15 .必备要素-高清云网络全链路追踪 全景 全栈 智能 流量拓扑 路径追踪 NAT追踪 黄 金 路径追踪 NAT追踪 指 标 流量 流 追 下载 全包 踪 全网 重传 PCAP报文 时序图 流日志 Payload追踪 包追踪 建连 失败 时延 自动标签 云服务器 容器节点 POD 工作负载 数据库 VPC 区域 原力释放 云原生可观测性分享会 

16 . 全栈路径追踪 虚拟网络 + 物理网络全栈路径追踪 应 客户端 服务端 用 POD POD 虚 拟 Node Node 网 络 Host NFV(...) Host 物 路由器 网关 ... 防火墙 理 网 络 核心交换机 TOR交换机 ... 全景 全栈 智能 全网 全包 原力释放 云原生可观测性分享会 流量拓扑 路径追踪 NAT追踪 流日志 时序图 

17 . 全栈路径追踪—丢包追踪 对比各个统计位置流量大小，追踪丢包位置 虚拟网络 ① 客户端容器节点与服务端容器节点之间 ① ② ② 服务端容器节点与服务端POD之间 全景 全栈 智能 全网 全包 原力释放 云原生可观测性分享会 流量拓扑 路径追踪 NAT追踪 流日志 时序图 

18 . 全栈路径追踪—丢包追踪 继续追踪①的丢包范围 物理网络： ③ 为客户端容器节点与北京办公室网关交换机之间 ① ② ③ 全景 全栈 智能 全网 全包 原力释放 云原生可观测性分享会 流量拓扑 路径追踪 NAT追踪 流日志 时序图 

19 . 全栈路径追踪—时延瓶颈追踪 对比各个路径上的时延数据，进行时延瓶颈点追踪 ① 客户端容器节点与服务端容器节点为客户端访问服务端整条访问路径上的时延瓶颈 ① ① 全景 全栈 智能 全网 全包 原力释放 云原生可观测性分享会 流量拓扑 路径追踪 NAT追踪 流日志 时序图 

20 .必备要素-高清云网络全链路追踪 全景 全栈 智能 流量拓扑 路径追踪 NAT追踪 黄 金 路径追踪 NAT追踪 指 标 流量 流 追 下载 全包 踪 全网 重传 PCAP报文 时序图 流日志 Payload追踪 包追踪 建连 失败 时延 自动标签 云服务器 容器节点 POD 工作负载 数据库 VPC 区域 原力释放 云原生可观测性分享会 

21 . 智能NAT追踪 追踪NAT前后流量经过的网络路径 客户端 NAT前 客户端宿主机 对任意TCP四元组或五元组发起追踪 算法智能追踪NAT前后流量 进NFV网关 出NFV网关 服务端宿主机 NAT后 服务端 全景 全栈 智能 全网 全包 原力释放 云原生可观测性分享会 流量拓扑 路径追踪 NAT追踪 流日志 时序图 

22 . 智能NAT追踪—位置追踪 对比NAT前后流量，追踪NAT发生的位置：NFV网关内部 客户端 客户端宿主机 高亮NAT前 进NFV网关 出NFV网关 服务端宿主机 高亮NAT后 服务端 全景 全栈 智能 全网 全包 原力释放 云原生可观测性分享会 流量拓扑 路径追踪 NAT追踪 流日志 时序图 

23 .必备要素-高清云网络全链路追踪 全景 全栈 智能 流量拓扑 路径追踪 NAT追踪 黄 金 路径追踪 NAT追踪 指 标 流量 流 追 下载 全包 踪 全网 重传 PCAP报文 时序图 流日志 Payload追踪 包追踪 建连 失败 时延 自动标签 云服务器 容器节点 POD 工作负载 数据库 VPC 区域 原力释放 云原生可观测性分享会 

24 . 全网流日志 按分钟粒度记录每一条流的详细信息 全景 全栈 智能 全网 全包 原力释放 云原生可观测性分享会 流量拓扑 路径追踪 NAT追踪 流日志 时序图 

25 . 全网流日志 流从链路层到应用层的详情信息 全景 全栈 智能 全网 全包 原力释放 云原生可观测性分享会 流量拓扑 路径追踪 NAT追踪 流日志 时序图 

26 . 全网流日志 通过AutoTagging打的云平台标签 全景 全栈 智能 全网 全包 原力释放 云原生可观测性分享会 流量拓扑 路径追踪 NAT追踪 流日志 时序图 

27 . 全网流日志 采集流相关的信息 全景 全栈 智能 全网 全包 原力释放 云原生可观测性分享会 流量拓扑 路径追踪 NAT追踪 流日志 时序图 

28 . 全网流日志 流相关指标量 全景 全栈 智能 全网 全包 原力释放 云原生可观测性分享会 流量拓扑 路径追踪 NAT追踪 流日志 时序图 

29 . 全网流日志—追踪时延高的流 按数据时延指标量排序 全景 全栈 智能 全网 全包 原力释放 云原生可观测性分享会 流量拓扑 路径追踪 NAT追踪 流日志 时序图