1、概述 首先要看TCP/IP协议，涉及到四层：链路层，网络层，传输层，应用层。 其中以太网（Ethernet）的数据帧在链路层 IP包在网络层 TCP或UDP包在传输层 TCP或UDP中的数据（Data)在应用层 它们的关系是 数据帧｛IP包｛TCP或UDP包｛Data｝｝｝ 不同的协议层对数据包有不同的称谓，在传输层叫做段(segment)，在网络层叫做数据报(datagram)，在链路层叫做帧(frame)。数据封装成帧后发到传输介质上，到达目的主机后每层协议再剥掉相应的首部，最后将应用层数据交给应用程序处理。 在应用程序中我们用到的Data的长度最大是多少，直接取决于底层的限制。 我们从下到上分析一下： 1.在链路层，由以太网的物理特性决定了数据帧的长度为(46＋18)－(1500＋...阅读全文
1.关于MTU MTU最大传输单元，这个最大传输单元实际上和链路层协议有着密切的关系，EthernetII帧的结构DMAC+SMAC+Type+Data+CRC由于以太网传输电气方面的限制，每个以太网帧都有最小的大小64Bytes最大不能超过1518Bytes，对于小于或者大于这个限制的以太网帧我们都可以视之为错误的数据帧，一般的以太网转发设备会丢弃这些数据帧。 由于以太网EthernetII最大的数据帧是1518Bytes这样，刨去以太网帧的帧头（DMAC目的MAC地址48bits=6Bytes + SMAC源MAC地址48bits=6Bytes + Type域2Bytes）14Bytes和帧尾CRC校验部分4Bytes那么剩下承载上层协议的地方也就是Data域最大就只能有1500Byte...阅读全文
存储成本下降66%，得物云原生全链路追踪架构实践 2022-10-20 09:54 来源: dbaplus社群 发布于：广东省 原标题：存储成本下降66%，得物云原生全链路追踪架构实践 分布式链路追踪作为解决分布式应用可观测问题的重要技术，得物全链路追踪(简称Trace2.0)基于OpenTelemetry提供的可观测标准方案实现新一代的一站式全链路观测诊断平台，并通过全量采集Trace帮助业务提高故障诊断、性能优化、架构治理的效率。 全量采集Trace数据(日增数百TB 、数千亿条Span数据)并以较低的成本保证数据的实时处理与高效查询，对Trace2.0后端整体的可观测性解决方案提出了极高的要求。本文将详细介绍Trace2.0背后的架构设计、尾部采样和冷热存储方案，以及我们是如何通过自建...阅读全文
本文分享自天翼云开发者社区《分布式系统中的分布式链路追踪与分布式调用链路》，作者：c****w在分布式系统中，由于服务间的调用关系复杂，需要实现分布式链路追踪来跟踪请求在各个服务中的调用路径和时间消耗。这对问题排查和性能监控都很重要。常用的分布式链路追踪实现有基于日志的和基于分布式追踪系统的两种方式：基于日志的实现方式是在每个服务中记录自己的请求id和上下文信息，并在日志中打印出来。这样可以通过聚合各个服务的日志来还原整个请求链路。基于分布式追踪系统的实现方式是：使用开源Tracing系统，比如Zipkin。每个服务都需要集成Tracing客户端库。客户端在发起请求时，生成一个唯/一的TraceId并传递给下游服务。每个服务接收到请求都需要记录Span数据，包括操作名、时间戳等。所有Span...阅读全文
本文分享自天翼云开发者社区《一条数据包从收到发--交换芯片篇(一)》，作者:w****n从程控交换设备的软处理到交换芯片的硬件pipeline，从基于dpdk的软件转发到可编程的pipeline硬转发，从Kbps带宽能力到Tbps能力，网络转发设备的发展带来大带宽能力的同时，其技术架构也是经历了软-硬-软-硬的周期，可谓完美演绎了“十年河东十年河西”“各领风骚数年”的传奇。但对于底层网络而言，其七层架构、数据包结构、协议标准基本没有变化，即对于网络转发设备而言，数据报文处理架构可以做通用设计抽象，转发细节的差异与演进大多体现在报文处理逻辑的优化，内部报文高速传递的优化等。本文通过介绍和借鉴主流数通交换芯片，开源软转发处理，可编程交换芯片通用pipelile设计等成熟商业化实现，谈一谈报文处理...阅读全文
1. 背景1.1 业务系统日益复杂随着互联网产品的快速发展，不断变化的商业环境和用户诉求带来了纷繁复杂的业务需求。业务系统需要支撑的业务场景越来越广、涵盖的业务逻辑越来越多，系统的复杂度也跟着快速提升。与此同时，由于微服务架构的演进，业务逻辑的实现往往需要依赖多个服务间的共同协作。总而言之，业务系统的日益复杂已经成为一种常态。1.2 业务追踪面临挑战业务系统往往面临着多样的日常客诉和突发问题，“业务追踪”就成为了关键的应对手段。业务追踪可以看做一次业务执行的现场还原过程，通过执行中的各种记录还原出原始现场，可用于业务逻辑执行情况的分析和问题的定位，是整个系统建设中重要的一环。目前在分布式场景下，业务追踪的主流实现方式包括两类，一类是基于日志的ELK方案，一类是基于单次请求调用的会话跟踪方案。...阅读全文
