随着备受瞩目的冬奥会顺利召开,相信大家对美轮美奂的开幕式会赞叹不已,俗话说外行看热闹,内行看门道,今天就来谈一下开幕式中跟低延迟相关的一点东西。

先来看一个来自英特尔中国的微博消息:

相信很多观众在没看到这个消息前都会以为那个冰随人动的特效是事先做好的,只是和现场演员对下时间轴,结果英特尔这一揭秘不免让人大吃一惊,这些竟然都是实时的。还有更牛的事在后边,现场的检测延迟和管线延迟竟然达到了惊人的10ms和46ms。

什么是延迟?

在计算机系中中所说的延迟,一般是指生成和返回响应之前的时间延迟。通常有以下几种来源:

  • 网络 I/O
  • 磁盘 I/O
  • 运行环境
  • 程序代码

一般情况下,对于基础资源产生的延迟是取决于对应的设备或系统的技术水平,像英特尔展示的冬奥会开幕式的数据中心就采用了大量的新技术来降低这个延迟。而对于多数人来讲,降低应用的延迟最可行的还是从优化程序代码来入手。

在软件领域,有许多类型的延迟。没有应用程序可能是真正实时的即:零延迟(在程序启动和结果交付之间经过的时间为零)。尽管如此,所有高性能应用程序的目标都是尽可能接近实时。甚至 Gartner 对零延迟的定义也承认延迟实际上永远不可能为零,因为计算机需要时间来“思考”。

软件延迟示例

下面是一个简单的图形示例,说明典型高性能应用程序的延迟情况。我们通常会发现应用的延迟大多会在一个狭窄的范围内变化,但是偶尔会出现非常高的延迟。对于高性能应用程序,按分位数对延迟进行分组通常会产生类似于以下的图:

Y 轴表示程序的延迟时间,X 轴是将一段时间内的所有分组为分位数的结果。蓝线是每个分位数的延迟,橙线是平均延迟。

如果只看平均延迟,你可能会想“应用程序做得很好啊,大部分时间都低于平均值!”这就是问题所在。如果应用程序在大多数情况下具有可接受的延迟,但有时会出现极端延迟,你的业务可能会受影响。

如果你的客户在每次使用产品时都非常快速地需要产品的结果,但有时他们会因长时间的等待而陷入困境,他们会转向你的竞争对手,即使竞争对手的平均延迟可能比你的应用高。

例如:金融交易、考试报名、线上购物、实时交互等场景都要求具有高性能+低延迟的应用。

一个真实的案例

某国家级考试主管单位在一次考试报名的当天,系统发生故障导致大量的用户无法登录。

通过APM工具发现,当时的所有事务都出现了超时现象:

进一步分析,能够看到当时数据库是最大的瓶颈:

接着根据提示,一步步确认问题的位置,着手解决,包括:优化SQL、优化代码等等。一番操作下来,系统表现有了巨大的改变。

1、应用平均响应时间大幅缩短

2、数据库执行时间大幅缩短

3、报名完成时间大幅提前

类似北京、上海这种城市的报名,以往需要近1分钟时间完成,优化后平均4.5秒完成报名。

总结

由此可见,低延迟对于任何应用程序在业务上取得成功都至关重要,好在我们可以通过APM工具来做性能的监控与分析。基调听云多年来致力于提供优质的APM解决方案,也曾多次获得权威机构Gartner的认可,欢迎联系我们了解更多关于APM的信息。

  • 大数据、云计算、物联网等信息技术的发展,让新基建如火如荼的同时,也带来了不小的挑战。首当其中的是网络性能问题。一个性能良好的网络,可以让企业业务开展更加顺利。因此,网络性能管理的概念被提出。通过对网络性能进行管理和实时监控,全方位的对网络问题进行排查和快速响应,保证网络性能的稳定与安全。

    2023-03-31

  • 随着信息化时代的到来,智能化运维管理系统已逐渐成为企业和组织的关键支柱。有效的运维管理不仅确保了企业业务的连续性,还有助于提高效率和响应速度。那么,智能化运维管理系统具体带来了哪些核心价值?

    2023-10-16

  • 随着智能手机的普及,移动应用程序(APP)已经成为我们日常生活中不可或缺的一部分。然而,在享受APP带来的便利的同时,我们也不可避免地涉及到隐私监控的问题。下面就和基调听云一起探讨安卓APP主要监控​哪些信息,以及如何保护个人隐私。

    2023-12-04

  • 随着数字化时代的不断发展,应用程序编程接口(API)已经成为现代软件开发的核心组成部分。API允许不同的软件系统之间实现互操作性,这为企业提供了更多的灵活性和创新性。然而,随着API的增加,监控和管理这些API变得愈发重要。为了保证API的可用性、性能和安全性,API监控工具的发展也必须跟上步伐。

    2023-09-21

  • 随着信息技术的高速发展和企业数字化转型的推进,应用程序已经成为企业不可或缺的一部分。然而,随之而来的是应用性能的挑战,这包括了保持应用程序的高效、稳定和用户友好性。在这个背景下,应用性能管理服务商崭露头角,为企业提供了一种宝贵的支持,以确保其应用程序在竞争激烈的市场中脱颖而出。

    2023-09-04