博客
关于我
强烈建议你试试无所不能的chatGPT,快点击我
.NET运行时中的监测和可观测性
阅读量:5154 次
发布时间:2019-06-13

本文共 6694 字,大约阅读时间需要 22 分钟。

今年5月份的时候研究分布式追踪的问题知道了的拦截方式比较零散, 刚好8月份的时候看到这篇文章,这个文章总结的比较完整。存档了很久,趁今天有空翻译给大家。,校验:

.NET是一个,这意味着它提供了“管理”您的程序的高级功能,从(2007年编写):

运行时具有许多功能,因此按如下方式对它们进行分类很有用:

  1. 基本功能 对其他功能设计有广泛影响的功能。这些包括:
    1.垃圾收集
    2.记忆安全和类型安全
    3.对编程语言的高级支持。
  2. 辅助功能 - 许多有用的程序可能不需要基本特性所支持的功能:
    1.使用AppDomains进行程序隔离
    2.程序安全和沙盒
  3. 其他功能 - 所有运行时环境都需要但不利用CLR基本功能的功能。相反,它们是创建完整编程环境的结果。其中包括:
    1.版本
    2.Debugging/Profiling
    3.互操作

您可以看到,“Debugging/Profiling”虽然不是基本或辅助功能,但由于“ 需要创建完整的编程环境 ” ,它仍然会进入列表。

这篇文章的其余部分将看什么 ,和功能核心CLR提供,为什么他们是有用的,如何提供他们。

为了便于浏览,帖子分为3个主要部分(最后有一些“额外阅读材料”):

    • Perf View(性能分析工具)
    • 共同基础设施
    • 未来的计划
    • ICorProfiler API
    • 分析 v .调试
    • ICorDebug API
    • SOS和DAC
    • 第三方调试器
    • 记忆转储

诊断(Diagnostics)

首先,我们将查看CLR提供的诊断信息,传统上这些信息是通过(ETW)提供的。

各种事件涉及:

  • 垃圾收集(GC)
  • 即时(JIT)编译
  • 模块和AppDomains
  • 线程和锁争用
  • 以及更多

例如,这是地方,这是,这里是。

Perf View

如果你想看到来自你的.NET程序的ETW事件,我建议使用优秀的,从这些开始,或者这个优秀的演讲。PerfView被广泛认可,因为它提供了宝贵的信息,例如Microsoft工程师经常将其用于。

image.png

共同基础设施

但是,如果从名称中不清楚,ETW事件仅在Windows上可用,这并不适合新的.NET“跨平台”世界。您可以使用(通过),但这只是cmd-line集合工具,称为“PerfCollect”,分析和丰富的UI(包括)目前仅适用于Windows。

但是如果你想分析.NET Performance Linux,还有其他一些方法:

上面的第二个链接讨论了在.NET Core中正在使用的新“EventPipe”基础架构(以及EventSources和EventListeners,你能发现一个主题!),你可以看到它在。在高层次上,它将为CLR提供一个单独的位置来推动与诊断和性能相关的“事件”。然后,这些“事件”将被路由到一个或多个记录器,例如,可能包括ETW,LTTng和BPF,精确记录器由CLR运行的OS /平台确定。中还有更多背景信息可以解释不同日志记录技术的优缺点。

“事件管道”中正在进行的所有工作都在和相关的进行跟踪。

未来的计划

最后,还有一个未来计划,其目标如下:

控制器负责以简单和跨平台的方式控制性能分析基础结构和.NET性能诊断组件生成的性能数据。

我们的想法是从“事件管道”中提取所有相关数据,通过公开:

REST API

  • Pri 1:简单分析:为运行时间配置X个时间并返回跟踪。
  • Pri 1:高级分析:开始跟踪(以及配置)
  • Pri 1:高级分析:停止跟踪(对此调用的响应将是跟踪本身)
  • Pri 2:获取与所有EventCounters或指定EventCounter相关的统计信息。

可浏览的HTML页面

  • Pri 1:流程中所有托管代码堆栈的文本表示。
  • 提供当前正在运行的用作简单诊断报告的快照概述。
  • Pri 2:显示EventCounters的当前状态(可能具有历史记录)。
    * 提供现有计数器及其值的概述。
    * 开放性问题:我不相信存在必要的公共API来枚举EventCounters。

我很高兴看到“性能分析控制器(Performance Profiling Controller)”(PPC?)的位置,我认为将这种内置到CLR中确实非常有价值,这是。

剖析(Profiling)

CLR提供的另一个强大功能是,它(大部分)被第三方工具用于在非常低级别挂钩到运行时。您可以在找到有关API的更多信息,但在较高级别,它允许您连接在以下情况下触发的回调:

  • GC相关事件发生
  • 抛出异常
  • 装配/卸载装配

image.png

来自BOTR页面的图像

此外还有其他非常强大的功能。首先,您可以设置每次执行.NET方法时调用的挂钩,无论是在运行时还是用户代码中。这些回调被称为“进入/离开”钩子,并且有一个显示如何使用它们,但为了使它们工作,您需要了解,这。另外,作为警告,Profiling API是一个只能通过C / C ++代码访问的COM组件,你不能在C#/ F#/ VB.NET中使用它!

其次,Profiler能够通过在之前重写任何.NET方法的IL代码。这个API功能非常强大,构成了许多.NET 的基础,您可以在我之前的文章中了解更多关于如何使用它的方法。以及。

ICorProfiler API

事实证明,运行时必须执行各种疯狂的技巧才能使Profiling API正常工作,只需查看进入此PR的内容(有关'ReJIT'的详细信息,请参阅)。

所有Profiling API接口和回调的总体定义可在(请参阅)。但它分为2个逻辑部分,一个是Profiler - >'Execution Engine'(EE)接口,称为ICorProfilerInfo

// Declaration of class that implements the ICorProfilerInfo* interfaces, which allow the// Profiler to communicate with the EE.  This allows the Profiler DLL to get// access to private EE data structures and other things that should never be exported// outside of the EE.

这在以下文件中实现:

另一个主要部分是EE - > Profiler回调,它们在ICorProfilerCallback界面下组合在一起:

// This module implements wrappers around calling the profiler's // ICorProfilerCallaback* interfaces. When code in the EE needs to call the// profiler, it goes through EEToProfInterfaceImpl to do so.

这些回调在以下文件中实现:

最后,值得指出的是,Profiler API可能无法在.NET Core运行的所有操作系统和CPU-arch上运行,例如,有关详细信息,请参阅。

分析和调试(Profiling v. Debugging)

除此之外,“分析”和“调试”确实有一些重叠,因此从中了解.NET运行时上下文中不同的API提供什么是有帮助的。

image.png

调试(Debugging)

调试意味着不同的事情不同的人,比如我问在Twitter上“ 什么是你调试的.NET程序的途径 ”,并得到了的,虽然反应两组含有一个很好的工具清单和技术,所以他们值得一试,谢谢#LazyWeb!

但也许这句话最好总结一下Debugging究竟是什么?

image.png

CLR提供了与调试相关的非常广泛的功能,但为什么需要提供这些服务,优秀的帖子提供了3个理由:

  1. 可以在硬件级别抽象本机调试,但需要在IL级别抽象管理调试
  2. 托管调试需要大量的信息,直到运行时才可用
  3. 托管调试器需要与垃圾收集器(GC)协调

所以给一个体面的经验,CLR 具有提供称ICorDebug,这将在下面从“常用的调试方案”的图像中显示:

image.png

此外,还有很好的描述了不同部分相互作用,虽然描述是上图中的相反!

Here’s an overview of the pipeline of components:1) End-user2) Debugger (such as Visual Studio or MDbg).3) CLR Debugging Services (which we call "The Right Side"). This is the implementation of ICorDebug (in mscordbi.dll).---- process boundary between Debugger and Debuggee ----4) CLR. This is mscorwks.dll. This contains the in-process portion of the debugging services (which we call "The Left Side") which communicates directly with the RS in stage #3.5) Debuggee's code (such as end users C# program)

ICorDebug API

但是如何实现所有这些以及从的不同组件是什么:

所有.Net调试支持都在我们称之为“The Dac”的dll之上实现。此文件(通常命名mscordacwks.dll)是我们的公共调试API(ICorDebug)以及两个私有调试API 的构建块:SOS-Dac API和IXCLR。

在一个完美的世界中,每个人都会使用ICorDebug我们的公共调试API。但是,像您这样的工具开发人员所需的绝大多数功能都缺乏ICorDebug。这是我们正在修复的问题,但这些改进将进入CLR v.next,而不是旧版本的CLR。实际上,ICorDebugAPI仅在CLR v4中添加了对故障转储调试的支持。任何调试CLR v2崩溃转储的人根本无法使用ICorDebug

(有关其他文章,请参阅)

ICorDebugAPI实际上是分成多个接口,也有在他们的70!我不会在这里列出所有内容,但是我将展示它们所属的类别,有关更多信息,请参阅其中包含此列表,因为它更详细。

  • 顶级(Debugging): ICorDebug + ICorDebug2是顶级接口,有效地充当ICorDebugProcess对象的集合。
  • 回调(Callbacks):通过调试器实现的回调对象上的方法调度托管调试事件
  • 进程(Process):这组接口表示正在运行的代码,并包含与事件相关的API。
  • 代码/类型检查(Code / Type Inspection): 主要可以在静态PE映像上运行,但实时数据有一些便​​捷方法。
  • 执行控制(Execution Control):执行是“检查”线程执行的能力。实际上,这意味着放置断点(F9)和踩踏(F11步入,F10步进,S + F11步出)等。ICorDebug的执行控制仅在托管代码中运行。
  • 线程+调用堆栈(Threads + Callstacks):调用堆栈是调试器检查功能的支柱。以下接口与获取callstack有关。ICorDebug仅公开调试托管代码,因此堆栈跟踪仅受管理。
  • 对象检查(Object Inspection):对象检查是API的一部分,它允许您在整个调试对象中查看变量的值。对于每个接口,我列出了“MVP”方法,我认为必须简洁地传达该接口的用途。

另外需要注意的是,与Profiling APIs一样,调试API的支持级别因操作系统和CPU架构而异。例如,截至2018年8月,。有关“Linux”支持的更多信息,请参阅这篇很棒的文章,并从Microsoft 检出,其目标是更容易在Linux上调试.NET程序。

最后,如果你想看看ICorDebugAPI在C#中的样子,看一下的,包括所有(CLRMD将在后面的文章中进行更深入的介绍)。

SOS和DAC

“数据访问组件(Data Access Component)”(DAC)在中有详细讨论,但实际上它提供了对CLR数据结构的“进程外”访问,因此可以从另一个进程读取其内部详细信息。这允许调试器(via ICorDebug)或进入CLR的运行实例或内存转储,并找到如下内容:

  • 所有正在运行的线程
  • 托管堆上有哪些对象
  • 有关方法的完整信息,包括机器代码
  • 当前的'堆栈跟踪'

除此之外,如果您想要解释所有奇怪的名称和一点'.NET历史课',请参阅。

的完整列表非常令人印象深刻,并且在WinDBG旁边使用它可以让您非常低级地了解程序和CLR中发生的情况。要了解它是如何实现的,让我们看一下这个!HeapStat命令,该命令可以为您提供.NET GC正在使用的不同堆大小的摘要:

image.png

(来自图片)

这是代码流,显示了SOS和DAC如何协同工作:

  • SOS完整!HeapStat命令()
  • SOS!HeapStat处理'Workstation GC' 的命令中的代码()
  • SOS GCHeapUsageStats(..)功能,重负荷()
  • 共享DacpGcHeapDetails包含指向GC堆中主数据的指针的数据结构,例如段,卡表和各代()
  • GetGCHeapStaticData填充DacpGcHeapDetails结构的DAC函数()
  • 共享DacpHeapSegmentData包含GC堆的单个“段”的详细信息的数据结构()
  • GetHeapSegmentData(..)填充DacpHeapSegmentData结构的DAC()

第三方'调试器'(3rd Party ‘Debuggers’)

由于Microsoft发布了调试API,它允许第三方使用ICorDebug接口,这里列出了我遇到的一些内容:

  • 来自
    • 调试器提供GDB / MI或VSCode调试适配器接口,并允许在.NET Core运行时下调试.NET应用程序。
    • 可能是他们的工作的一部分
  •  - “.NET调试器和汇编编辑器”
    • 一个,它是一个'调试器','汇编编辑器','十六进制编辑器','反编译器'等等!
    • 可以作为和,也可以。
    • 但是,目前MDBG似乎不适用于.NET Core,请参阅和以获取更多信息。
  • 允许在Windows上进行.NET Core调试
    • 虽然由于许可问题引起了
    • 有关更多信息,请参阅

记忆转储(Memory Dumps)

我们要看的最后一个区域是“内存转储”,可以从实时系统中捕获并离线分析。.NET运行时一直很好地支持,现在.NET Core是“跨平台”,也可以工具。

“内存转储”的一个问题是,获取SOS和DAC文件的正确匹配版本可能会非常棘手。幸运的是,Microsoft刚刚发布了以下:

可以下载任何给定核心转储,minidump或任何支持平台的文件格式(如ELF,MachO,Windows DLL,PDB和便携式PDB)的调试所需的所有文件(给出coreclr模块的符号,模块,SOS和DAC)。

最后,如果你花费任何时间分析'内存转储',你真的应该看看微软几年前发布的优秀的。我之前你可以用它做什么,但简而言之,它允许你通过一个直观的C#API与内存转储交互,其中的类可以访问,,,和。实际上,除了实现工作所需的时间之外,CLR MD还可以。

但是从来看它是如何运作:

ClrMD托管库是CLR仅内部调试API的包装器。虽然这些仅内部API对于诊断非常有用,但我们不支持它们作为公开的,有文档的版本,因为它们非常难以使用并且与CLR的其他实现细节紧密耦合。ClrMD通过围绕这些低级调试API提供易于使用的托管包装来解决此问题。

通过在官方支持的库中提供这些API,Microsoft使开发人员能够在CLRMD之上构建,这是一个很好的结果!


总而言之,.NET Runtime提供了广泛的诊断,调试和分析功能,可以深入了解CLR内部的情况。

转载于:https://www.cnblogs.com/WithLin/p/9798485.html

你可能感兴趣的文章
js编码
查看>>
Pycharm Error loading package list:Status: 403错误解决方法
查看>>
steps/train_sat.sh
查看>>
转:Linux设备树(Device Tree)机制
查看>>
iOS 组件化
查看>>
(转)Tomcat 8 安装和配置、优化
查看>>
(转)Linxu磁盘体系知识介绍及磁盘介绍
查看>>
tkinter布局
查看>>
命令ord
查看>>
Sharepoint 2013搜索服务配置总结(实战)
查看>>
博客盈利请先考虑这七点
查看>>
使用 XMLBeans 进行编程
查看>>
写接口请求类型为get或post的时,参数定义的几种方式,如何用注解(原创)--雷锋...
查看>>
【OpenJ_Bailian - 2287】Tian Ji -- The Horse Racing (贪心)
查看>>
Java网络编程--socket服务器端与客户端讲解
查看>>
List_统计输入数值的各种值
查看>>
学习笔记-KMP算法
查看>>
Timer-triggered memory-to-memory DMA transfer demonstrator
查看>>
跨域问题整理
查看>>
[Linux]文件浏览
查看>>