AzureDiagnostics
存储使用 Azure 诊断模式的 Azure 服务的资源日志。 资源日志描述 Azure 资源的内部操作。
每个 Azure 服务的资源日志具有一组唯一的列。 AzureDiagnostics 表包含 Azure 服务最常用的列。 如果资源日志包含一列,但该列在 AzureDiagnostics 表中尚不存在,则会在第一次收集数据时添加该列。 如果达到 500 列的最大数量,则任何其他列的数据都会添加到动态列中。
使用特定于资源模式的 Azure 服务会将数据存储在特定于该服务的表中,而不会使用 AzureDiagnostics 表。 有关使用每个方法的服务,请参阅下面的资源类型。 有关差异的详细信息,请参阅 Azure 资源日志。
注意
AzureDiagnostics 表是 Azure Monitor 管道在 Azure 资源首次开始以 Azure 诊断模式发送日志时专门创建的自定义日志表。 与其他表不同,AzureDiagnostics 表不能通过 ARM 模板或表 API 来创建。 因此,在创建表格之前,无法修改表的默认保留值。
AdditionalFields 列
与其他表不同的是,AzureDiagnostics 更容易超过日志分析工作区中任何表的 500 列限制,这是因为能够向该表发送数据的 Azure 资源种类繁多。 为确保数据不会因活动列数超过 500 列限制而丢失,AzureDiagnostics 列创建的处理方式与其他表有所不同。
每个工作区中的 AzureDiagnostics 表同样至少包含 200 列。 对于 2021 年 1 月 19 日之前创建的工作区,该表还包含在此日期之前已经存在的任何列。 当数据被发送到尚未就绪的列时:
- 如果当前工作区中 AzureDiagnostics 的列总数不超过 500,则会像创建其他表一样创建新列。
- 如果列的总数达到或超过 500,则多余的数据将作为属性添加到名为 AdditionalFields 的动态属性包列中。
示例
为了说明这种行为,假设截至(部署日期),工作区中的 AzureDiagnostics 表如下所示:
列 1 | 列 2 | 列 3 | ... | 列 498 |
---|---|---|---|---|
abc | def | 123 | ... | 456 |
... | ... | ... | ... | ... |
向 AzureDiagnostics 发送数据的资源会在其数据中添加一个新维度,并将其称为 NewInfo1。 由于表中的列数仍少于 500 列,因此当包含新维度数据的事件首次发生时,就会在表中添加新的列:
列 1 | 列 2 | 列 3 | ... | 列 498 | NewInfo1_s |
---|---|---|---|---|---|
abc | def | 123 | ... | 456 | xyz |
... | ... | ... | ... | ... | ... |
可以通过简单的查询来返回这些新数据:
AzureDiagnostics | where NewInfo1_s == "xyz"
稍后,另一个资源会向 AzureDiagnostics 发送数据,添加名为 NewInfo2 和 NewInfo3 的新维度。 由于在此工作区中,表格的列数已达到 500 列,因此新数据将进入 AdditionalFields 列:
列 1 | 列 2 | 列 3 | ... | 列 498 | NewInfo1_s | AdditionalFields |
---|---|---|---|---|---|---|
abc | def | 123 | ... | 456 | xyz | {"NewInfo2":"789","NewInfo3":"qwerty"} |
... | ... | ... | ... | ... | ... | ... |
仍然可以查询这些数据,但必须使用 KQL 中的任何动态属性操作符从属性包中提取它们:
AzureDiagnostics
| where AdditionalFields.NewInfo2 == "789" and AdditionalFields.NewInfo3 == "qwerty"
有关使用 AdditionalFields
列的提示
虽然应遵循一般的查询最佳做法,如始终将时间作为查询中的第一个子句进行筛选,但在使用 AdditionalFields 时还应考虑一些其他建议:
- 在对数据执行进一步操作之前,必须对其进行强制转换。 例如,如果存在一个名为 Perf1Sec_i 的列以及 AdditionalFields 中名为 Perf2Sec 的属性,并且想通过将这两个值相加来计算总性能,请使用类似的方法:
AzureDiagnostics | extend TotalPerfSec = Perf1Sec_i + toint(AdditionalFields.Perf2Sec) | ....
- 在编写任何复杂的逻辑之前,使用 where 子句尽可能减少数据量,以显著提高性能。 TimeGenerated 是一个应始终缩小到尽可能小的窗口的列。 在 AzureDiagnostics 的情况下,还应在查询顶部使用 ResourceType 列围绕正在查询的资源类型添加额外的筛选器。
- 在查询大量数据时,有时对 AdditionalFields 整体进行筛选会比解析更为有效。 例如,对于大量数据,
AzureDiagnostics | where AdditionalFields has "Perf2Sec"
通常比AzureDiagnostics | where isnotnull(toint(AdditionalFields.Perf2Sec))
更有效。
Azure 诊断模式
以下服务的资源日志使用 Azure 诊断模式,并会将数据发送到 Azure 诊断表。
- Analysis Services
- 应用程序网关
- 自动化帐户
- Azure Database for MariaDB 服务器
- Azure Database for MySQL 服务器
- Azure Database for PostgreSQL 服务器
- Azure Database for PostgreSQL 服务器 v2
- 批处理帐户
- CDN 配置文件
- 认知服务
- 数据湖分析
- DataLake Storage Gen1
- 设备预配服务
- 数字孪生
- 事件网格主题
- 事件中心
- ExpressRoute 线路
- Front Door
- 集成帐户
- 密钥保管库
- Kubernetes 服务
- 负载均衡器
- 逻辑应用程序
- 媒体服务
- 网络接口
- 网络安全组
- P2S VPN 网关
- Power BI Embedded
- 公共 IP 地址
- 恢复服务保管库 (Site Recovery)
- 搜索服务
- 服务总线
- SQL 数据库
- SQL 托管实例
- SQL Server
- 流分析作业
- 流量管理器配置文件
- 虚拟网络
- 虚拟网络网关
- VPN 网关
Azure 诊断模式或特定资源模式
以下服务的资源日志使用 Azure 诊断模式或特定于资源的模式,具体取决于其配置。 在使用特定资源模式时,它们不会向 AzureDiagnostics 表发送数据。 有关此配置的详细信息,请参阅 Azure 资源日志。
- API 管理服务
- Azure Cosmos DB
- 数据工厂(V2)
- IoT 中心
- 恢复服务保管库(备份)
- 防火墙
类别
- Azure 资源
- 安全性
- 网络
解决方案
- LogManagement
资源类型
- 应用程序网关
- CDN 配置文件
- Azure Cosmos DB
- 事件网格主题
- 事件中心
- 防火墙
- 密钥保管库
- Kubernetes 服务
- 恢复服务保管库
- 服务总线
- Azure Database for MySQL 灵活服务器
- Azure Database for PostgreSQL 灵活服务器
- 媒体服务
- Analysis Services
- Batch 帐户
- 认知服务
- 事件网格合作伙伴命名空间
- 事件网格合作伙伴主题
- 事件网格系统主题
- 已启用 Azure Arc 的 Kubernetes
- Azure Arc 预配群集
- IoT 中心
- 逻辑应用程序
- API 管理服务
- 自动化帐户
- 数据工厂
- Data Lake Storage Gen1
- 数据湖分析
- Power BI Embedded
- SQL 托管实例
- SQL Server
- SQL 数据库
- Azure Database for MySQL 服务器
- Azure Database for PostgreSQL 服务器
- Azure Database for PostgreSQL 服务器 V2
- Azure Database for MariaDB 服务器
- 设备预配服务
- ExpressRoute 线路
- Front Door
- 网络接口
- 网络安全组
- 公共 IP 地址
- 流量管理器配置文件
- 虚拟网络网关
- 虚拟专用网络网关
- 虚拟网络
- 搜索服务
- 流分析作业
列
列 | 类型 | 描述 |
---|---|---|
action_id_s | 字符串 | |
action_name_s | 字符串 | |
action_s | 字符串 | |
ActivityId_g | Guid | |
AdditionalFields | ||
AdHocOrScheduledJob_s | 字符串 | |
application_name_s | 字符串 | |
audit_schema_version_d | 双精度 | |
avg_cpu_percent_s | 字符串 | |
avg_mean_time_s | 字符串 | |
backendHostname_s | 字符串 | |
Caller_s | 字符串 | |
callerId_s | 字符串 | |
CallerIPAddress | 字符串 | |
calls_s | 字符串 | |
Category | 字符串 | |
client_ip_s | 字符串 | |
clientInfo_s | 字符串 | |
clientIP_s | 字符串 | |
clientIp_s | 字符串 | |
clientIpAddress_s | 字符串 | |
clientPort_d | 双精度 | |
code_s | 字符串 | |
collectionName_s | 字符串 | |
conditions_destinationIP_s | 字符串 | |
conditions_destinationPortRange_s | 字符串 | |
conditions_None_s | 字符串 | |
conditions_protocols_s | 字符串 | |
conditions_sourceIP_s | 字符串 | |
conditions_sourcePortRange_s | 字符串 | |
CorrelationId | 字符串 | |
count_executions_d | 双精度 | |
cpu_time_d | 双精度 | |
database_name_s | 字符串 | |
database_principal_name_s | 字符串 | |
DatabaseName_s | 字符串 | |
db_id_s | 字符串 | |
direction_s | 字符串 | |
dop_d | 双精度 | |
duration_d | 双精度 | |
duration_milliseconds_d | 双精度 | |
DurationMs | Bigint | |
ElasticPoolName_s | 字符串 | |
endTime_t | DateTime | |
Environment_s | 字符串 | |
error_code_s | 字符串 | |
error_message_s | 字符串 | |
errorLevel_s | 字符串 | |
event_class_s | 字符串 | |
event_s | 字符串 | |
event_subclass_s | 字符串 | |
event_time_t | DateTime | |
EventName_s | 字符串 | |
execution_type_d | 双精度 | |
executionInfo_endTime_t | DateTime | |
executionInfo_exitCode_d | 双精度 | |
executionInfo_startTime_t | DateTime | |
host_s | 字符串 | |
httpMethod_s | 字符串 | |
httpStatus_d | 双精度 | |
httpStatusCode_d | 双精度 | |
httpStatusCode_s | 字符串 | |
httpVersion_s | 字符串 | |
id_s | 字符串 | |
identity_claim_appid_g | Guid | |
identity_claim_ipaddr_s | 字符串 | |
instanceId_s | 字符串 | |
interval_end_time_d | 双精度 | |
interval_start_time_d | 双精度 | |
ip_s | 字符串 | |
is_column_permission_s | 字符串 | |
isAccessPolicyMatch_b | Bool | |
JobDurationInSecs_s | 字符串 | |
JobFailureCode_s | 字符串 | |
JobId_g | Guid | |
jobId_s | 字符串 | |
JobOperation_s | 字符串 | |
JobOperationSubType_s | 字符串 | |
JobStartDateTime_s | 字符串 | |
JobStatus_s | 字符串 | |
JobUniqueId_g | Guid | |
级别 | 字符串 | |
log_bytes_used_d | 双精度 | |
logical_io_reads_d | 双精度 | |
logical_io_writes_d | 双精度 | |
LogicalServerName_s | 字符串 | |
macAddress_s | 字符串 | |
matchedConnections_d | 双精度 | |
max_cpu_time_d | 双精度 | |
max_dop_d | 双精度 | |
max_duration_d | 双精度 | |
max_log_bytes_used_d | 双精度 | |
max_logical_io_reads_d | 双精度 | |
max_logical_io_writes_d | 双精度 | |
max_num_physical_io_reads_d | 双精度 | |
max_physical_io_reads_d | 双精度 | |
max_query_max_used_memory_d | 双精度 | |
max_rowcount_d | 双精度 | |
max_time_s | 字符串 | |
mean_time_s | 字符串 | |
Message | 字符串 | |
min_time_s | 字符串 | |
msg_s | 字符串 | |
num_physical_io_reads_d | 双精度 | |
object_id_d | 双精度 | |
object_name_s | 字符串 | |
OperationName | 字符串 | |
OperationVersion | 字符串 | |
partitionKey_s | 字符串 | |
physical_io_reads_d | 双精度 | |
plan_id_d | 双精度 | |
policy_s | 字符串 | |
policyMode_s | 字符串 | |
primaryIPv4Address_s | 字符串 | |
priority_d | 双精度 | |
properties_enabledForDeployment_b | Bool | |
properties_enabledForDiskEncryption_b | Bool | |
properties_enabledForTemplateDeployment_b | Bool | |
properties_s | 字符串 | |
properties_sku_Family_s | 字符串 | |
properties_sku_Name_s | 字符串 | |
properties_tenantId_g | Guid | |
query_hash_s | 字符串 | |
query_id_d | 双精度 | |
query_max_used_memory_d | 双精度 | |
query_plan_hash_s | 字符串 | |
query_time_d | 双精度 | |
querytext_s | 字符串 | |
receivedBytes_d | 双精度 | |
Region_s | 字符串 | |
requestCharge_s | 字符串 | |
requestQuery_s | 字符串 | |
requestResourceId_s | 字符串 | |
requestResourceType_s | 字符串 | |
requestUri_s | 字符串 | |
reserved_storage_mb_s | 字符串 | |
资源 | 字符串 | |
resource_actionName_s | 字符串 | |
resource_location_s | 字符串 | |
resource_originRunId_s | 字符串 | |
resource_resourceGroupName_s | 字符串 | |
resource_runId_s | 字符串 | |
resource_subscriptionId_g | Guid | |
resource_triggerName_s | 字符串 | |
resource_workflowId_g | Guid | |
resource_workflowName_s | 字符串 | |
ResourceGroup | 字符串 | |
_ResourceId | 字符串 | 与记录关联的资源的唯一标识符 |
ResourceProvider | 字符串 | |
ResourceProvider | 字符串 | |
ResourceType | 字符串 | |
ResourceType | 字符串 | |
response_rows_d | 双精度 | |
resultCode_s | 字符串 | |
ResultDescription | 字符串 | |
ResultDescription | 字符串 | |
resultDescription_ChildJobs_s | 字符串 | |
resultDescription_ErrorJobs_s | 字符串 | |
resultMessage_s | 字符串 | |
ResultSignature | 字符串 | |
ResultType | 字符串 | |
ResultType | 字符串 | |
rootCauseAnalysis_s | 字符串 | |
routingRuleName_s | 字符串 | |
rowcount_d | 双精度 | |
ruleName_s | 字符串 | |
RunbookName_s | 字符串 | |
RunOn_s | 字符串 | |
schema_name_s | 字符串 | |
sentBytes_d | 双精度 | |
sequence_group_id_g | Guid | |
sequence_number_d | 双精度 | |
server_principal_sid_s | 字符串 | |
session_id_d | 双精度 |