通过

HDInsightSparkTaskEvents

  • 项目

Spark 任务事件。

表属性

Attribute 值
资源类型 microsoft.hdinsight/clusters
类别 Azure 资源
解决方案 LogManagement
基本日志 否
引入时转换 是
示例查询 -

列

列 类型​​ 说明
ApplicationId string 生成记录的应用程序的应用程序 ID。
AttemptId string 任务尝试的 ID。
_BilledSize real 记录大小（字节）
BytesRead long 任务期间读取的字节数。
BytesWritten long 任务写入的字节数。
ClusterDnsName string 运行任务的群集的 DNS 名称。
ClusterTenantId string 运行任务的群集的租户 ID。
DiskBytesSpilled long 溢出的磁盘字节数。
EndReason string 任务结束的原因。
ExecutorCPUTime long 任务执行程序消耗的 CPU 时间。
ExecutorDeserializeCPUTime long 任务执行程序用于反序列化的 CPU 时间。
ExecutorDeserializeTime long 任务执行程序用于反序列化的时间。
ExecutorId string ID 执行程序。
ExecutorRunTime long 运行任务执行程序所用的时间。
已失败 布尔 描述任务是否失败的布尔值。
FinishTime datetime 任务完成的时间 (UTC)。
主机 string 运行任务的主机的 FQDN。
InputMetrics long 与任务输入关联的指标。
IpAddress string 运行任务的节点的 IP 地址。
_IsBillable string 指定引入数据是否计费。 当 _IsBillable 为 false 时，不会向 Azure 帐户计收引入费
JvmGcTime long JVM 垃圾回收所用的时间。
已终止 布尔 描述任务是否已终止的布尔值。
LaunchTime datetime 启动任务的时间 (UTC)。
MemoryBytesSpilled long 溢出的内存字节数。
NumUpdatedBlockStatuses long 任务期间更新的块状态数。
OutputMetrics long 与任务输出关联的指标。
PeakExecutionMemory long 执行期间使用的内存峰值量。
RecordsRead long 任务期间读取的记录数。
RecordsWritten long 任务写入的记录数。
区域 string 运行任务的群集的区域。
_ResourceId 字符串 与记录关联的资源的唯一标识符
ResultSerializationTime long 获取结果时所用的序列化时间。
ResultSize long 结果的大小。
角色 string 运行任务的节点的类型。
SchedulerDelay long 计划程序经历的延迟量。
ShuffleBytesWritten long 随机任务期间写入的字节数。
ShuffleFetchWaitTime long 等待提取所用的时间。
ShuffleLocalBlocksFetched long 随机任务期间提取的本地块数。
ShuffleReadMetrics long 与随机读取关联的指标。
ShuffleRecordsWritten long 随机任务期间写入的记录数。
ShuffleRemoteBlocksFetched long 随机任务期间提取的远程块数。
ShuffleTotalBlocksFetched long 随机任务期间提取的块数。
ShuffleTotalBytesRead long 随机任务期间读取的字节数。
ShuffleWriteMetrics long 与随机写入关联的指标。
ShuffleWriteTime long 在随机任务期间写入所用的时间。
SourceSystem string 收集事件的代理的类型。 例如，适用于 Windows 代理的 OpsManager、直接连接或 Operations Manager、适用于所有 Linux 代理的 Linux 或适用于 Azure 诊断的 Azure
StageId string 与任务关联的阶段的 ID。
_SubscriptionId 字符串 与记录关联的订阅的唯一标识符
TaskId string 任务的 ID。
TaskType string 任务类型。
TenantId string Log Analytics 工作区 ID
TimeGenerated datetime 生成日志的时间戳 (UTC)。
类型 字符串 表的名称
UpdatedBlocks long 更新的块数。
UserSubscriptionId string 运行任务的群集的订阅 ID。