通过

HDInsightSparkTaskEvents

Spark 任务事件。

表属性

Attribute 值
资源类型 microsoft.hdinsight/clusters
类别 Azure 资源
解决方案 LogManagement
基本日志 否
引入时转换 是
示例查询 -

列

列 类型 说明
ApplicationId 字符串 生成记录的应用程序的应用程序 ID。
AttemptId 字符串 任务尝试的 ID。
_BilledSize real 记录大小（字节）
BytesRead long 任务期间读取的字节数。
BytesWritten long 任务写入的字节数。
ClusterDnsName 字符串 运行任务的群集的 DNS 名称。
ClusterTenantId 字符串 运行任务的群集的租户 ID。
DiskBytesSpilled long 溢出的磁盘字节数。
EndReason 字符串 任务结束的原因。
ExecutorCPUTime long 任务执行程序消耗的 CPU 时间。
ExecutorDeserializeCPUTime long 任务执行程序用于反序列化的 CPU 时间。
ExecutorDeserializeTime long 任务执行程序用于反序列化的时间。
ExecutorId 字符串 ID 执行程序。
ExecutorRunTime long 运行任务执行程序所用的时间。
已失败 布尔 描述任务是否失败的布尔值。
FinishTime 日期/时间 任务完成的时间 (UTC)。
主机 字符串 运行任务的主机的 FQDN。
InputMetrics long 与任务输入关联的指标。
IpAddress 字符串 运行任务的节点的 IP 地址。
_IsBillable 字符串 指定引入数据是否计费。 当 _IsBillable 为 false 时，不会向 Azure 帐户计收引入费
JvmGcTime long JVM 垃圾回收所用的时间。
已终止 布尔 描述任务是否已终止的布尔值。
LaunchTime 日期/时间 启动任务的时间 (UTC)。
MemoryBytesSpilled long 溢出的内存字节数。
NumUpdatedBlockStatuses long 任务期间更新的块状态数。
OutputMetrics long 与任务输出关联的指标。
PeakExecutionMemory long 执行期间使用的内存峰值量。
RecordsRead long 任务期间读取的记录数。
RecordsWritten long 任务写入的记录数。
区域 字符串 运行任务的群集的区域。
_ResourceId 字符串 与记录关联的资源的唯一标识符
ResultSerializationTime long 获取结果时所用的序列化时间。
ResultSize long 结果的大小。
角色 字符串 运行任务的节点的类型。
SchedulerDelay long 计划程序经历的延迟量。
ShuffleBytesWritten long 随机任务期间写入的字节数。
ShuffleFetchWaitTime long 等待提取所用的时间。
ShuffleLocalBlocksFetched long 随机任务期间提取的本地块数。
ShuffleReadMetrics long 与随机读取关联的指标。
ShuffleRecordsWritten long 随机任务期间写入的记录数。
ShuffleRemoteBlocksFetched long 随机任务期间提取的远程块数。
ShuffleTotalBlocksFetched long 随机任务期间提取的块数。
ShuffleTotalBytesRead long 随机任务期间读取的字节数。
ShuffleWriteMetrics long 与随机写入关联的指标。
ShuffleWriteTime long 在随机任务期间写入所用的时间。
SourceSystem 字符串 收集事件的代理的类型。 例如，适用于 Windows 代理的 OpsManager、直接连接或 Operations Manager、适用于所有 Linux 代理的 Linux 或适用于 Azure 诊断的 Azure
StageId 字符串 与任务关联的阶段的 ID。
_SubscriptionId 字符串 与记录关联的订阅的唯一标识符
TaskId 字符串 任务的 ID。
TaskType 字符串 任务类型。
TenantId 字符串 Log Analytics 工作区 ID
TimeGenerated 日期/时间 生成日志的时间戳 (UTC)。
类型 字符串 表的名称
UpdatedBlocks long 更新的块数。
UserSubscriptionId 字符串 运行任务的群集的订阅 ID。
  • Last updated on