HDInsightSparkTaskEvents

Spark Task-Ereignisse.

Tabellenattribute

Attribut Wert
Ressourcentypen microsoft.hdinsight/clusters
Kategorien Azure-Ressourcen
Lösungen Protokollverwaltung
Einfache Tabellenunterstützung Nein
Hilfs-/Seetischunterstützung Nein
Unterstützung der DCR-Arbeitsbereichtransformation Ja
Unterstützung der Aufnahme-API Nein
Beispielabfragen -

Spalten

Säule Typ Beschreibung
ApplicationId Schnur Die Anwendungs-ID der Anwendung, die den Datensatz erzeugt.
AttemptId Schnur ID des Aufgabenversuchs
_BilledSize real Die Datensatzgröße in Bytes.
BytesRead long Die Anzahl bytes, die während des Vorgangs gelesen werden.
BytesWritten long Die Anzahl der Byte, die vom Vorgang geschrieben wurden.
ClusterDnsName Schnur Der DNS-Name des Clusters, der die Aufgabe ausführt.
ClusterTenantId Schnur Die Mandanten-ID des Clusters, der die Aufgabe ausführt.
DiskBytesSpilled long Die Anzahl der ausgelagerten Datenträgerbytes
EndReason Schnur Grund, warum die Aufgabe beendet wurde.
ExecutorCPUTime long Die vom Aufgabenausführer verbrauchte CPU-Zeit.
ExecutorDeserializeCPUTime long Die CPU-Zeit, die der Task-Executor für die Deserialisierung aufgewendet hat.
ExecutorDeserializeTime long Die Zeit, die der Task-Executor für die Deserialisierung verwendet hat
ExecutorId Schnur ID des Executors
Ausführungszeit des Executors long Der Ausführungszeitpunkt des Taskausführungsmoduls
Fehlgeschlagen Boolesch Boolescher Wert, der beschreibt, ob der Vorgang fehlgeschlagen ist.
Endzeit Datum/Uhrzeit Die Zeit (UTC), wann der Vorgang abgeschlossen wurde.
Gastgeber Schnur Der FQDN des Hosts, der die Aufgabe ausführt.
InputMetrics long Die Metriken, die der Aufgabeneingabe zugeordnet sind.
IP-Adresse Schnur Die IP-Adresse des Knotens, der die Aufgabe ausführt.
_IstAbrechnungsfähig Schnur Gibt an, ob die Erfassung der Daten gebührenpflichtig ist. Wenn _IsBillable auf false festgelegt ist, wird die Datenerfassung Ihrem Azure-Konto nicht in Rechnung gestellt.
JvmGcTime long Zeit, die die JVM für die Garbage Collection aufgewendet hat
Getötet Boolesch Boolescher Wert, der beschreibt, ob die Task beendet wurde
Startzeit Datum/Uhrzeit Die Zeit (UTC), zu der die Aufgabe gestartet wurde.
MemoryBytesSpilled long Die übergelaufenen Speicherbytes
NumUpdatedBlockStatuses long Die Anzahl der aktualisierten Blockstatus während der Task
OutputMetrics long Die Metriken, die der Aufgabenausgabe zugeordnet sind.
PeakExecutionMemory long Die Maximale Speichermenge, die während der Ausführung verwendet wird.
RecordsRead long Die Anzahl der Datensätze, die während des Vorgangs gelesen werden.
RecordsWritten long Die Anzahl der Datensätze, die von der Task geschrieben wurden
Region Schnur Der Bereich des Clusters, in dem die Aufgabe ausgeführt wird.
_ResourceId Schnur Ein eindeutiger Bezeichner für die Ressource, der der Datensatz zugeordnet ist.
ResultSerializationTime long Die Serialisierungszeit, die beim Abrufen des Ergebnisses aufgewendet wurde.
Ergebnisgröße long Größe des Ergebnisses
Rolle Schnur Der Typ des Knotens, der die Aufgabe ausführt.
SchedulerDelay long Der Umfang der Verzögerung, die der Zeitplaner erlebt hat.
ShuffleBytesWritten long Die Während des Shuffle-Vorgangs geschriebenen Bytes.
ShuffleFetchWaitTime long Die Zeit, die für das Warten auf den Abruf aufgewendet wird
ShuffleLocalBlocksFetched long Die Anzahl der lokalen Blöcke, die während der Shuffle-Aufgabe abgerufen wurden.
ShuffleReadMetrics long Die Metriken, die mit „Shuffle“-Lesevorgängen verknüpft sind
ShuffleRecordsWritten long Die Anzahl der Datensätze, die während der Shuffle-Task geschrieben wurden
ShuffleRemoteBlocksFetched long Die Anzahl der Remoteblöcke, die während der Shuffle-Task abgerufen wurden.
ShuffleTotalBlocksFetched long Anzahl der Blöcke, die während der Shuffle-Aufgabe abgerufen wurden
ShuffleTotalBytesRead long Die Anzahl bytes, die während des Shuffle-Vorgangs gelesen werden.
ShuffleWriteMetrics long Die Metriken, die mit Shuffle-Schreibvorgängen verknüpft sind
ShuffleWriteTime long Zeit für Schreibvorgänge während der Shuffle-Aufgabe
SourceSystem Schnur Typ des Agents, von dem das Ereignis gesammelt wurde. Beispiel: OpsManager für den Windows-Agent (direkte Verbindung oder Operations Manager), Linux für alle Linux-Agents oder Azure für die Azure-Diagnose
StageId Schnur Die ID der Stufe, die der Aufgabe zugeordnet ist.
_Abonnement-ID Schnur Eindeutiger Bezeichner für das Abonnement, dem der Datensatz zugeordnet ist
Aufgaben-ID Schnur Die ID des Tasks.
Aufgabentyp Schnur Der Aufgabentyp.
Mieter-ID Schnur Die ID des Log Analytics-Arbeitsbereichs.
TimeGenerated Datum/Uhrzeit Der Zeitstempel (UTC), wann das Protokoll generiert wurde.
Typ Schnur Der Name der Tabelle.
Aktualisierte Blöcke long Die Anzahl der aktualisierten Blöcke.
Benutzer-Abonnement-ID Schnur Die Abonnement-ID des Clusters, der die Aufgabe ausführt
  • Last updated on