Ist Show eine Aktion in Spark?
Ist Show eine Aktion in Spark?

Video: Ist Show eine Aktion in Spark?

Video: Ist Show eine Aktion in Spark?
Video: Actions in Spark | Collect vs Show vs Take vs foreach | Spark Interview Questions 2024, Kann
Anonim

2 Antworten. zeigen ist in der Tat ein Handlung , aber es ist intelligent genug, um zu wissen, wenn es nicht alles ausführen muss. Wenn Sie orderBy hätten, würde es auch sehr lange dauern, aber in diesem Fall sind alle Ihre Operationen Kartenoperationen und es besteht keine Notwendigkeit, die gesamte Endtabelle zu berechnen.

Ist das Zählen eine Aktion im Funken?

zählen () zu zählen die Anzahl der Reihen. Da es die DAG-Ausführung initiiert und die Daten an den Treiber zurückgibt, ist es an Handlung für RDD. Fall 2: Wenn Sie anrufen zählen on Dataframe initiiert es die DAG-Ausführung und gibt die Daten an den Treiber zurück Handlung für Datenrahmen.

In ähnlicher Weise, was ist Aktion und Transformation in Spark? Funke RDD-Operationen. Zwei Arten von Apache Funke RDD-Operationen sind- Transformationen und Aktionen . EIN Transformation ist eine Funktion, die aus den vorhandenen RDDs neue RDDs erzeugt, aber wenn wir zu diesem Zeitpunkt mit dem tatsächlichen Datensatz arbeiten möchten Handlung ist durchgeführt.

Was ist dementsprechend eine Aktion in Spark?

Aktionen die Operation von RDD ist, wird dieser Wert an die Spar-Treiberprogramme zurückgegeben, die einen Job zur Ausführung auf einem Cluster starten. Die Ausgabe der Transformation ist eine Eingabe von Aktionen . Reduce, Collect, TakeSample, Take, First, saveAsTextfile, saveAsSequenceFile, countByKey, foreach sind üblich Aktionen in Apache Funke.

Was macht collect () in Spark?

sammeln (Funktion) sammeln gibt die Elemente des Datensatzes als Array an das Treiberprogramm zurück. sammeln wird oft in zuvor bereitgestellten Beispielen verwendet, wie z Funke Transformationsbeispiele, um die Werte der Rückgabe anzuzeigen. Die REPL gibt zum Beispiel die Werte des Arrays zurück an die Konsole.

Empfohlen: