Was ist der Ausgleich in HDFS?
Was ist der Ausgleich in HDFS?

Video: Was ist der Ausgleich in HDFS?

Video: Was ist der Ausgleich in HDFS?
Video: Digitalität@Heidelberg: Vortrag Big Data Analytics - Dr. Thomas Keil 2024, Kann
Anonim

HDFS bietet ein Balancer-Dienstprogramm. Dieses Dienstprogramm analysiert die Blockplatzierung und gleicht Daten über die DataNodes hinweg aus. Es verschiebt Blöcke, bis der Cluster als ausgeglichen gilt, was bedeutet, dass die Auslastung jedes DataNodes einheitlich ist.

Auch gefragt, wie kann ich in HDFS neu ausbalancieren?

HDFS bietet eine „ Balancer ”-Dienstprogramm, um die Blöcke zwischen den DataNodes im Cluster auszugleichen.

?HDFS neu ausbalancieren

  1. Navigieren Sie in Ambari Web zu Dienste > HDFS > Zusammenfassung.
  2. Klicken Sie auf Dienstaktionen und dann auf HDFS neu ausgleichen.
  3. Geben Sie den Balance Threshold-Wert als Prozentsatz der Festplattenkapazität ein.
  4. Klicken Sie auf Starten.

Was ist außerdem Load-Balancing in Hadoop? EIN Belastung - Auswuchten Algorithmus für Hadoop Verteiltes Dateisystem. Dateien werden in Blöcke unterteilt und die replizierten Blöcke werden dann verteilt auf vielen DataNodes gespeichert.

Davon, was ist Balancer in Hadoop?

HDFS bietet ein Balancer Dienstprogramm, das die Blockplatzierung analysiert und Daten über die DataNodes ausgleicht. Es verteilt die Daten einheitlich auf alle Platten eines Datenknotens. Scheibe Balancer unterscheidet sich von Balancer , das die Platzierung von Datenblöcken analysiert und Daten über die Datenknoten hinweg ausgleicht.

Wie kündige ich meinen Hdfs-Balancer?

In der aktuellen Hadoop-Dokumentation heißt es "hadoop Balancer [-threshold]", um ein zu beginnen Balancer und zu halt das Balancer Drücken Sie Strg-C. Aber an einigen anderen Stellen (YDN und ältere Dokumentation der Hadoop-Version) rufen Sie "start- Balancer .sh", um es zu starten und " halt - Balancer .sch" zu halt es.

Empfohlen: