Was ist Emrfs?
Was ist Emrfs?

Video: Was ist Emrfs?

Video: Was ist Emrfs?
Video: What is AWS EMR | Introduction to Amazon EMR | Intellipaat 2024, Kann
Anonim

Das EMR-Dateisystem ( EMRFS ) ist eine Implementierung von HDFS, die alle Amazon EMR-Cluster verwenden, um reguläre Dateien aus Amazon EMR direkt in Amazon S3 zu lesen und zu schreiben. Mit der Datenverschlüsselung können Sie Objekte verschlüsseln, die EMRFS schreibt in Amazon S3 und aktiviert EMRFS um mit verschlüsselten Objekten in Amazon S3 zu arbeiten.

Was ist diesbezüglich die konsistente Ansicht von Emrf?

Die EMRFS konsistente Ansicht erstellt und verwendet Metadaten in einer Amazon DynamoDB-Tabelle, um eine konsistente Ansicht Ihrer S3-Objekte. Diese Tabelle verfolgt bestimmte Vorgänge, enthält jedoch keine Ihrer Daten.

was ist der unterschied zwischen s3 und s3a? Dies ist das Unterschied zwischen die Drei: s3 ist ein blockbasiertes Overlay auf Amazon S3 , während s3n/ s3a sind nicht. Diese sind objektbasiert. s3n unterstützt Objekte bis zu 5 GB, wenn es auf die Größe ankommt, während s3a unterstützt Objekte bis zu 5 TB und hat eine höhere Leistung.

Verwendet EMR dementsprechend HDFS?

EMR Dateisystem (EMRFS) Sie Kann benutzen entweder HDFS oder Amazon S3 als Dateisystem in Ihrem Cluster. Am häufigsten Amazon S3 ist zum Speichern von Eingabe- und Ausgabedaten und Zwischenergebnissen werden gespeichert in HDFS.

Was ist s3a?

S3A (URI-Schema: s3a ) Ein Nachfolger des S3 Nativ, s3n fs, die S3a : System verwendet Amazons Bibliotheken, um mit zu interagieren S3 . Dies erlaubt S3a um größere Dateien (keine 5-GB-Begrenzung mehr), Operationen mit höherer Leistung und mehr zu unterstützen.

Empfohlen: