Was bedeutet Datenknoten?

DataNode ist ein Softwareknoten, der auf einem separaten Computer in einer HDFS-Instanz ausgeführt wird. Normalerweise enthält ein Hadoop-Cluster einen NameNode und eine große Anzahl von DataNodes ist normalerweise in Form von Racks organisiert, und alle Racks verbinden alle Systeme über einen Switch .

Die Betriebsumgebung dieses Artikels: Windows 10-System, NodeJS-Version 12.19.0, Dell G3-Computer.

Was bedeutet Datanode?

DataNode ist ein Softwareknoten, der auf einem separaten Computer innerhalb einer HDFS-Instanz ausgeführt wird. Normalerweise enthält ein Hadoop-Cluster einen NameNode und eine große Anzahl von DataNodes. DataNodes sind normalerweise in Form von Racks organisiert, und alle Racks verbinden alle Systeme über einen Switch.

DataNodes reagieren auf Lese- und Schreibanfragen von HDFS-Clients und reagieren auch auf Befehle zum Erstellen, Löschen und Kopieren von Blöcken vom NameNode. Der NameNode ist auf periodische Heartbeat-Nachrichten von jedem DataNode angewiesen. Jede Nachricht enthält einen Blockbericht, anhand dessen der NameNode Blockzuordnungen und andere Metadaten des Dateisystems überprüfen kann. Wenn der DataNode keine Heartbeat-Nachrichten senden kann, ergreift der NameNode Reparaturmaßnahmen. Replizieren Sie die fehlenden Blöcke auf diesem Knoten erneut.

Datenode bietet Speicherdienste für echte Dateidaten.

Dateiblock (Block): die grundlegendste Speichereinheit. Für den Dateiinhalt ist die Länge einer Datei die Größe, dann werden die Dateien ab dem Offset 0 der Datei in einer festen Größenreihenfolge unterteilt und nummeriert, und jede geteilte Datei wird als Block bezeichnet. Die Standard-BIock-Größe von HDFS beträgt 128 MB.

Anders als bei gewöhnlichen Dateisystemen belegt eine Datei in HDFS nicht den gesamten Datenspeicherplatz, wenn sie kleiner als die Größe eines Datenblocks ist.

Empfohlenes Lernen: „nodejs-Video-Tutorial“

Das obige ist der detaillierte Inhalt vonWas bedeutet Datenknoten?. Für weitere Informationen folgen Sie bitte anderen verwandten Artikeln auf der PHP chinesischen Website!