Obsah:

Aké sú dôležité konfiguračné súbory, ktoré je potrebné aktualizovať, aby sa nastavil plne distribuovaný režim klastra Hadoop?
Aké sú dôležité konfiguračné súbory, ktoré je potrebné aktualizovať, aby sa nastavil plne distribuovaný režim klastra Hadoop?

Video: Aké sú dôležité konfiguračné súbory, ktoré je potrebné aktualizovať, aby sa nastavil plne distribuovaný režim klastra Hadoop?

Video: Aké sú dôležité konfiguračné súbory, ktoré je potrebné aktualizovať, aby sa nastavil plne distribuovaný režim klastra Hadoop?
Video: What is Config? Configuration File Management 2024, Smieť
Anonim

Konfiguračné súbory, ktoré je potrebné aktualizovať na nastavenie plne distribuovaného režimu Hadoop, sú:

  • Hadoop-env.sh.
  • Hlavná stránka. xml.
  • Hdfs-stránka. xml.
  • Maped-site. xml.
  • Masters.
  • Otroci.

Okrem toho, aké sú dôležité konfiguračné súbory v Hadoop?

Konfigurácia Hadoop je riadená dvoma typmi dôležitých konfiguračných súborov:

  • Predvolená konfigurácia iba na čítanie - src/core/core-default. xml, src/hdfs/hdfs-default. xml a src/mapred/mapred-default. xml.
  • Konfigurácia špecifická pre lokalitu – conf/core-site. xml, conf/hdfs-site. xml a conf/mapred-site. xml.

Podobne, ktoré z nasledujúcich obsahuje konfiguráciu pre démonov HDFS? xml obsahuje konfiguráciu nastavenia HDFS démoni (t. j. NameNode, DataNode, Secondary NameNode). Zahŕňa tiež faktor replikácie a veľkosť bloku HDFS.

čo sú konfiguračné súbory v Hadoop?

Konfiguračné súbory sú súbory ktoré sa nachádzajú vo vyťaženom dechte. gz súbor v atď/ hadoop / adresár. Všetky Konfiguračné súbory v Hadoop sú uvedené nižšie, 1) HADOOP -ENV.sh->>Špecifikuje premenné prostredia, ktoré ovplyvňujú JDK, ktoré používa Hadoop Démon (bin/ hadoop ).

Ktoré súbory riešia problémy s malými súbormi v Hadoop?

1) HAR ( Hadoop archív) Súbory bol predstavený riešiť problém s malým súborom . HAR zaviedol vrstvu na vrchu HDFS , ktoré poskytujú rozhranie pre súbor pristupovanie. Použitím Hadoop archívny príkaz, HAR súbory sú vytvorené, ktoré beží a MapReduce prácu zbaliť súbory archivuje sa do menšie počet HDFS súbory.

Odporúča: