Мазмуну:

Hadoop кластеринин толук бөлүштүрүлгөн режимин орнотуу үчүн жаңыртылышы керек болгон маанилүү конфигурация файлдары кайсылар?
Hadoop кластеринин толук бөлүштүрүлгөн режимин орнотуу үчүн жаңыртылышы керек болгон маанилүү конфигурация файлдары кайсылар?

Video: Hadoop кластеринин толук бөлүштүрүлгөн режимин орнотуу үчүн жаңыртылышы керек болгон маанилүү конфигурация файлдары кайсылар?

Video: Hadoop кластеринин толук бөлүштүрүлгөн режимин орнотуу үчүн жаңыртылышы керек болгон маанилүү конфигурация файлдары кайсылар?
Video: Очень кратко про Hadoop и Spark 2024, Май
Anonim

Hadoopтун толук бөлүштүрүлгөн режимин орнотуу үчүн жаңыртылышы керек болгон конфигурация файлдары:

  • Hadoop-env.sh.
  • Негизги сайт. xml.
  • Hdfs сайты. xml.
  • Mapred-сайт. xml.
  • Устаттар.
  • Кулдар.

Мындан тышкары, Hadoopто кандай маанилүү конфигурация файлдары бар?

Hadoop конфигурациясы маанилүү конфигурация файлдарынын эки түрү менен шартталган:

  • Окуу үчүн гана демейки конфигурация - src/core/core-default. xml, src/hdfs/hdfs-демейки. xml жана src/mapred/mapred-default. xml.
  • Сайттын конфигурациясы - conf/core-site. xml, conf/hdfs-сайт. xml жана conf/mapred-сайт. xml.

Ошо сыяктуу эле, төмөндөгүлөрдүн кайсынысында HDFS демондору үчүн конфигурация бар? xml конфигурацияны камтыйт орнотуулары HDFS демондору (мисалы, NameNode, DataNode, Secondary NameNode). Ал ошондой эле репликация факторун жана блоктун өлчөмүн камтыйт HDFS.

Hadoop конфигурация файлдары деген эмне?

Конфигурация файлдары болуп саналат файлдар алынган чайырда жайгашкан. gz файл ж.б./ hadoop / каталог. Баары Hadoop ичиндеги конфигурация файлдары төмөндө келтирилген, 1) HADOOP -ENV.sh->>Бул колдонулган JDKга таасир этүүчү чөйрө өзгөрмөлөрүн көрсөтөт Hadoop Демон (бин/ hadoop ).

Кайсы файлдар Hadoopто кичинекей файл көйгөйлөрү менен алектенет?

1) HAR ( Hadoop Архив) Файлдар менен тааныштырылды кичинекей файл маселесин чечүү . HAR үстүнө катмар киргизди HDFS үчүн интерфейсти камсыз кылат файл жетүү. Колдонуу Hadoop архив буйругу, HAR файлдар түзүлөт, алар иштейт MapReduce пакеттөө жумушу файлдар ичинде архивделүүдө кичирээк саны HDFS файлдары.

Сунушталууда: