Mundarija:

Hadoop klasterining to'liq taqsimlangan rejimini o'rnatish uchun tahrirlanishi kerak bo'lgan muhim konfiguratsiya fayllari qanday?
Hadoop klasterining to'liq taqsimlangan rejimini o'rnatish uchun tahrirlanishi kerak bo'lgan muhim konfiguratsiya fayllari qanday?

Video: Hadoop klasterining to'liq taqsimlangan rejimini o'rnatish uchun tahrirlanishi kerak bo'lgan muhim konfiguratsiya fayllari qanday?

Video: Hadoop klasterining to'liq taqsimlangan rejimini o'rnatish uchun tahrirlanishi kerak bo'lgan muhim konfiguratsiya fayllari qanday?
Video: Hadoop Rack Awareness 2024, Noyabr
Anonim

Hadoop-ning to'liq taqsimlangan rejimini o'rnatish uchun yangilanishi kerak bo'lgan konfiguratsiya fayllari quyidagilardir:

  • Hadoop-env.sh.
  • Asosiy sayt. xml.
  • Hdfs sayti. xml.
  • Mapred-sayt. xml.
  • Magistrlar.
  • Qullar.

Bundan tashqari, Hadoop-da qanday muhim konfiguratsiya fayllari bor?

Hadoop konfiguratsiyasi ikki turdagi muhim konfiguratsiya fayllari tomonidan boshqariladi:

  • Faqat o'qish uchun standart konfiguratsiya - src/core/core-default. xml, src/hdfs/hdfs-standart. xml va src/mapred/mapred-default. xml.
  • Saytga xos konfiguratsiya - conf/core-site. xml, conf/hdfs-sayt. xml va conf/mapred-site. xml.

Xuddi shunday, quyidagilardan qaysi biri HDFS demonlari uchun konfiguratsiyani o'z ichiga oladi? xml konfiguratsiyani o'z ichiga oladi ning sozlamalari HDFS demonlari (masalan, NameNode, DataNode, Secondary NameNode). Shuningdek, u replikatsiya faktorini va blok hajmini o'z ichiga oladi HDFS.

Hadoop-da konfiguratsiya fayllari nima?

Konfiguratsiya fayllari ular fayllar olinadigan smolada joylashgan. gz fayl va boshqalarda/ hadoop / katalog. Hammasi Hadoop-da konfiguratsiya fayllari quyida keltirilgan, 1) HADOOP -ENV.sh->>U ishlatiladigan JDK ga ta'sir qiluvchi muhit o'zgaruvchilarini belgilaydi Hadoop Daemon (bin/ hadoop ).

Qaysi fayllar Hadoop-da kichik fayl muammolari bilan shug'ullanadi?

1) HAR ( Hadoop Arxiv) Fayllar bilan tanishtirildi kichik fayl muammosini hal qilish . HAR tepasida qatlamni joriy qildi HDFS uchun interfeysni ta'minlovchi fayl kirish. Foydalanish Hadoop arxiv buyrug'i, HAR fayllar yaratilgan, qaysi a ishlaydi MapReduce qadoqlash vazifasi fayllar ichiga arxivlanadi kichikroq soni HDFS fayllari.

Tavsiya: