Emrfs nima?
Emrfs nima?

Video: Emrfs nima?

Video: Emrfs nima?
Video: AWS re:Invent 2022 - Migrating to Amazon EMR to reduce costs and simplify operations (ANT337) 2024, May
Anonim

EMR fayl tizimi ( EMRFS ) barcha Amazon EMR klasterlari oddiy fayllarni Amazon EMR-dan to'g'ridan-to'g'ri Amazon S3-ga o'qish va yozish uchun foydalanadigan HDFS dasturidir. Ma'lumotlarni shifrlash ob'ektlarni shifrlash imkonini beradi EMRFS Amazon S3 ga yozadi va yoqadi EMRFS Amazon S3 da shifrlangan ob'ektlar bilan ishlash.

Bu borada Emrfsning izchil qarashi nima?

The EMRFS izchil ko'rinishi a saqlash uchun Amazon DynamoDB jadvalida metama'lumotlarni yaratadi va foydalanadi izchil ko'rinish S3 ob'ektlaringizdan. Ushbu jadval ma'lum operatsiyalarni kuzatib boradi, lekin sizning ma'lumotlaringizni saqlamaydi.

s3 va s3a o'rtasidagi farq nima? Bu orasidagi farq uchtasi: s3 Amazon tepasida joylashgan blokga asoslangan qoplama S3 , holbuki s3n/ s3a emas. Bular ob'ektga asoslangan. s3n 5 Gb gacha bo'lgan ob'ektlarni qo'llab-quvvatlaydi, agar o'lcham muhim bo'lsa s3a 5 TB gacha bo'lgan ob'ektlarni qo'llab-quvvatlaydi va yuqori ishlashga ega.

Shunga ko'ra, EMR HDFSdan foydalanadimi?

EMR Fayl tizimi (EMRFS) Siz foydalanishi mumkin yoki HDFS yoki Amazon S3 klasteringizdagi fayl tizimi sifatida. Ko'pincha Amazon S3 hisoblanadi kirish va chiqish ma'lumotlarini saqlash uchun ishlatiladi va oraliq natijalar saqlanadi HDFS.

s3a nima?

S3A (URI sxemasi: s3a ) ning davomchisi S3 Native, s3n fs, the S3a : tizim Amazon kutubxonalaridan o'zaro aloqada bo'lish uchun foydalanadi S3 . Bu imkon beradi S3a katta hajmdagi fayllarni qo'llab-quvvatlash uchun (5 GB chegarasidan ko'p bo'lmagan), yuqori unumdorlikdagi operatsiyalar va boshqalar.

Tavsiya: