AWS Hadoop-ni qo'llab-quvvatlaydimi?
AWS Hadoop-ni qo'llab-quvvatlaydimi?

Video: AWS Hadoop-ni qo'llab-quvvatlaydimi?

Video: AWS Hadoop-ni qo'llab-quvvatlaydimi?
Video: hadoop yarn architecture 2024, Noyabr
Anonim

Apache™ Hadoop ® katta ma'lumotlar to'plamlarini samarali qayta ishlash uchun ishlatilishi mumkin bo'lgan ochiq kodli dasturiy ta'minot loyihasidir. Amazon EMR to'liq tuzilgan, elastik klasterlarni yaratish va boshqarishni osonlashtiradi Amazon EC2 ishlayotgan holatlar Hadoop va boshqa ilovalar Hadoop ekotizim.

Shunday qilib, AWS Hadoop-dan foydalanadimi?

Amazon Veb-xizmatlar foydalanadi ochiq manbali Apache Hadoop ma'lumotlarni ko'p talab qiladigan vazifalarni bajarish uchun katta hajmdagi hisoblash quvvatiga kirishni osonlashtiradigan taqsimlangan hisoblash texnologiyasi. Hadoop , Google MapReduce’ning ochiq manbali versiyasi allaqachon Yahoo va Facebook kabi kompaniyalar tomonidan qo‘llanila boshlandi.

Ikkinchidan, AWS EMR nima qiladi? Amazon Elastic MapReduce ( EMR ) hisoblanadi a Amazon Veb-xizmatlar ( AWS ) katta ma'lumotlarni qayta ishlash va tahlil qilish vositasi. Amazon EMR Hadoop virtual serverlar klasterida katta ma'lumotlarni qayta ishlaydi Amazon Elastik hisoblash buluti ( EC2 ) va Amazon Oddiy saqlash xizmati (S3).

Shu tarzda, Hadoop va AWS o'rtasidagi farq nima?

Hadoop bir nechta kompyuterlarda katta ma'lumotlar to'plamini qayta ishlashga yordam beradigan ramka. Unga Map/Reduce (parallel ishlov berish) va HDFS (tarqatilgan fayl tizimi) kiradi. AWS dastlab ParAccel tomonidan ishlab chiqilgan xususiy texnologiya ustiga qurilgan ma'lumotlar ombori. Apache uchun qanday umumiy foydalanish bor Hadoop ?

AWS s3 Hadoopmi?

S3 aslida bulutda cheksiz saqlash, lekin HDFS emas. HDFS jismoniy mashinalarda joylashgan, shuning uchun u yerda istalgan dasturni bajarishingiz mumkin. Siz hech narsani bajara olmaysiz S3 chunki FS emas, balki faqat Ob'ektlar do'koni.

Tavsiya: