Mundarija:

Spark Linux o'rnatilganligini qanday bilsam bo'ladi?
Spark Linux o'rnatilganligini qanday bilsam bo'ladi?

Video: Spark Linux o'rnatilganligini qanday bilsam bo'ladi?

Video: Spark Linux o'rnatilganligini qanday bilsam bo'ladi?
Video: Telefonni xonadan qarsak chalib oson topish👏 2024, Noyabr
Anonim

2 ta javob

  1. Ochiq Uchqun qobiq terminali va buyruqni kiriting.
  2. sc.versiya Yoki uchqun -submit --versiya.
  3. Eng oson yo'li - shunchaki ishga tushirish " uchqun -shell” buyruq satrida. ni ko'rsatadi.
  4. joriy faol versiyasi Uchqun .

Shuni ham bilish kerakki, Spark Ubuntu o'rnatilganligini qanday bilsam bo'ladi?

Spark-ni Ubuntu-ga o'rnatish

  1. Spark-ning so'nggi versiyasini bu yerdan yuklab oling.
  2. Arxivni o'rash.
  3. Olingan papkani ko'chiring va ramziy havola yarating, shunda siz Sparkning bir nechta versiyasini o'rnatishingiz mumkin.
  4. Spark qobig'ini sinab ko'ring.
  5. Ehtimol, Scala sizning piyola choyingiz emas va siz Python-dan foydalanishni afzal ko'rasiz.

Ikkinchidan, EMRda uchqun qayerda o'rnatiladi? Sifatida emr -4.0. 0, barcha ilovalar yoqilgan EMR /usr/lib ichida joylashgan. Uchqun /usr/lib/ da joylashgan uchqun.

Shunday qilib, qanday qilib uchqunni o'rnatasiz?

Sparkni o'rnatish bosqichlari

  1. 1-qadam: Java o'rnatilganligiga ishonch hosil qiling.
  2. 2-qadam: Scala o'rnatilganligiga ishonch hosil qiling.
  3. 3-qadam: Scala-ni yuklab oling.
  4. 4-qadam: Scala-ni o'rnating.
  5. 5-qadam: Apache Spark yuklab olish.
  6. 6-qadam: Spark-ni o'rnatish.
  7. 7-qadam: Spark ilovasi tizimingizda oʻrnatilganligini tekshiring.

Scala-ni uchqun uchun o'rnatishim kerakmi?

Siz.. qilasiz kerak mos keluvchidan foydalanish Skala versiyasi (2.10. x). Java uchun majburiydir Uchqun + boshqa ko'plab o'tish bog'liqliklari ( skala kompilyator faqat JVM uchun kutubxona). PySpark faqat Py4J (Python-Java o'zaro ishlashi) yordamida JVM ga masofadan (rozetka orqali) ulanadi.

Tavsiya: