İçindekiler:

Spark'ın Linux'un kurulu olup olmadığını nasıl anlarım?
Spark'ın Linux'un kurulu olup olmadığını nasıl anlarım?

Video: Spark'ın Linux'un kurulu olup olmadığını nasıl anlarım?

Video: Spark'ın Linux'un kurulu olup olmadığını nasıl anlarım?
Video: PS4'ÜNÜ HIZLANDIRMAK İÇİN BUNU MUTLAKA YAPMALISIN ! 2024, Kasım
Anonim

2 Yanıt

  1. Açık Kıvılcım kabuk Terminali ve komutu girin.
  2. sc.versiyonu Veya kıvılcım -gönder --versiyon.
  3. En kolay yol, " kıvılcım -shell” komut satırında. 'i gösterecektir.
  4. şu anki aktif sürüm Kıvılcım .

Ayrıca bilmek, kıvılcım Ubuntu'nun kurulu olup olmadığını nasıl bilebilirim?

Spark'ı Ubuntu'ya Kurmak

  1. Spark'ın en son sürümünü buradan indirin.
  2. Arşivi paketinden çıkarın.
  3. Ortaya çıkan klasörü taşıyın ve Spark'ın birden çok sürümünün yüklü olması için sembolik bir bağlantı oluşturun.
  4. Spark kabuğunu test edin.
  5. Belki Scala senin fincan çayın değildir ve Python kullanmayı tercih edersin.

İkincisi, EMR'de kıvılcım nereye kurulur? itibariyle emir -4.0. 0, tüm uygulamalar açık EMR /usr/lib'dedir. Kıvılcım /usr/lib/ içinde kıvılcım.

Sonuç olarak, bir kıvılcım nasıl kurulur?

Spark'ı yükleme adımları

  1. Adım 1: Java'nın kurulu olduğundan emin olun.
  2. Adım 2: Scala'nın kurulu olduğundan emin olun.
  3. Adım 3: Scala'yı indirin.
  4. Adım 4: Scala'yı kurun.
  5. Adım 5: Apache Spark'ı İndirme.
  6. Adım 6: Spark'ı Yükleme.
  7. Adım 7: Spark uygulamasının sisteminize kurulduğunu doğrulayın.

Kıvılcım için Scala kurmam gerekir mi?

Olacaksın ihtiyaç uyumlu kullanmak Skala sürüm (2.10. x). Java için bir zorunluluktur Kıvılcım + diğer birçok geçişli bağımlılık ( ölçek derleyici sadece JVM için bir kütüphanedir). PySpark, Py4J (Python-Java birlikte çalışması) kullanarak JVM'ye uzaktan (soketle) bağlanır.

Önerilen: