İçindekiler:

Spark'ı yerel olarak çalıştırabilir miyim?
Spark'ı yerel olarak çalıştırabilir miyim?

Video: Spark'ı yerel olarak çalıştırabilir miyim?

Video: Spark'ı yerel olarak çalıştırabilir miyim?
Video: Windows'ta Spark Nasıl Kurulur 2024, Kasım
Anonim

Kıvılcım olabilir olmak Çalıştırmak içindeki yerleşik bağımsız küme zamanlayıcısını kullanarak yerel modu. Bunun anlamı, tüm Kıvılcım süreçler Çalıştırmak aynı JVM içinde etkin bir şekilde, tek, çok iş parçacıklı bir örnek Kıvılcım.

Bu bağlamda, Apache Spark'ı yerel olarak nasıl çalıştırırım?

Aşağıdaki adımlar Apache Spark'ın nasıl kurulacağını gösterir

  1. Adım 1: Java Kurulumunun Doğrulanması.
  2. Adım 2: Scala kurulumunu doğrulama.
  3. Adım 3: Scala'yı İndirme.
  4. Adım 4: Scala'yı Kurmak.
  5. Adım 5: Apache Spark'ı İndirme.
  6. Adım 6: Spark'ı Yükleme.
  7. Adım 7: Spark Kurulumunun Doğrulanması.

Ayrıca, kıvılcımı Hadoop olmadan çalıştırabilir miyiz? göre Kıvılcım dokümantasyon, Spark, Hadoop olmadan çalışabilir . Sen Mayıs çalıştır Bağımsız mod olarak olmadan herhangi bir kaynak yöneticisi. Ama eğer sen istemek Çalıştırmak çok düğümlü kurulumda, sen YARN veya Mesos gibi bir kaynak yöneticisine ve aşağıdaki gibi dağıtılmış bir dosya sistemine ihtiyacınız var HDFS , S3 vb. Evet, kıvılcım hadoop olmadan çalışabilir.

Yukarıda, kıvılcımı bağımsız modda nasıl çalıştırırım?

Yüklemek Kıvılcım Bağımsız modu , sadece derlenmiş bir sürümünü yerleştirirsiniz Kıvılcım kümedeki her düğümde. önceden oluşturulmuş sürümlerini edinebilirsiniz. Kıvılcım her sürümde veya kendiniz oluşturun.

Spark Windows'ta çalışabilir mi?

A Kıvılcım başvuru Yapabilmek olmak pencereler -shell betiği veya o Yapabilmek yazılı Java, Scala, Python veya R'de özel bir program olun. pencereler sisteminizde yüklü olan yürütülebilir dosyalar Çalıştırmak bu uygulamalar.

Önerilen: