İçindekiler:

Oozie'de bir kovan işini nasıl planlayabilirim?
Oozie'de bir kovan işini nasıl planlayabilirim?

Video: Oozie'de bir kovan işini nasıl planlayabilirim?

Video: Oozie'de bir kovan işini nasıl planlayabilirim?
Video: Çakal & Fatma Turgut - Kalbe Zarar (Official Music Video) 2024, Kasım
Anonim

NS Hive işini programla kullanarak Oozie , yazmanız gerekiyor kovan -eylem.

hql) içinde.

  1. Aşağıdaki komutu çalıştırarak HDFS'de bir dizin oluşturun.
  2. hadoop fs -mkdir -p /kullanıcı/ oozie /iş akışları/
  3. İş akışı koyun. xml, kovan komut dosyası (create_table.hql) ve kovan -alan. 2. adımda oluşturulan dizine xml ekleyin. Aşağıdaki komutu kullanabilirsiniz.

Öyleyse, Hive betiğini oozie'de nasıl çalıştırırım?

Oozie ile Hive İşleri Çalıştırın

  1. Kovan sitesini belirtin. iş-xml parametresinde xml.
  2. Komut dosyası parametresinde Hive sorgusunu içeren komut dosyasının adını (örneğin, komut dosyası. q) belirtin.
  3. İsteğe bağlı olarak, Oozie başlatıcı işi tarafından kullanılan özellikleri ekleyin. Oozie önekini ekleyin. özellik adlarına başlatıcı.

Ayrıca, oozie iş akışını nasıl çalıştırırım? Oozie İş Akışını Komut Satırından Çalıştırma

  1. Web Konsoluna giriş yapın.
  2. Oozie örneklerini web konsolundaki ana dizininize kopyalayın: cp /usr/hdp/current/oozie-client/doc/oozie-examples. katran. gz.
  3. Dosyaları tar tar -zxvf oozie-examples.tar.gz'den çıkarın.
  4. Örnekler dizinini HDFS hadoop fs -copyFromLocal örneklerine kopyalayın.

Bu bağlamda, bir Hadoop işini nasıl planlayabilirim?

Nasıl işleri zamanlamak içinde hadoop - Quora. En basit yol, kodunuzu bir kabuk komut dosyasına sarmak ve Takvim bir cron olarak Görev kenar düğümünde (genellikle Meslekler ). Ancak genellikle kodu bir komut dosyasında paketler ve bir komut dosyası olarak çalıştırır. Görev hata ayıklamak zordur. test edin ve bakımını yapın.

oozie iş akışı nedir?

Oozie bir iş akışı Apache Hadoop işlerini yönetmek için zamanlayıcı sistemi. Oozie İş Akışı işler, eylemlerin Yönlendirilmiş Döngüsel Grafikleridir (DAG'ler). Oozie Koordinatörlük işleri tekrarlanır Oozie İş Akışı zaman (sıklık) ve veri kullanılabilirliği tarafından tetiklenen işler. Oozie ölçeklenebilir, güvenilir ve genişletilebilir bir sistemdir.

Önerilen: