Cuprins:

Cum știu dacă spark este instalat Linux?
Cum știu dacă spark este instalat Linux?

Video: Cum știu dacă spark este instalat Linux?

Video: Cum știu dacă spark este instalat Linux?
Video: Apache Spark - Install Apache Spark On Ubuntu |Spark Tutorial | Part 6 2024, Mai
Anonim

2 Răspunsuri

  1. Deschis Scânteie shell Terminal și introduceți comanda.
  2. sc.versiune Or scânteie -trimite --versiune.
  3. Cel mai simplu mod este să lansați „ scânteie -shell” în linia de comandă. Acesta va afișa.
  4. versiunea activă curentă a Scânteie .

De asemenea, trebuie să știu cum știu dacă spark este instalat Ubuntu?

Instalarea Spark pe Ubuntu

  1. Descărcați cea mai recentă versiune a Spark aici.
  2. Despachetați arhiva.
  3. Mutați folderul rezultat și creați o legătură simbolică, astfel încât să aveți mai multe versiuni de Spark instalate.
  4. Testați carcasa Spark.
  5. Poate că Scala nu este ceașca ta de ceai și ai prefera să folosești Python.

În al doilea rând, unde este instalată scânteia pe EMR? Începând cu emr -4,0. 0, toate aplicațiile sunt activate EMR sunt în /usr/lib. Scânteie este în /usr/lib/ scânteie.

În consecință, cum instalezi o scânteie?

Pași pentru a instala Spark

  1. Pasul 1: Asigurați-vă că Java este instalat.
  2. Pasul 2: Asigurați-vă că Scala este instalat.
  3. Pasul 3: Descărcați Scala.
  4. Pasul 4: Instalați Scala.
  5. Pasul 5: Descărcarea Apache Spark.
  6. Pasul 6: Instalarea Spark.
  7. Pasul 7: Verificați instalarea aplicației Spark pe sistemul dvs.

Trebuie să instalez Scala pentru spark?

Tu vei nevoie pentru a utiliza un compatibil Scala versiunea (2.10. x). Java este o necesitate pentru Scânteie + multe alte dependențe tranzitive ( scala compilatorul este doar o bibliotecă pentru JVM). PySpark se conectează doar de la distanță (prin socket) la JVM folosind Py4J (interoperare Python-Java).

Recomandat: