TICS575 / Syllabus-2021-1

3 stars 4 forks source link

Problema con instalación Spark #7

Open ricerda opened 3 years ago

ricerda commented 3 years ago

Hola profe, He estado tratando de instalar Spark, pero al terminar la instalación e intentar abrir con spark-shell el terminal me tira un error con mi versión de Java (creo). La versión que tengo instalada es la 16.0.1 y leyendo en foros encontré que es necesario tener la versión 1,8 (es cierto?), bueno he estado instalando la versión 8 pero mi mac sigue reconociendo java como versión 16 y no logro abrir Spark. Ya escribí todo el código de PATH necesario que muestran en los tutoriales. El mensaje que me sale es el siguiente:

Captura de Pantalla 2021-06-30 a la(s) 16 55 18

Usted sabrá por que ocurre este error? Quedo atento gracias!

alanezz commented 3 years ago

Hola,

La verdad del error no se desprenden muchos datos. En general, cada vez que descargo la spark shell, la he utilizado desde la misma carpeta y nunca he tenido problemas. Pero yo de todas formas tenía java instalado desde antes (versión 1.8). En general yo manejo las versiones de java con homebrew en mac.

Homebrew es una forma de instalar herramientas en la terminal, se instala con una línea:

https://brew.sh/

Y luego para installar el jdk se hace así:

https://stackoverflow.com/questions/63309614/how-to-install-openjdk-with-brew

Java 11 debería andar bien para Spark. Lo importante es setear la variable "java home" en las variables de entorno, pero para esto tienes que conocer más o menos bien cómo manejarte con la terminal.

La otra opción es que te bajes IntelliJ y el plugin de Scala e intentes hacer lo que necesitas ahí. Igual, si no funciona nada rápido, me la jugaría por probar en Databricks no más.

Saludos!

ricerda commented 3 years ago

Si, parece que Databricks va a ser la opción. Gracias profe!