Chapter 2. Descarga de Apache Spark y Primeros Pasos

preview_player
Показать описание
Chapter 2. Downloading Apache Spark and Getting Started.

"En este capítulo, le ayudaremos a configurar Spark y le explicaremos tres sencillos pasos que puede seguir para comenzar a escribir su primera aplicación independiente.

Usaremos el modo local, donde todo el procesamiento se realiza en una sola máquina en un shell de Spark; esta es una manera fácil de aprender el framework, proporcionando un ciclo de retroalimentación rápido para realizar operaciones de Spark de manera iterativa. Con un shell de Spark, puede crear prototipos de operaciones de Spark con conjuntos de datos pequeños antes de escribir una aplicación Spark compleja, pero para conjuntos de datos grandes o trabajo real en el que desea obtener los beneficios de la ejecución distribuida, el modo local no es adecuado; querrá para usar los modos de implementación de YARN o Kubernetes en su lugar.

Si bien el shell Spark solo admite Scala, Python y R, puede escribir una aplicación Spark en cualquiera de los lenguajes admitidos (incluido Java) y emitir consultas en Spark SQL. Esperamos que se familiarice un poco con el lenguaje de su elección."
Рекомендации по теме