Skip to content

DenisoDias/spark-docker-execution-script

Folders and files

NameName
Last commit message
Last commit date

Latest commit

 

History

4 Commits
 
 
 
 
 
 
 
 

Repository files navigation

Projeto para executar um script em Spark

É necessário somente substituir o arquivo main.py

Para executar é necessário utilizar os seguintes comandos:

Esse comando deve ser executado no mesmo diretório do arquivo docker-compose.yml, ele fará o download das imagens utilizadas e colocará o ambiente no ar

docker-compose up

Executar o seguinte comando para executar o script dentro do container:

docker exec spark-docker-execution_spark_1 spark-submit /app/main.py

About

Um repositório com um código em Spark para executar via Docker

Resources

Stars

Watchers

Forks

Releases

No releases published

Packages

 
 
 

Contributors