Scribd Logo
Fazer o upload

Bem-vindo(a) ao Scribd!

  • 4.context e Session

    Enviado por

    klinsmann oliveira
    15 visualizações3 páginas
    SparkContext e SparkSession fornecem acesso ao cluster Spark. SparkContext permite executar operações no cluster e SparkSession oferece uma interface unificada para criar DataFrames, registros e executar consultas SQL.

    Descrição original:

    Título original

    4.Context e Session

    Direitos autorais

    © © All Rights Reserved

    Formatos disponíveis

    PDF, TXT ou leia online no Scribd

    Você considera este documento útil?

    Este conteúdo é inapropriado?

    Denunciar este documento
    SparkContext e SparkSession fornecem acesso ao cluster Spark. SparkContext permite executar operações no cluster e SparkSession oferece uma interface unificada para criar DataFrames, registros e executar consultas SQL.

    Direitos autorais:

    © All Rights Reserved
    Baixe no formato PDF, TXT ou leia online no Scribd
    Sinalizar o conteúdo como inadequado
    15 visualizações3 páginas

    4.context e Session

    Enviado por

    klinsmann oliveira
    SparkContext e SparkSession fornecem acesso ao cluster Spark. SparkContext permite executar operações no cluster e SparkSession oferece uma interface unificada para criar DataFrames, registros e executar consultas SQL.

    Direitos autorais:

    © All Rights Reserved
    Baixe no formato PDF, TXT ou leia online no Scribd
    Sinalizar o conteúdo como inadequado
    de 3

    SparkContext e SparkSession

    Prof. Fernando Amaral


    Conexão transparente
    com o Cluster
    SparkContext
    SparkSession: acesso
    ao SparkContext
    SparkContext / Session
    • Você pode rodar script Spark no shell (pyspark)
    • O Spark cria uma sessão automaticamente chamada spark

    • Se criar uma aplicação spark, você precisa criar, por exemplo:


    spark = (SparkSession
    .builder
    .appName(“Meuapp”)
    .getOrCreate())

    Você também pode gostar