Modo de transmissão
Nesta página
Visão geral
O Conector Spark é compatível com modo de streaming, que usa o Spark Structured Streaming para processar dados assim que estiverem disponíveis, em vez de aguardar que um intervalo de tempo passe. O Spark Structured Streaming é um mecanismo de processamento de fluxo de dados que você pode acessar usando a API Dataset ou DataFrame.
Importante
O Apache Spark contém dois mecanismos de processamento de fluxo diferentes:
Spark Streaming com DStreams, agora um mecanismo legado não suportado
Este guia se refere apenas ao Spark Structured Streaming.
As seções abaixo mostram como usar o Conector Spark para ler dados do MongoDB e gravar dados no MongoDB no modo de streaming:
Dica
Documentação do Apache Spark
Para saber mais sobre como usar o Spark para processar fluxos de dados, consulte o Guia de programação do Spark.