13- Atividade Objetiva 03 - Processamento Paralelo e Distribuído de Dados (2021)

Prévia do material em texto

Pontuação desta tentativa: 10 de 10
Enviado 5 set em 20:12
Esta tentativa levou 2 minutos.
2 / 2 ptsPergunta 1
São componentes e suas respectivas funções no YARN.
Selecione a afirmação incorreta:
 
Node Manager: flexível e eficiente (executa qualquer tipo de
computação: não somente map e reduce);
 
 
MAP REDUCE 2: novo componente na plataforma que impediu que
aplicações em map reduce da versão 1 executassem na versão 2;
 
 
Resource Manager – Faz gestão dos recursos no cluster Hadoop
(máquinas, memória, CPU e etc);
 
 
Application Manager – recebe os recursos da resource manager e os
gerencia no contexto da aplicação;
 
Letra: b
Justificativa O Map Reduce 2 é interopera com a versão 1 sem
nenhum tipo de problema.
2 / 2 ptsPergunta 2
Considerando o Spark como uma plataforma para processamento
paralelo e distribuída.
São características do Spark , exceto:
 
Ambiente único para execução de vários tipos de processamentos:
Batch, interativos e streamings;
 
 
Possuem uma abstração de dados fixa e similar com a estrutura de um
documento;
 
 Possui componentes como: aprendizado de máquina e grafos;; 
 
Pode executar integrado com Hadoop utilizando o YARN, por exemplo; 
Letra b:
Justificativa: a abstração de dados do Spark são os RDD´s e os
mesmos não são rígidos;
2 / 2 ptsPergunta 3
Comparando as propostas de processamento do Spark ao
processamento Map Reduce.
É correto afirmar que o Spark realiza, exceto:
 
Tratar todos os fluxos de processamento como grafos direcionados
acíclicos;
 
 
Carrega dados em memória para evitar reprocessamento e acesso a
discos;
 
 Utiliza os RDD´s para compartilhar dados; 
 
Utiliza controle de processamento no Drive program para transações
em múltiplas máquinas;
 
Letra: d
Justificativa: De acordo com o Notas de aula :
De forma geral:
● Não existe de transações no Spark
2 / 2 ptsPergunta 4
Considerando os RDD´s e o Spark.
É correto afirmar que:
 
RDD´s são lista de elementos com controle centralizado pelo name
node;
 
 
RDD´s são estrutura chaves valor que executam apenas MAP
REDUCE em memória;
 
 Coleção imutável e distribuída de elementos ; 
 
RDD´s possuem partições e estas não são controladas pela aplicação,
apenas o name node pode alterar o número de partições;
 
Letra: c
Justificativa: De acordo com o Notas de aula :
De forma geral:
a – O controle dos RDD´s não é feito pelo name node
b – Não são apenas estruturas chave valor, podem ser. Não
executam apenas Map Reduce.
● d – As partições podem ser controladas pela aplicação
2 / 2 ptsPergunta 5
Foram motivadores para o desenvolvimento do YARN.
Selecione quais afirmações estão corretas, exceto:
 Escalabilidade limitada em função de gestão de recursos; 
 
Sobre carga de funções para o Name Node quanto à gestão do cluster;
 
 Balanceamento de carga estático; 
 
O DFS possui um protocolo de transações distribuídas e pode e é
gerenciado pelos data nodes ;
 
Letra D:
Justificativa: O DFS não possui mecanismos de controle de
transação. Mesmo se tivesse, todo o gerenciamento é feito pelo
name node e este não é um propósito do YARN
Pontuação do teste: 10 de 10