PUC_MINAS_Atividade Objetiva 03_ 07 Soluções para Processamento Paralelo e Distribuído de Dados (2019)

Prévia do material em texto

03/12/2021 15:29 Atividade Objetiva 03: 07. Soluções para Processamento Paralelo e Distribuído de Dados (2019)
https://pucminas.instructure.com/courses/1761/quizzes/23890 1/5
Atividade Objetiva 03
Entrega Sem prazo Pontos 10 Perguntas 5 Limite de tempo Nenhum
Tentativas permitidas Sem limite
Histórico de tentativas
Tentativa Tempo Pontuação
MANTIDO Tentativa 2 1 minuto 10 de 10
MAIS RECENTE Tentativa 2 1 minuto 10 de 10
Tentativa 1 4 minutos 4 de 10
 As respostas corretas estão ocultas.
Pontuação desta tentativa: 10 de 10
Enviado 3 dez em 15:29
Esta tentativa levou 1 minuto.
Fazer o teste novamente
2 / 2 ptsPergunta 1
Comparando as propostas de processamento do Spark ao processamento
Map Reduce.
É correto afirmar que o Spark realiza, exceto:
 
Tratar todos os fluxos de processamento como grafos direcionados acíclicos; 
 
Carrega dados em memória para evitar reprocessamento e acesso a discos; 
 Utiliza os RDD´s para compartilhar dados; 
 
Utiliza controle de processamento no Drive program para transações em
múltiplas máquinas;
https://pucminas.instructure.com/courses/1761/quizzes/23890/history?version=2
https://pucminas.instructure.com/courses/1761/quizzes/23890/history?version=2
https://pucminas.instructure.com/courses/1761/quizzes/23890/history?version=1
https://pucminas.instructure.com/courses/1761/quizzes/23890/take?user_id=46471
03/12/2021 15:29 Atividade Objetiva 03: 07. Soluções para Processamento Paralelo e Distribuído de Dados (2019)
https://pucminas.instructure.com/courses/1761/quizzes/23890 2/5
Letra: d
Justificativa: De acordo com o Notas de aula :
De forma geral:
● Não existe de transações no Spark
2 / 2 ptsPergunta 2
Foram motivadores para o desenvolvimento do YARN.
Selecione quais afirmações estão corretas, exceto:
 Escalabilidade limitada em função de gestão de recursos; 
 Sobre carga de funções para o Name Node quanto à gestão do cluster; 
 Balanceamento de carga estático; 
 
O DFS possui um protocolo de transações distribuídas e pode e é gerenciado
pelos data nodes ;
Letra D:
Justificativa: O DFS não possui mecanismos de controle de transação.
Mesmo se tivesse, todo o gerenciamento é feito pelo name node e
este não é um propósito do YARN
2 / 2 ptsPergunta 3
Considerando os RDD´s e o Spark.
É correto afirmar que:
03/12/2021 15:29 Atividade Objetiva 03: 07. Soluções para Processamento Paralelo e Distribuído de Dados (2019)
https://pucminas.instructure.com/courses/1761/quizzes/23890 3/5
 RDD´s são lista de elementos com controle centralizado pelo name node; 
 
RDD´s são estrutura chaves valor que executam apenas MAP REDUCE em
memória;
 Coleção imutável e distribuída de elementos ; 
 
RDD´s possuem partições e estas não são controladas pela aplicação, apenas
o name node pode alterar o número de partições;
Letra: c
Justificativa: De acordo com o Notas de aula :
De forma geral:
a – O controle dos RDD´s não é feito pelo name node
b – Não são apenas estruturas chave valor, podem ser. Não
executam apenas Map Reduce.
● d – As partições podem ser controladas pela aplicação
2 / 2 ptsPergunta 4
São componentes e suas respectivas funções no YARN.
Selecione a afirmação incorreta:
 
Node Manager: flexível e eficiente (executa qualquer tipo de computação: não
somente map e reduce);
 
MAP REDUCE 2: novo componente na plataforma que impediu que aplicações
em map reduce da versão 1 executassem na versão 2;
03/12/2021 15:29 Atividade Objetiva 03: 07. Soluções para Processamento Paralelo e Distribuído de Dados (2019)
https://pucminas.instructure.com/courses/1761/quizzes/23890 4/5
 
Resource Manager – Faz gestão dos recursos no cluster Hadoop (máquinas,
memória, CPU e etc);
 
Application Manager – recebe os recursos da resource manager e os gerencia
no contexto da aplicação;
Letra: b
Justificativa O Map Reduce 2 é interopera com a versão 1 sem
nenhum tipo de problema.
2 / 2 ptsPergunta 5
Considerando o Spark como uma plataforma para processamento paralelo e
distribuída.
São características do Spark , exceto:
 
Ambiente único para execução de vários tipos de processamentos: Batch,
interativos e streamings;
 
Possuem uma abstração de dados fixa e similar com a estrutura de um
documento;
 Possui componentes como: aprendizado de máquina e grafos;; 
 Pode executar integrado com Hadoop utilizando o YARN, por exemplo; 
03/12/2021 15:29 Atividade Objetiva 03: 07. Soluções para Processamento Paralelo e Distribuído de Dados (2019)
https://pucminas.instructure.com/courses/1761/quizzes/23890 5/5
Letra b:
Justificativa: a abstração de dados do Spark são os RDD´s e os
mesmos não são rígidos;
Pontuação do teste: 10 de 10