Questões de Concurso
Filtrar
71 Questões de concurso encontradas
Página 4 de 15
Questões por página:
Questões por página:
Observando um órgão estadual que integra NF-e, EFD/SPED, logs de sistemas, dados semiestruturados de convênios e arquivos em múltiplos formatos, preservando os dados no formato original para usos analíticos futuros, a característica arquitetural
que define um data lake no cenário descrito é
Um pipeline de dados do TCE-SC processa bilhões de registros de
notas fiscais usando Spark SQL. O Auditor nota um problema de
desbalanceamento de dados no qual um único executor demora
muito mais que os outros para completar uma operação de Join,
pois uma chave específica possui muito mais registros que as
demais.
A seguinte técnica avançada de otimização no Spark 3.x permite ao motor de execução identificar esse desequilíbrio em tempo de execução e dividir a partição sobrecarregada em subtarefas menores:
A seguinte técnica avançada de otimização no Spark 3.x permite ao motor de execução identificar esse desequilíbrio em tempo de execução e dividir a partição sobrecarregada em subtarefas menores:
Para processar terabytes de logs de notas fiscais eletrônicas, o
TCE-SC utiliza um cluster Apache Spark. O Auditor nota que o
processamento está lento devido ao excesso de movimentação
de dados entre os nós da rede durante operações de
agrupamento.
A operação do Spark conhecida por causar esse fenômeno de Shuffle e que deve ser utilizada com cautela em grandes datasets é:
A operação do Spark conhecida por causar esse fenômeno de Shuffle e que deve ser utilizada com cautela em grandes datasets é:
Concurso:
FUNPRESP-JUD
Disciplina:
Banco de Dados
Acerca do armazenamento de Big Data, do pipeline de dados e dos conceitos de data lake, julgue o item subsequente.
O armazenamento orientado a objetos é incompatível com data lakes devido à natureza dos dados armazenados.
Concurso:
FUNPRESP-JUD
Disciplina:
Banco de Dados
Acerca do armazenamento de Big Data, do pipeline de dados e dos conceitos de data lake, julgue o item subsequente.
Em pipelines de dados, a etapa de ingestão corresponde ao processo de eliminação permanente dos dados de origem após o carregamento no ambiente analítico.
