Um órgão de controle estuda implantar uma plataforma avançad...

Próximas questões
Com base no mesmo assunto
Q3874752 Engenharia de Software
Um órgão de controle estuda implantar uma plataforma avançada baseada em grandes modelos de linguagem para apoiar a análise de documentos, a consulta a bases normativas e a execução de fluxos complexos (por exemplo, checagem automática em diários oficiais, sistemas internos e bases abertas). A arquitetura em estudo combina LLMs, geração aumentada por recuperação (RAG), agentes de IA com uso de ferramentas externas e mecanismos de monitoramento para riscos éticos e de segurança.
Com base em conceitos de transformers e LLMs, RAG, agentificação, engenharia de prompts, bem como ética e segurança em IA, analise as afirmativas a seguir.

I. Em uma arquitetura com RAG, o LLM é utilizado principalmente como gerador condicionado a evidências: os documentos relevantes são buscados por similaridade de embeddings em um índice vetorial e incorporados ao contexto de entrada, de modo que decisões sobre fragmentação (tamanho dos trechos, sobreposição, estratégia de indexação) influenciam diretamente tanto a recuperação quanto a qualidade e a fundamentação das respostas.
II. Em arquiteturas que combinam LLMs com RAG, o risco de exposição indevida de dados sensíveis tende a ser intrinsecamente menor do que no uso direto de LLMs, porque os documentos sigilosos não precisam ser indexados: o modelo passa a depender principalmente de representações paramétricas já aprendidas no pré-treinamento, reduzindo a necessidade de controles específicos sobre o ciclo de vida dos dados no índice vetorial.
III. Técnicas de alinhamento com preferências humanas, como Reinforcement Learning e variantes de preference optimization, são frequentemente combinadas com boas práticas de engenharia de prompts (zero-shot, few-shot, encadeamento de pensamento) e com avaliações sistemáticas de prompts e saídas, pois, mesmo após o alinhamento, permanecem desafios como viés algorítmico, suscetibilidade a jailbreaks e prompt injection, exigindo camadas adicionais de governança, monitoramento e auditoria.

Está correto o que se afirma em: 
Alternativas

Gabarito comentado

Confira o gabarito comentado por um dos nossos professores

Gabarito: C

Fundamento decisivo: No cenário de RAG e alinhamento apresentado, a sequência correta é I verdadeira, II falsa e III verdadeira; portanto, a alternativa C.

Tema central: RAG e segurança de LLMs
Análise das alternativas
A
Errada
Exclui indevidamente III. O alinhamento não garante a eliminação dos riscos comportamentais e de segurança; por isso, avaliações e proteções complementares continuam necessárias.
B
Errada
Inclui II, que atribui ao RAG uma redução intrínseca do risco e dos controles sobre o índice. A recuperação externa não é substituída pelo conhecimento paramétrico, e dados restritos exigem controles de acesso, retenção e exclusão. Também exclui III, embora o alinhamento não dispense avaliações e defesas adicionais.
C
Certa
A alternativa C reúne as duas afirmativas conceitualmente válidas. Em I, a recuperação vetorial fornece trechos ao contexto do gerador; tamanho, sobreposição e indexação dos fragmentos afetam a relevância recuperada e a preservação do contexto, influenciando a qualidade e a fundamentação das respostas. Trata-se de uma implementação válida de RAG, não de uma exigência universal de recuperação vetorial. Em III, técnicas de alinhamento com preferências humanas são complementares à engenharia e à avaliação de prompts: não eliminam vieses nem a suscetibilidade a jailbreaks e prompt injection, permanecendo necessárias governança, monitoramento e auditoria.
D
Errada
Inclui II, apesar de o uso de dados externos continuar exigindo controles sobre documentos e fragmentos. Além disso, exclui I, que descreve corretamente o RAG vetorial: trechos relevantes são recuperados e incorporados ao contexto, com a fragmentação influenciando a recuperação e a geração.
E
Errada
É invalidada pela inclusão de II. Excluir documentos sigilosos pode ser uma decisão de projeto, mas não é uma propriedade intrínseca do RAG nem permite concluir que controles específicos sobre o ciclo de vida dos dados sejam dispensáveis.
Pegadinha da questão
A afirmativa II inverte o fundamento do RAG ao atribuir predominância ao conhecimento paramétrico e transforma uma possível decisão de excluir documentos sigilosos em garantia intrínseca de segurança.
Dica para questões semelhantes
  • Ao avaliar uma descrição de RAG, verifique se as evidências recuperadas alimentam o contexto do gerador; não confunda essa recuperação com conhecimento armazenado nos parâmetros.
  • Separe decisões de projeto de propriedades da arquitetura: excluir conteúdo sigiloso é uma escolha, enquanto conteúdo restrito recuperável exige permissões e controles de retenção e exclusão.
  • Não trate alinhamento como garantia de segurança: riscos residuais justificam avaliações, monitoramento e defesas complementares.

Clique para visualizar este gabarito

Visualize o gabarito desta questão clicando no botão abaixo

Comentários

Veja os comentários dos nossos alunos

A alternativa CORRETA é a C) I e III, apenas.


Análise detalhada das afirmativas:

  • I. CORRETA: Descreve com precisão o funcionamento de uma arquitetura RAG (Retrieval-Augmented Generation). Os dados são indexados através de embeddings em um banco vetorial. Ao receber uma consulta, o sistema recupera os trechos mais relevantes por similaridade e os injeta no contexto (prompt) do LLM, permitindo que ele gere respostas fundamentadas nas evidências fornecidas. Estratégias de chunking (tamanho dos trechos, sobreposição/overlap) afetam diretamente a precisão do contexto e o resultado final.

  • II. INCORRETA: O RAG exige justamente que a base de conhecimento documental (incluindo dados internos ou restritos) seja indexada no banco vetorial para poder ser consultada. Se houver documentos sigilosos no índice e o sistema não possuir controles rígidos de acesso (ACLs/RBAC), um usuário sem permissão pode instruir o LLM a recuperar e expor informações sensíveis contidas nesses trechos. Além disso, o RAG busca reduzir a dependência das representações paramétricas do pré-treinamento, e não aumentá-la.

  • III. CORRETA: Mesmo que o modelo passe por etapas avançadas de alinhamento (como RLHF ou DPO) e o desenvolvedor utilize boas técnicas de prompt (few-shot, Chain-of-Thought), o LLM ainda permanece vulnerável a ameaças como prompt injection, jailbreaks e alucinações. Por isso, a arquitetura deve contar com camadas complementares de governança, guardrails, monitoramento contínuo e auditoria de entradas e saídas.

Clique para visualizar este comentário

Visualize os comentários desta questão clicando no botão abaixo