Transcrição da Prova — Cássio Freire
Matrícula: 20233003971 • Turma1 • Prova Escrita 1 (Modelo A)
Voltar ao Quadro Geral de Notas | Visualizar Laudo Oficial em HTML
Transcrição da Prova Escrita 1 — Cássio Freire
Questão 1 — Triagem com dados heterogêneos (5,0 pts) — [Páginas 1 e 2]
- Legibilidade da Questão: 95%
1.a Figura 1 e Decisão de Produção (Valor: 2,0) — [Página 1]
- Resposta Manuscrita: > “O aumento da curva de loss-val demonstra que o modelo começa a entrar em Overfitting a partir da Época 8, portanto, a decisão de utilizar os pesos do final do treinamento está equivocada. A queda do loss do treinamento por si só não garante o seu uso na produção pois essa mede apenas o desempenho dos dados de treino, o que não necessariamente indica que o desempenho também será bom para dados inéditos.”
- Observações de Leitura (OCR): Excelente análise da divergência da perda de validação vs. treino e a impropriedade de usar os pesos do final.
1.b Representação e Retropropagação (Valor: 2,0) — [Página 2]
- Resposta Manuscrita: > “As entradas precisam ser normalizadas para poderem alimentar a MLP. O backpropagation ajuda a medir a contribuição de cada peso de cada camada para a obtenção do resultado.”
- Observações de Leitura (OCR): Cita normalização prévia e o papel da retropropagação na contribuição dos pesos.
1.c Evidências de Confiança e Reprodutibilidade (Valor: 1,0) — [Página 2]
- Resposta Manuscrita: > “Pelo contexto clínico do problema, prever que um paciente está livre de atendimento enquanto ele deveria ser atendido é uma situação inaceitável, enquanto um alarme falso seria tolerável. Portanto, a métrica Recall é de extrema importância para a confiança do modelo.”
- Observações de Leitura (OCR): Argumentação clínica sólida justificando a prioridade do Recall.
Questão 2 — Inspeção visual em condições novas (5,0 pts) — [Páginas 2 e 3]
- Legibilidade da Questão: 94%
2.a Diagnóstico Experimental (Valor: 2,0) — [Página 2]
- Resposta Manuscrita: > “Uma alta acurácia no treino e uma baixa/média acurácia na validação são fatores que indicam que o modelo sofre de overfitting. O fato da amostra ser pequena contribui para resultados ruins, utilizar modelos pré-treinados com amostras maiores podem ser melhores. Caso os resultados continuem divergindo, pode ser falha no processo de rotulação.”
- Observações de Leitura (OCR): Relaciona discrepâncias de acurácia, escassez de dados, modelos pré-treinados e erros de rotulação.
2.b Arquitetura e Transferência de Aprendizado (Valor: 2,0) — [Página 3]
- Diagrama / Elemento Visual: Sem diagrama esquemático.
- Resposta Manuscrita: > “Utilizar o modelo pré-treinado, inicialmente com a base congelada e descongelar com o tempo a partir das camadas mais externas e realizar ajuste fino no final.”
- Observações de Leitura (OCR): Citação técnica exata de congelamento inicial e descongelamento progressivo para fine-tuning.
2.c Cautela Amostral (Valor: 1,0) — [Página 3]
- Resposta Manuscrita: > “Comparar o desempenho utilizando outras fotos noturnas ajudaria a decidir se o modelo priorizou a cor do fundo ou a peça em si para tomar a decisão.”
- Observações de Leitura (OCR): Alerta pertinente sobre atalhos espúrios (cor do fundo vs. defeito na peça).
Questão 3 — Alerta que muda decisões (5,0 pts) — [Páginas 3 e 4]
- Legibilidade da Questão: 92%
3.a Interpretação da Calibração e Crítica ao Limiar (Valor: 2,0) — [Página 3]
- Diagrama / Elemento Visual: Sem alterações no gráfico da Figura 2.
- Resposta Manuscrita: > “Como o modelo provavelmente não atingirá 100% de acurácia na validação, a escolha de 0,5 para o limiar achando que ele garantiria metade dos casos foi ruim. Um modelo mal calibrado soltaria alarmes falso para pacientes saudáveis e não alertaria pacientes em situação crítica.”
- Observações de Leitura (OCR): Conecta a descalibração à emissão de alarmes falsos e negligência de pacientes críticos.
3.b Custos Assimétricos e Capacidade Operacional (Valor: 2,0) — [Página 4]
- Resposta Manuscrita: > “A capacidade de identificar Falso Positivo e Negativo é métrica de extrema importância para a escolha do ponto operacional. Assim, o teto de capacidade seria direcionado mais certamente aos casos Verdadeiros.”
- Observações de Leitura (OCR): Reconhece a importância do balanceamento entre falsos positivos/negativos em função da capacidade da equipe.
3.c Telemetria e Deriva de Conceito (Valor: 1,0) — [Página 4]
- Resposta Manuscrita: > “A utilização da equipe médica nos casos de detecção de anomalias é importante para definir a natureza do ocorrido.”
- Observações de Leitura (OCR): Sugere intervenção da equipe médica diante de anomalias detectadas.
Questão 4 — Busca de conhecimento para atendimento (5,0 pts) — [Páginas 4 e 5]
- Legibilidade da Questão: 92%
4.a Representação Semântica e Limitações do Cosseno (Valor: 2,0) — [Página 4]
- Resposta Manuscrita: > “O uso da similaridade de cosseno nos embeddings estáticos faz com que este meça apenas a proximidade léxica das sentenças, ignorando o contexto/sentido presente nelas.”
- Observações de Leitura (OCR): Destaca que embeddings estáticos não capturam o contexto/sentido semântico das sentenças.
4.b Avaliação Rigorosa de Recuperação (Valor: 1,5) — [Página 5]
- Resposta Manuscrita: > “A mera proporção de consultas com retorno por si só não garante que o retorno de fato faz sentido para a consulta.”
- Observações de Leitura (OCR): Critica a métrica simplista apontando a necessidade de pertinência real do documento retornado.
4.c Busca Híbrida e Governança (Valor: 1,5) — [Página 5]
- Resposta Manuscrita: > [NÃO RESPONDEU / EM BRANCO]
- Observações de Leitura (OCR): Campo deixado em branco pelo discente.
Questão 5 — Assistente que pode não responder (5,0 pts) — [Páginas 5 e 6]
- Legibilidade da Questão: — (Sem respostas)
5.a Contestação do Maior Escore e Desenho da Abstenção (Valor: 2,0) — [Página 5]
- Resposta Manuscrita: > [NÃO RESPONDEU / EM BRANCO]
- Observações de Leitura (OCR): Campo deixado em branco pelo discente.
5.b Conflito de Fontes e Validação Prévia (Valor: 2,0) — [Página 6]
- Resposta Manuscrita: > [NÃO RESPONDEU / EM BRANCO]
- Observações de Leitura (OCR): Campo deixado em branco pelo discente.
5.c Telemetria e Impacto Operacional (Valor: 1,0) — [Página 6]
- Resposta Manuscrita: > [NÃO RESPONDEU / EM BRANCO]
- Observações de Leitura (OCR): Campo deixado em branco pelo discente.