definition
O que é revisão de QC no eDiscovery?
A revisão de QC é uma rodada de controle de qualidade sobre documentos já codificados, usada para confirmar que os revisores aplicaram as decisões de responsividade, sigilo profissional (privilégio) e temas de forma consistente e correta. Normalmente, combina amostragem aleatória com verificações direcionadas às decisões com maior probabilidade de causar problemas mais adiante.
A revisão de QC - abreviação de quality control, ou controle de qualidade - é uma segunda análise de documentos que já foram codificados, feita para confirmar que as decisões tomadas na revisão de primeiro nível são consistentes e defensáveis. É uma parte padrão da revisão de documentos, e não um sinal de que algo deu errado.
O que uma rodada de QC normalmente analisa
- Amostras aleatórias extraídas dos lotes de cada revisor, que produzem uma taxa de erro que você pode apresentar caso a codificação seja contestada.
- Verificações direcionadas às decisões com maiores consequências posteriores: decisões de sigilo profissional (privilégio), documentos marcados como não responsivos e qualquer documento codificado de forma inconsistente dentro de uma família ou de um grupo de quase duplicados.
- Consistência entre revisores, comparando como pessoas diferentes codificaram documentos semelhantes e corrigindo o manual de codificação quando a divergência revela, na verdade, uma ambiguidade nas instruções.
Como as equipes medem
A medida mais comum é a taxa de reversão - a parcela dos documentos amostrados em que o revisor de QC altera a decisão original. Uma taxa de reversão crescente nos lotes de um revisor geralmente indica uma lacuna de treinamento. Uma taxa crescente em toda a equipe geralmente indica um manual de codificação que precisa ser mais preciso.
O QC funciona melhor quando acontece em paralelo à revisão, e não no fim. A amostragem das primeiras centenas de documentos de um lote identifica cedo um código de tema mal compreendido, quando revisar novamente ainda é barato.
Quando a IA faz a revisão de primeiro nível, o mesmo princípio se aplica: faça amostragem das decisões do modelo, meça com que frequência um advogado discorda e documente o resultado. Leitura relacionada: O TAR 1 Reference Model: o que o novo framework da Sedona Conference significa para a revisão com GenAI aborda como os frameworks de validação medem a qualidade da revisão.
A Claira é uma plataforma de eDiscovery com IA para revisão de documentos em grande escala - você pode agendar uma demonstração para ver como ela funciona junto a um processo de QC como este.