Observatório da Prova Digital - Edição 2026T3
Description
Série estatística trimestral sobre prova digital e cadeia de custódia no STJ. Edição 2026T3 (decisões com data de publicação entre 2026-07-01 e 2026-09-30).
Decisões analisadas: 33936; identificadas pela classificação automatizada como em escopo: 1370. População de referência: decisões com íntegra publicada no conjunto do STJ, no período.
Completude do acervo: 33941 de 178002 documentos do rol publicado pelo STJ têm íntegra no acervo (19,1%).
Erro da classificação medido em amostra estratificada de 801 documentos, revisada às cegas (1 revisor(es)): precisão do escopo 77,7%, revocação estimada 21,8%, acurácia do desfecho 74,8%. Intervalos de confiança de 95% no relatório.
Ressalvas obrigatórias:
- A revocação estimada do escopo é de 21,8% (IC 95%: 17,1% a 26,6%): a classificação identifica uma parte minoritária das decisões que o revisor considera em escopo. Os totais e percentuais de desfecho, fundamentos e vestígios descrevem as decisões identificadas, que podem diferir sistematicamente das não identificadas. O total estimado de decisões em escopo, corrigido pelos erros medidos, é de 4.885 (intervalo: 4.106 a 5.967).
- A categoria 'Indeterminado' teve precisão medida de 0,0% (0 de 22; IC 95%: 0,0% a 14,9%): a contagem publicada não deve ser lida como número de decisões com esse desfecho.
- A categoria 'Prova afastada (ilícita, nula ou desentranhada)' foi prevista em apenas 3 documento(s) da amostra (1 correto(s)); a precisão não pode ser estimada com segurança.
- A categoria 'Prova mantida (lícita, válida ou nulidade rejeitada)' teve precisão medida de 0,0% (0 de 15; IC 95%: 0,0% a 20,4%): a contagem publicada não deve ser lida como número de decisões com esse desfecho.
- A acurácia global do desfecho (74,8%) decorre em 99,4% dos acertos da categoria 'Mérito da prova não apreciado (não conhecimento, Súmula 7, supressão)'; as demais categorias devem ser avaliadas pela precisão própria (seção 1), não pela acurácia global.
- A identificação de fundamentos tem F1 micro de 46,7%: a presença de uma categoria indica menção léxica no texto, com erro relevante por rótulo.
- Não houve dupla revisão nesta edição: a concordância entre revisores (kappa) não foi medida e a referência humana corresponde ao julgamento de um único revisor.
- Acervo parcial declarado: 33941 de 178002 documentos do rol publicado pelo STJ têm íntegra no acervo (por mês: 2026-07: 22858 de 37565; 2026-08: 4587 de 62045; 2026-09: 6496 de 78392; por tipo: ACÓRDÃO: 4052 de 55107; DECISÃO: 29889 de 122895). Motivo: Pacotes de integras publicados truncados pelo STJ de julho a setembro de 2026. Protocolo do STJ: STJ-OUV-2026-001 (2026-10-20). Os números descrevem somente esse subconjunto, que pode diferir sistematicamente do restante do publicado; a edição não é comparável a outras e não entra na série histórica.
- A amostra de revisão desta edição foi sorteada antes da v2.12: o plano de análise (tamanhos de amostra, regra de exibição, critérios de aceitação e métricas) não foi registrado nem carimbado antes do sorteio.
- A regressão das expressões da ontologia v1.3.0 registra 5 falha(s) conhecida(s) e declarada(s), em: escopo (classificação completa), fundamentos.acesso_sem_autorizacao. As contagens dessas categorias incluem menções que não correspondem à categoria (ver o arquivo regressao_ontologia.json publicado com a edição) e devem ser lidas com o F1 por rótulo da seção 6.
- O arquivo ontologia_byten_v1.3.0.json publicado omite o bloco ferramentas (nomes comerciais de programas de extração não são publicados pelo Observatório; o bloco omitido serve apenas à separação dos estratos F1 e F2 da amostra e ao destaque de leitura do revisor); a lista de leitura publicada omite o destaque correspondente. Os demais blocos (escopo, desfechos, fundamentos e vestígios) são publicados sem alteração. O arquivo integral usado na classificação (impressão digital 228e05653990dc4c066bc4a188385d79a6c40355f3f0fca2046892a166be2336; SHA-256 do arquivo 90ba43f2ac4f167ed838622ca9b979d3a8c9025a94ad1c7cd4886a44a955fa7a) permanece no acervo do Observatório e pode ser apresentado para verificação.
Classificação determinística pelas regras do Observatório (ontologia publicada com a edição, com impressão digital SHA-256). Somente dados agregados; nenhuma parte, advogado ou número de processo é identificado.
Fonte primária: STJ, Portal de Dados Abertos (https://dadosabertos.web.stj.jus.br/dataset/integras-de-decisoes-terminativas-e-acordaos-do-diario-da-justica).
Notes
Files
CADEIA_LOG.txt
Files
(362.7 kB)
| Name | Size | |
|---|---|---|
|
md5:978845663f760966ceaad968cd2138c1
|
460 Bytes | Preview Download |
|
md5:0cb41d17009b3a5b610f62697ceab971
|
422 Bytes | Preview Download |
|
md5:013df2d1fa4b4aee6e5b66783616b33a
|
10.7 kB | Preview Download |
|
md5:b06b55cd954f41fd527a7153f0b4cbc0
|
39.9 kB | Preview Download |
|
md5:60878eea0c724f43dc7d7d0d60ec8bce
|
10.6 kB | Preview Download |
|
md5:12b8c6aa13695912643beaf954305ee6
|
4.2 kB | Preview Download |
|
md5:7a12908dc0ae7ff790d850942fcb9701
|
3.1 kB | Preview Download |
|
md5:688f1493434b4c353057eab7277aa5c0
|
230.1 kB | Preview Download |
|
md5:596c52c47777091b4aa805ead62c92d5
|
72 Bytes | Preview Download |
|
md5:1cf4a863713b760ae2c00f4a5c1cafd8
|
21.5 kB | Preview Download |
|
md5:8d5558ae4b4a614dc369ee01ac5c6b6f
|
9.1 kB | Preview Download |
|
md5:015c0e3bb424efc8df9cf4a334216bec
|
6.6 kB | Preview Download |
|
md5:2beb31696f6c075964014bf54ecd65fb
|
20.1 kB | Preview Download |
|
md5:7423d70dccdbad8f2adc38033001f4bc
|
1.3 kB | Preview Download |
|
md5:8b0d00c5fc8d4e19fe760967aa9a367c
|
4.6 kB | Download |
Additional details
Related works
- Is derived from
- Dataset: https://dadosabertos.web.stj.jus.br/dataset/integras-de-decisoes-terminativas-e-acordaos-do-diario-da-justica (URL)
- Is part of
- Other: https://byten.com.br/observatorio (URL)
- References
- Dataset: 10.5281/zenodo.19978412 (DOI)