Dados · Qualidade e QA

Qualidade da classificação e do matching

A PreservaCred classifica cada processo de insolvência por tipo — recuperação judicial, recuperação extrajudicial, falência ou tutela cautelar antecedente — com um pipeline determinístico, um modelo de linguagem de apoio e revisão humana dos casos relevantes. Os credores são casados ao CNPJ de forma direta quando os autos publicam o documento, e por razão social contra o cadastro da Receita Federal quando não publicam — sempre com um grau de confiança atribuído. Esta página explica como isso é feito, como tratamos homônimos, o que é conferido e o que é estimado. As métricas de precisão e recall dependem de avaliação contra amostra rotulada e ficam em avaliação contínua: publicamos os números quando a amostra os sustentar, nunca antes.

Complementa a metodologia — fontes, limitações e a política de errata versionada (§8).

1. Como classificamos os processos

Cada caso capturado nas publicações oficiais dos tribunais passa por três camadas antes de virar alerta:

  • Regras determinísticas — padrões de texto e metadados do DataJud/CNJ identificam o tipo do pedido e a fase (distribuição, deferimento do processamento, edital, sentença, convolação em falência).
  • Modelo de linguagem de apoio — desambigua casos em que o texto é ambíguo ou a nomenclatura varia entre tribunais; a saída do modelo é uma sugestão, não a palavra final.
  • Revisão humana dos casos relevantes — casos de maior valor ou impacto são conferidos por pessoa antes de qualquer alerta ou publicação. A categoria interna "suspeita" é experimental, nunca afirmação de fato, e não aparece em área pública.

Reconhecemos taxa de erro na classificação. Divergências são corrigidas pelo canal de errata e o relatório afetado ganha nova versão datada.

2. Como casamos credor → CNPJ

A correspondência entre um credor citado nos autos e uma empresa do cadastro nacional segue duas rotas:

Rotas de correspondência credor para CNPJ
Situação nos autosComo casamosConfiança
CNPJ publicado no documentoCorrespondência direta pelo número do CNPJDeterminística — máxima
Só razão social / nomeCorrespondência por nome normalizado contra o cadastro da Receita Federal, com pontuação de similaridadeGraduada — ver faixas abaixo

Regra de leitura obrigatória: ausência de correspondência não significa ausência de exposição — significa apenas que não conseguimos casar aquele credor a um CNPJ com confiança suficiente.

3. Tratamento de homônimos

Nomes iguais ou parecidos (matrizes e filiais de um mesmo grupo, empresas distintas com razão social próxima, pessoas físicas com nomes comuns) são o principal risco do matching por nome. Como lidamos:

  • Sinais de desempate — UF, município, situação cadastral e CNAE ajudam a separar candidatos com o mesmo nome antes de fixar a correspondência.
  • Confiança rebaixada em ambiguidade — quando há mais de um candidato plausível, a correspondência não sobe para a faixa alta; entra como possível correspondência, para conferência.
  • Conferência antes de afirmar — leituras afirmativas (exposição, contágio, agregados por credora) usam apenas correspondências de confiança alta; o restante fica marcado para investigação, não vira número publicado.
  • Matriz e filial — tratadas pelo cadastro da Receita; um pedido pode ser da matriz ou de uma filial do grupo, e isso é sinalizado, não achatado.

Cada alerta traz tribunal, número do processo, UF e valor da causa justamente para permitir a conferência manual quando o vínculo é por nome.

4. Faixas de confiança

Toda correspondência por nome recebe uma pontuação. As faixas abaixo definem o uso permitido de cada correspondência — são política fixa, não estimativa:

Faixas de confiança do matching e uso permitido
FaixaSignificadoUso
Direta (CNPJ nos autos)Sem ambiguidade — é o próprio númeroTodas as leituras, inclusive afirmativas
Alta (≥ 90)Correspondência por nome com forte concordância de sinaisLeituras afirmativas (exposição, contágio, agregados)
Possível (< 90)Candidato plausível, mas com ambiguidade residualInvestigação e conferência — não vira número publicado
Sem correspondênciaNenhum candidato com confiança suficienteNão afirma ausência de exposição

5. Métricas de qualidade

Precisão e recall são apurados contra uma amostra rotulada manualmente. Enquanto a amostra não sustenta um número estável, a métrica aparece como em avaliação contínua — preferimos não publicar percentual a publicar um percentual frágil.

Métricas de qualidade em avaliação
MétricaValor
Precisão da classificação de tipoem avaliação contínua
Recall da classificação de tipoem avaliação contínua
Precisão do matching credor→CNPJ (por nome)em avaliação contínua
Cobertura de matching (credores casados a CNPJ)em avaliação contínua
Homônimos que exigem conferência manualem avaliação contínua
Amostra rotulada — classificaçãoem avaliação contínua
Amostra rotulada — matchingem avaliação contínua

Nenhuma avaliação rotulada publicada até o momento. Quando publicarmos, o método e a amostra ficam descritos aqui e na metodologia.

6. O que é conferido vs estimado

Campos conferidos versus estimados
CampoOrigemNatureza
Tribunal, número do processo, data de publicaçãoDiário de Justiça / DataJudConferido (fonte oficial)
Tipo do pedido (RJ, falência, RE, tutela)Classificação com revisão humana dos relevantesConferido nos relevantes; classificado no restante
Cadastro do CNPJ (situação, CNAE, porte, UF)Dados abertos da Receita FederalConferido (fonte oficial, foto trimestral)
Valores e classes da lista de credoresAutos públicos, na data da extraçãoConferido na extração; sujeito a habilitações e impugnações
Vínculo credor→CNPJ por razão socialCorrespondência por nome com pontuaçãoEstimado (faixa de confiança declarada)
Exposição e contágio agregadosDerivado de correspondências de confiança altaEstimado sobre o subconjunto casado

Encontrou um erro?

Classificação equivocada, credor casado ao CNPJ errado, homônimo trocado: reporte pelo canal de contato. Pedidos são verificados contra a fonte oficial; correções procedentes são aplicadas e registradas de forma permanente e datada na própria página afetada, com nova versão do relatório.

As métricas desta página integram a política de confiabilidade declarada dos Termos de Uso.