AVALIAÇÃO · MÉTRICAS E ACEITE

Precisão do OCR veicular: o número só vale com contexto

Tela real anonimizada de uma leitura OCR em operação de campo
Tela real anonimizada de uma operação OCR. Dados identificadores foram ocultados; o enquadramento mostra o contexto disponível para revisão.

Uma taxa única pode esconder placas não detectadas, leituras inconclusivas e condições ausentes da amostra. A avaliação útil separa etapas, erros e cenários antes de comparar resultados.

Nesta página

A pergunta correta não é apenas “qual é a precisão?”. É: precisão de quê, em qual amostra, sob quais condições e com qual regra para os casos inconclusivos?

Detecção, leitura exata e confiança são medidas diferentes

Taxa de detecção verifica se a placa presente foi localizada. Correspondência exata verifica se toda a sequência foi lida corretamente. Acurácia por caractere pode ser útil para diagnóstico, mas não substitui a leitura exata quando uma única troca muda a placa.

Falsos positivos, falsos negativos e inconclusivos precisam aparecer no relatório. Excluir os casos difíceis depois do teste torna a taxa incomparável.

  • Placas presentes, detectadas e não detectadas.
  • Sequências corretas, incorretas e inconclusivas.
  • Objetos sem placa aceitos indevidamente como leitura.
  • Latência, vazão e estabilidade na carga contratada.

A verdade de referência deve existir antes de abrir o resultado

Uma equipe independente do resultado anota quais placas estão presentes e qual é a sequência correta. A amostra deve cobrir horários, rotas, sentidos, velocidades, clima, iluminação, oclusões e estados de conservação relevantes.

Separar um conjunto para ajuste e outro para aceite evita medir o sistema sobre as mesmas imagens usadas para calibrá-lo.

Confiança individual não é precisão global

Um indicador de confiança acompanha uma hipótese específica produzida pelo sistema. Ele ajuda a ordenar revisão ou aplicar um limiar, mas não informa sozinho quantas leituras do conjunto estavam corretas.

A tela abaixo mostra um caso real anonimizado. O valor visível pertence somente àquela leitura e não deve ser usado como benchmark do produto.

Tela real anonimizada do fluxo de OCR associado ao talonário eletrônico
Tela real anonimizada do fluxo de OCR. A placa exibida foi substituída por uma placa sintética. A confiança de 87% pertence a essa leitura individual e não representa precisão global, média ou compromisso de desempenho.

Uma média não mostra onde a operação perde qualidade

O relatório deve separar ao menos câmera, faixa, período, iluminação e classes de dificuldade relevantes. Assim é possível descobrir se o problema está concentrado em uma geometria, horário ou tipo de placa.

  • Dia, noite, contraluz, chuva e reflexo.
  • Veículo parado, baixa velocidade e velocidade operacional prevista.
  • Placa frontal, traseira, inclinada, suja, danificada ou parcialmente oculta.
  • Uma câmera e múltiplos canais na carga simultânea contratada.

O aceite registra limite, método e comportamento diante da dúvida

O contrato deve fixar amostra, métrica, limiar, hardware, versão, condições e tolerâncias antes do teste. Também precisa dizer quando uma leitura segue automaticamente no fluxo, quando exige revisão e quando deve ser descartada.

Mudança relevante de câmera, instalação, rota ou carga merece nova verificação proporcional ao impacto.

Perguntas frequentes

Por que não publicar uma precisão única?

Porque o resultado muda com câmera, instalação, velocidade, iluminação, ângulo, estado da placa, carga e regra para inconclusivos. Sem amostra e método, um percentual não é comparável.

Acurácia por caractere é suficiente?

Não quando o uso exige a placa completa. Uma única troca pode produzir outra sequência válida. O relatório pode mostrar acurácia por caractere para diagnóstico, mas deve incluir correspondência exata da placa.

Casos inconclusivos contam como erro?

A regra deve ser definida antes do teste e apresentada separadamente. Esconder inconclusivos ou removê-los depois distorce a comparação. O impacto operacional também depende do que o fluxo faz com eles.

O valor de confiança da tela é a precisão do sistema?

Não. É um indicador daquela hipótese individual. Precisão é calculada sobre um conjunto com verdade de referência e métrica definida.

Um teste de laboratório substitui o teste em campo?

Não. Ele ajuda a comparar componentes em condições controladas, mas o aceite precisa representar a geometria, a iluminação, a velocidade, as placas e a carga da operação contratada.