Como testamos

O que «testado» quer dizer aqui

Uma ferramenta que roda no seu navegador não tem um servidor onde possamos corrigir um erro depois que ele acontece: o código que você recebe é o que vai processar o seu arquivo. Por isso cada mudança no site passa por uma bateria de verificações antes de ser publicada, e uma falha em qualquer uma delas bloqueia a publicação.

«Testado» não significa perfeito. Significa que o comportamento esperado de cada ferramenta está escrito em forma de teste, que esses testes rodam a cada alteração e que sabemos quais casos ainda não cobrem. Esta página conta o que é verificado, como, e onde estão os limites.

A bateria automática

Milhares de testes rodam a cada mudança. Os unitários verificam as peças pequenas: um intervalo de páginas interpretado certo, um nome com acento preservado, uma opção fora da faixa recusada. Os de ponta a ponta abrem o site de verdade, soltam arquivos reais nas ferramentas e conferem o resultado em três motores de navegador: Chrome, Firefox e Safari.

Parte da bateria roda numa janela do tamanho de um celular, com toque em vez de mouse. Em todos esses testes há um guarda de rede: cada arquivo de teste leva uma marca única, e o teste falha se um único byte dela sair da página em qualquer requisição.

Documentos reais e fidelidade

Para as ferramentas de PDF, arquivos sintéticos não bastam: documentos reais têm fontes estranhas, formulários, camadas de digitalização e erros de quem os gerou. Mantemos um corpus de PDFs reais e de casos difíceis construídos de propósito, e cada ferramenta de PDF roda sobre ele a cada mudança.

O Editar PDF segue um protocolo publicado: operações e arquivos definidos de antemão, a página renderizada antes e depois e comparada pixel a pixel fora da área editada, o texto conferido por mais de um leitor independente, o arquivo validado por verificadores externos. Os números publicados são absolutos, com data; não comparamos com outros produtos.

Orçamentos de desempenho

Cada página tem um orçamento de peso: quantos quilobytes de script podem chegar ao navegador antes de a página estar utilizável, quanto tempo o conteúdo principal pode levar para aparecer num celular simulado em rede lenta, e quanto a página pode «pular» enquanto carrega. O Lighthouse mede isso a cada publicação, e estourar o orçamento é uma falha como qualquer outra.

Esses orçamentos protegem quem está com um celular antigo ou um pacote de dados curto: a ferramenta precisa abrir rápido, e o motor pesado (o programa WebAssembly que faz o trabalho) só é baixado quando você solta um arquivo, não antes.

O que ainda não testamos e como avisar

Há lacunas que preferimos dizer em voz alta: o reconhecimento de texto (OCR) é medido só em digitalizações sintéticas, não em páginas reais; assinaturas com certificado não entram no corpus; o desempenho em celulares é medido por emulação, não em aparelhos físicos de cada geração; e navegadores antigos ficam fora da bateria. Se uma ferramenta falhou com o seu arquivo, conte na página Pedir uma ferramenta, descrevendo o tipo de arquivo e o que aconteceu, sem anexar nada pessoal; as pessoas que fazem o MyFreeTools leem cada pedido. A página Sobre diz quem opera o site.