Materiais

O defeito costuma estar no instrumento

A lição mais cara dos últimos meses é também a menos brilhante. Quando uma medição produz um número estranho, a falha está mais vezes naquilo que faz a medição do que naquilo que está a ser medido. O que se segue é um catálogo. Cada ponto é um caso real que custou horas de procura no sítio errado.

Como as nossas próprias ferramentas nos enganaram

A ferramenta repete o produto. Um script de verificação montado com as mesmas peças do código que verifica não confirma a correção, confirma a identidade: é cego exatamente aos mesmos erros. A solução é medir por um caminho diferente, com outra maquinaria, ou através da leitura.

A ferramenta lê apenas a primeira correspondência. Um script apanhou o primeiro item que servia e indicou "uma correspondência" onde havia cinco. Um zero ou um um vindos de uma ferramenta assim não significam nada até se provar que a ferramenta lê até ao fim.

Uma verificação é cega por construção. Uma das nossas inspecionava ficheiros à procura de expressões copiadas, mas apenas extraía texto entre aspas. Um fragmento copiado colocado entre parênteses retos era-lhe invisível. Uma verificação com luz verde prova a ausência da classe de problemas que consegue ver, e nada além disso.

Uma pesquisa vazia não é um resultado limpo. A ausência de dados de saída significa "não encontrado", e "não encontrado" pode perfeitamente resultar de uma gralha na pesquisa. Um resultado negativo só é aceite depois de a mesma pesquisa ter encontrado algo que se sabe estar lá.

Luz verde antes da verificação não é luz verde. Um relatório a dizer "corrigido" escrito antes de a ferramenta ter corrido é uma declaração de intenções, não de estado. Nós relatamos o estado.

O nosso próprio limite parece um defeito alheio. Um limite de pedidos do nosso lado apareceu numa medição como uma falha de um serviço externo. Antes de culpar o objeto medido, verifique se o instrumento não bateu no seu próprio teto.

O que resultou

Retirar a unidade do código. A ferramenta tem de retirar a sua unidade de medida do código que está a ser medido, em vez de inventar uma que seja conveniente. Quando medimos até que ponto de uma frase uma verificação chegava, as tentativas parciais foram executadas pela mesma maquinaria que o produto usa. Foi por isso que pudemos confiar nos números resultantes: o caminho era o caminho do produto, não um esboço dele.

Uma alteração por medição. Entre duas medições muda exatamente uma coisa. As variantes são numeradas, diferindo cada uma da anterior numa única edição, e apenas a vencedora é mantida. Caso contrário, não há forma de saber qual foi a edição que produziu o efeito e qual a que produziu o custo.

Uma ferramenta com falhas retira os seus números. Quando se descobre que um instrumento estava avariado, todos os números que produziu são retirados publicamente, incluindo os convenientes. Isto não é autoflagelação; é a única forma de o registo continuar a ser útil.

O que continua em aberto

Não temos nenhum passo automático que verifique os próprios instrumentos, aquele que exigiria que "esta ferramenta encontrou algo cuja existência é conhecida antes de se acreditar no seu zero". Isso depende da disciplina de quem executa a bancada de testes, o que significa que será ignorado numa noite de cansaço. Como integrar isto em cada execução sem duplicar o custo da bancada é uma questão em aberto.

Vale a pena mencionar um limite relacionado: um instrumento mede sempre o estado a partir do qual foi chamado, não o estado que tínhamos em mente. Uma medição feita a partir de uma cópia de trabalho não diz nada sobre a versão publicada, e um resultado verde obtido com dados desatualizados é uma afirmação sobre o dia de ontem.

Todos os artigos

Prática gratuita para cada regra

Cada regra gramatical no site inclui exercícios práticos. O acesso é gratuito e não requer registo.

Relatar um problema

Página em que você está
/pt/science/papers/measure-02-instrument.html pt

Para nós o inglês é mais fácil, mas escreva no idioma que preferir.

O relato leva apenas as suas palavras, o endereço da página e o idioma. Sem captura de tela, sem registros, sem conta. Não podemos responder a um relato, então se precisar de resposta escreva para [email protected]