Artykuły

Podaj liczbę, zanim zmierzysz

Ten artykuł opowiada o tym elemencie naszej praktyki, który działa, i o tym, dlaczego jest to właśnie ten element, a nie jakiś sprytniejszy.

Liczba trafia do protokołu jako pierwsza

Zanim ruszy pomiar, zapisujemy, co mierzymy, czym, jakiej liczby się spodziewamy i z jaką tolerancją. Dopiero wtedy uruchamiamy narzędzie.

To nie jest rytuał. Zapisanie oczekiwań z wyprzedzeniem odróżnia pomiar od dopasowywania wyniku. Gdy liczba jest już znana, człowiek - a także model językowy - po cichu rozszerza tolerancję: "cóż, sześć prawie mieści się w przedziale od dwóch do sześciu". Wynikają z tego trzy konsekwencje i wszystkie trzy są celowo niewygodne.

Granica tolerancji to nie trafienie. Wynik sześć przy oczekiwaniu od dwóch do sześciu jest raportowany w osobnej linijce jako przypadek graniczny, a nie wrzucany do worka "w normie".

Pudła raportuje się jako pierwsze. Raport zaczyna się od tego, co się nie zgodziło. Wszystko inne zamienia go w reklamę osoby, która go napisała.

Przewidziana porażka też jest przewidywanym wynikiem. Zdanie "usunięcie tego wymogu zostanie odrzucone przez bramkę" zapisano przed uruchomieniem testu i bramka faktycznie tę zmianę odrzuciła. Trafnie przewidziana porażka jest warta więcej niż trafienie uzyskane przypadkiem: oznacza, że nasz model działania systemu jest poprawny.

Najbardziej użyteczny wniosek z tego nawyku jest taki, że pudła okazały się bardziej produktywne niż trafienia. W przypadku opisanym w poprzednim artykule to właśnie nietrafione przewidywanie - "ta część rozpozna od jednego do pięciu przypadków", a nie rozpoznała żadnego - wskazało prawdziwego winowajcę, którym wcale nie był element nazwany w pierwotnej diagnozie.

Trzy bramki wokół każdej zmiany

Żadna zmiana w regule sprawdzającej nie jest przyjmowana na podstawie jednej liczby. Obowiązują trzy bramki.

  • Reguła rozpoznaje własny błąd: reaguje na znane błędne zdania.
  • Milczy przy poprawnym tekście: nie reaguje na poprawione wersje tych samych zdań ani na wzorcowe przykłady żadnej z kilkuset reguł na mapie.
  • Milczy przy zwykłej prozie: koszt mierzy się liczbą fałszywych alarmów na dużym, stałym zbiorze opublikowanych tekstów i podaje przy każdej zmianie - zarówno dla zbioru historycznego, dla zachowania porównywalności, jak i dla obecnego pełnego zbioru.

Trzecia bramka odrzuca większość proponowanych reguł sprawdzających i to ją najłatwiej byłoby pominąć, bo jako jedynej nie da się przejść samym staraniem się bardziej.

Co pozostaje otwarte

Dyscyplina spoczywa na osobie obsługującej stanowisko testowe. Technicznie nic nie stoi na przeszkodzie, by uruchomić narzędzie bez wcześniejszej deklaracji; zabrania tego tylko zasada. Chcielibyśmy, aby odmowa była wbudowana w samo narzędzie: brak zadeklarowanych liczb, brak pomiaru. To wymaga formatu deklaracji czytelnego dla maszyny, który nie zamieni roboczej rozmowy w biurokrację, a takiego jeszcze nie znaleźliśmy.

Istnieje też drugie, cichsze ryzyko. Nawyk, który daje niewygodne raporty, utrzymuje się tylko tak długo, jak długo ktoś godzi się na ten dyskomfort. Trzy powyższe konsekwencje zostały spisane właśnie z tego powodu: zasada na papierze przetrwa gorszy tydzień lepiej niż dobre chęci.

Wszystkie artykuły

Bezpłatne ćwiczenia do każdej reguły

Każdej regule gramatycznej na stronie towarzyszy zestaw ćwiczeń. Jest bezpłatny i nie wymaga rejestracji.

Zgłoś problem

Strona, na której jesteś
/pl/science/papers/measure-05-declarations.html pl

Najłatwiej nam po angielsku, ale pisz w dowolnym języku.

Zgłoszenie niesie tylko twoje słowa, adres strony i język. Bez zrzutu ekranu, bez logów, bez konta. Nie możemy odpowiedzieć na zgłoszenie, więc jeśli potrzebujesz odpowiedzi, napisz na [email protected]