Jak testować dokładność dyktowania: powtarzalna metoda zamiast procentu z reklamy
Najbardziej użyteczny test dyktowania nie pyta wyłącznie „ile słów było poprawnych”. Sprawdza także błędy zmieniające sens, nazwy własne, interpunkcję, czas poprawek i to, czy tekst niezawodnie trafia do właściwego pola.
Ostatnia weryfikacja: 2026-07-31. Voicetypr publikuje metodę, ale nie ogłasza na jej podstawie własnego zwycięstwa. Nie przeprowadziliśmy w tym artykule pełnego benchmarku produktów. WER opisujemy zgodnie z praktyką NIST i narzędziami open source; test użytkowy jest naszą procedurą redakcyjną.
Krótki werdykt
Użyj co najmniej trzech próbek: czystej prozy, materiału z nazwami i liczbami oraz tekstu branżowego. Zachowaj identyczny mikrofon i warunki. Obok WER policz poprawki zmieniające znaczenie i minuty potrzebne do tekstu gotowego do wysłania.
Werdykt według zastosowania
Kupujący aplikację
Testuj własne zadania w okresie próbnym.
Publiczny benchmark rzadko odwzorowuje Twój akcent, mikrofon i aplikacje.
Zespół techniczny
Zachowaj korpus i konfigurację.
Powtarzalny zestaw pozwala porównywać wersje modeli bez zmiany kryteriów.
Użytkownik codziennego dyktowania
Waż czas korekty, nie tylko WER.
Dwa systemy z podobnym WER mogą różnić się nazwami, interpunkcją i kosztem edycji.
Kryteria wyboru
Stałe warunki
Ten sam mikrofon, odległość, pomieszczenie, głośność i tekst dla każdego kandydata.
Reprezentatywny materiał
Dodaj polskie znaki, liczby, nazwiska, skróty oraz angielskie terminy naprawdę używane w pracy.
Wiele miar
WER uzupełnij o błędy znaczeniowe, interpunkcję, czas poprawki, opóźnienie i błędy wstawiania.
Jawna konfiguracja
Zapisz model, język, formatowanie AI, wersję aplikacji i sprzęt.
| Miara | Jak liczyć | Dlaczego |
|---|---|---|
| WER | (zamiany + usunięcia + wstawienia) / słowa referencji | Porównywalna miara tekstu |
| Błędy krytyczne | Ręcznie: liczby, negacje, nazwy, komendy | Wpływ na sens i ryzyko |
| Czas korekty | Od końca mowy do gotowego tekstu | Rzeczywisty koszt pracy |
| Wstawianie | Udane próby / wszystkie pola | Dopasowanie do workflow |
Zbuduj mały, ale uczciwy korpus
Nagraj 5–10 minut materiału podzielonego na krótkie próbki. Jedna powinna być neutralną prozą, druga zawierać liczby i nazwy, a trzecia język zawodowy.
Utwórz ręcznie sprawdzony tekst referencyjny. Nie poprawiaj sposobu mówienia dla jednego narzędzia i nie porównuj nagrania studyjnego z mikrofonem laptopa.
Policz WER bez ukrywania ważnych błędów
Word Error Rate sumuje zamiany, usunięcia i wstawienia względem tekstu referencyjnego. To przydatna miara, lecz nie waży znaczenia: pomylona negacja może być ważniejsza niż kilka przecinków.
Dlatego oznacz osobno kwoty, daty, nazwiska, identyfikatory i terminy. Opublikuj reguły normalizacji liczb, wielkich liter oraz interpunkcji, jeśli pokazujesz wynik.
Sprawdź produkt, nie sam model
Podyktuj tekst w poczcie, edytorze, przeglądarce i komunikatorze. Zapisz konflikt skrótu, zgubiony fokus, opóźnienie i łatwość anulowania nagrania.
Włącz formatowanie AI albo słownik tylko wtedy, gdy stosujesz tę samą zasadę u wszystkich kandydatów. Wynik po automatycznej korekcie musi być opisany inaczej niż surowa transkrypcja.
Ograniczenia i kwestie do sprawdzenia
- Krótki test nie reprezentuje wszystkich akcentów i warunków.
- WER nie mierzy wygody ani ryzyka błędu.
- Jedno nagranie nie sprawdza wprowadzania tekstu na żywo.
- Wynik po formatowaniu AI nie jest wynikiem samego modelu mowy.
Metoda oceny
- Oparliśmy definicję WER na praktyce ewaluacji rozpoznawania mowy.
- Dodaliśmy miary zadaniowe dla dyktowania przy kursorze.
- Oddzieliliśmy surową transkrypcję od korekty.
- Wymagamy publikacji konfiguracji i ograniczeń.
Źródła
- NIST: SCTK do oceny rozpoznawania mowy
- OpenAI Whisper: kod i opis modeli
- Hugging Face: biblioteka evaluate i WER
- Voicetypr: modele mowy
Przed zakupem ponownie sprawdź u dostawcy ceny, wymagania i zasady prywatności.
Najczęstsze pytania
Jaki wynik WER jest dobry?
Nie ma jednej granicy dla każdego języka i zadania. Porównuj modele na tym samym korpusie i sprawdzaj rodzaj błędów.
Czy trzeba nagrywać własny głos?
Tak, jeśli decyzja dotyczy Twojego dyktowania. Publiczny korpus odpowiada na inne pytanie.
Czy interpunkcję liczyć jako błąd?
Ustal regułę przed testem i raportuj ją osobno, jeśli interpunkcja wpływa na gotowość tekstu.
Uruchom test na swoim głosie
Pobierz Voicetypr, zachowaj próbki i policz poprawki bez zmiany warunków. Trzydniowa próba nie wymaga karty.