Plánováno
Fronta lidské kontroly
Fronta kontroly je místo, kudy do systému vstupuje lidská práce. Její návrh proto rozhoduje o tom, jestli jsou cíle přesnosti vůbec dosažitelné — a jestli se den práce analytika promítne do kvality, nebo se vypaří.
- Položky fáze
- 1.9 směrování podle spolehlivosti, 1.12 rozhraní fronty
- Práh
- 0,85; u pohledávek od 1 000 000 Kč 0,95
- Typy rozhodnutí
- potvrdit, opravit s uvedením hodnoty, označit za nečitelné
- Vždy do fronty
- porušené validační pravidlo nebo účetní identita, bez ohledu na skóre
- Stav
- prahy jsou v konfiguraci aplikace; fronta samotná je plánovaná
Co musí být na obrazovce
Zdrojový dokument otevřený na správné stránce, vedle něj předvyplněné kandidátní hodnoty i s jejich skóre a vyznačeným místem, odkud pocházejí. Analytik nesmí důkaz hledat — hledání je většina času a zdroj chyb.
Ovládání bude klávesové. Kdo za den posuzuje stovky položek, nemá sahat po myši.
Rozhodnutí jsou data
Každé rozhodnutí se zapíše jako událost — typovaná, s identitou toho, kdo ji učinil, a s časem. Při přehrání projekce se přehrají i adjudikace.
„Nečitelné“ je plnohodnotný výsledek, který se zaznamenává. Systém, kde tahle možnost chybí, tlačí analytika k tomu, aby něco tipnul, což je přesně to, čemu se práh spolehlivosti snaží zabránit.
Aby se práce analytika neztratila
Opravy budou plnit zlatou sadu — ručně anotovaný vzorek, na kterém se měří přesnost každé verze extraktoru. Fáze 1 s ní počítá v položce 1.13 v rozsahu nejméně 500 přihlášek.
Zátěž fronty je zároveň metrika, kterou nelze obejít: přesnost se vždy vykazuje spolu s pokrytím a hloubkou fronty, protože zvednutím prahu se dá vylepšit každé jedno číslo o kvalitě a produkt tím zničit.
Kde to v repozitáři žije
docs/APP.md— obrazovky aplikace a požadavky na frontu kontrolydocs/EXTRACTION.md— směrování podle spolehlivosti a případy, které jdou do fronty vždydocs/ACCEPTANCE.md— zlatá sada, cíle přesnosti a past ve způsobu měřenísrc/progresus_isir/config.py— prahy spolehlivosti a hranice vysokého nominálu
Souvisí
Nevědět je lepší než hádat
Extrakce ze skenů se občas splete. Systém proto ví, co neví: pod prahem spolehlivosti hodnota nejde do databáze, ale k člověku. Chybějící údaj je opravitelný, sebevědomě nesprávný ne.
Detail
Confidence je plnohodnotné pole, ne řádek v logu
Každá vytěžená hodnota nese skóre spolehlivosti, použitou metodu a stránku dokumentu. Pod prahem nejde do projekce, ale do fronty lidské kontroly — u vysokých nominálů je práh přísnější.
Detail
Dokumentová pipeline
PlánovánoStahování do content-addressed úložiště, OCR, extrakce do deklarovaného schématu, validace a skóre spolehlivosti. Výsledky budou cachované podle hashe dokumentu, takže přehrání projekce nic nestojí.
Detail