Сервіси з ШІ люблять слово «безлімітно». Воно чесне рівно доти, доки в застосунок не прийде людина з десятьма бланками за три роки. Тому ми зробили нудну річ: підключили облік витрат на модель до кожного виклику й почали дивитись на реальні числа.
Кожен розбір бланка, кожне повідомлення помічнику й кожна виписка для лікаря лягають в окрему таблицю разом із вартістю. Не приблизно «десь копійки», а конкретна сума за конкретну дію.
Що показав вимір
Найдорожче в сервісі - не розпізнавання. Прочитати цифри з фото порівняно дешево. Дорого коштує трактування всієї картини: пояснити, що означає феритин 18 у жінки з утомою і нормальним гемоглобіном, з урахуванням її анкети, ліків і попередніх бланків.
Заодно полагодили звірку
Подвійна перевірка чисел, з якою сервіс жив від початку, звіряла показники за назвами з бланка. Виявилось, що лабораторії пишуть ту саму позицію по-різному, і два проходи розпізнавання могли назвати її неоднаково. Тепер звірка йде за канонічним кодом показника, а не за написом на папері.
Це та категорія помилок, яких не видно на екрані: інтерфейс однаковий, тести зелені, а частина показників тихо не потрапляє в порівняння. Ловиться вона лише на справжніх бланках, і саме тому ми ганяємо сервіс на справжніх.