Кейсы · Проверка отчёта

ИИ-отчёт о продажах: 35 цифр пересчитано, 8 неверны

Собственный кейс на синтетических данных в настоящем формате выгрузки Shopify, поэтому правильные ответы заранее известны.

8 из 35пересчитанных цифр оказались неверными, и все из-за одной строки кода

Цель

Владелец магазина попросил ИИ-ассистента посчитать ключевые цифры квартала, «точные, для презентации инвестору», и хотел понять, можно ли отчёту доверять.

Сложность

Отчёт выглядел аккуратно: 113 цифр, чистый код, никаких видимых ошибок. Своё допущение о доставке отчёт назвал для полных возвратов, а к частичным применил молча. А по выгрузке не видно, входила ли доставка в частичный возврат.

Решение

Все 113 цифр просмотрены по 38 определениям, на которые письменно ответили до подсчёта: что считать продажей, как учитывать НДС, доставку и возвраты, какую дату брать. В этом кейсе на них ответила модель ИИ по поручению владельца, и документ фиксирует это у каждого правила; с настоящим клиентом отвечает клиент. 35 цифр, для которых у проверочного кода есть определение, пересчитаны по той же выгрузке Shopify отдельным кодом, который не видел отчёта.

Результат

27 из 35 сошлись до цента, 8 неверны, и все из-за одной строки кода, которая вычитала долю доставки из частичных возвратов. Чистые продажи завышены на 505,35 €, а та же строка сдвигает ещё 9 чисел, которые проверка не могла охватить. Остальные 78 цифр пересчитать нельзя, и у каждой названа причина: её нет в согласованных определениях, она помесячная, а определения дают квартал, она определена иначе или описывает чистку данных. Владелец получает отчёт с пометкой у каждого числа (7 страниц) и документ проверки (15 страниц).

Заметка к этому кейсу: Одна разумная строка кода и восемь неверных цифр