Кейси · Перевірка плагіна Claude
Безкоштовний плагін Anthropic Small Business, перевірений на синтетичній бухгалтерії
Власний кейс на синтетичній бухгалтерії й трьох синтетичних магазинах Shopify, Opus 5.5, три прогони на запитання. Незалежна перевірка, не пов'язана з Anthropic і не схвалена нею.
Мета
Багато невеликих компаній поставлять безкоштовний плагін Anthropic замість того, щоб платити за власні скіли. Питання: де він уже справляється, а чого власник усе одно не бачить?
Складність
44 скіли плагіна написані як інструкції, тож модель щоразу пише власний код. Де відповідь залежить від правила, якого власник не дав, плагін обирає сам, а новий запуск може обрати інше; арифметика правильна в будь-якому разі.
Рішення
Плагін закрив серпень за бухгалтерією з 12 внесеними проблемами, три прогони; відповів на дев'ять запитань власника з мого стенда, з найближчим скілом, викликаним на ім'я; і пройшов перевірку маршрутизації на простих формулюваннях, кожне в новій сесії. Кожну відповідь збережено, прочитано й порівняно з Claude без плагіна та з моїми скілами на тих самих магазинах.
Результат
Він знайшов усі 12 проблем у кожному прогоні й тримався своїх правил щодо чеків і дублів, тоді як Claude без плагіна в усіх трьох прогонах вимагав чек за каву на 14,20. Але виправлений P&L дав виручку 96 459,17, 94 396,54 і 96 680,77 у трьох прогонах; один прогон порахував замовлення з тегом «test», яке два інших виключили; а на запитання «Як минув серпень?» з вивантаженням у папці його скіли не запустилися в жодній із 27 сесій. Це не помилки: це те, чого загальний плагін не може знати про конкретний бізнес.
Докази
Усі відповіді, таблиці й прочитання (GitHub)
Сам плагін належить Anthropic (Apache-2.0) і в репозиторії не лежить.
Послуга
Скіли Claude для ваших файлів
Ваші правила підрахунку питаю один раз, перевіряю на ваших вивантаженнях і на тому, як питає ваша команда.