T01 v2 · факты в тексте r3 (протокол § 6 п. 2) · 28.09.2026 19:40–20:05 МСК
Что: 36 карточек слепой приёмки r3 (контроль ChatGPT P4–P10 — 7; Gemini 3.1 Flash Image — 9, P10 не сгенерирован; Gemini 3 Pro Image — 10; GPT-5.4 Image 2 — 10). Тексты — транскрипции превью критиком r3 (blind-r3/raw-1..4.txt), не OCR и не моя перепечатка. Паспорта — inputs.json (P1–P3), inputs-c2.json (P4–P10). Как: check_facts_r3.py (правила check_facts.py + поиск цены/рейтинга/скидки/интерфейса) → runs/facts-check-r3.md и .json → ручная сверка каждой карточки ниже.
Классы (ручная сверка)
По протоколу ошибка — всё, чего нет в паспорте. Строгий счёт почти у всех API-карточек ненулевой, поэтому для статьи разложено на классы: - Грубая выдумка — то, что покупатель примет за свойство или условие продажи: цена, скидка, рейтинг, отзывы, макет экрана площадки; пол/возраст; «ручная работа», «премиум», «TOP SELLER», «эксклюзивно для WB»; утверждение по теме unknown (материал, размер, съёмность чехла, пригодность для напитков, защита «в любую погоду»). - Мягкая — неподтверждаемые качества: «лёгкий», «прочный», «долговечный», «мягкая», «эко». - Видимое, не в паспорте — то, что видно на исходном фото (принт динозавров, синий омбре, белый/зелёный, шоколадная глазурь). Не считается выдумкой; соответствие фото проверял критик в гейте S. - Оценка и назначение («стильный», «для джинсов», «для кухни») — не характеристика.
Итог по участникам (знаменатель — карточки участника в r3)
| Участник | n | карточек с грубой выдумкой | с мягкой (без грубой) | чистых | искажённых фактов паспорта |
|---|---|---|---|---|---|
| контроль ChatGPT (P4–P10) | 7 | 0 | 0 | 7 (3 — без текста) | 0 |
| GPT-5.4 Image 2 | 10 | 2 | 5 | 3 | 0 |
| Gemini 3 Pro Image | 10 | 7 | 2 | 1 (без текста) | 0 |
| Gemini 3.1 Flash Image | 9 | 5 | 2 | 2 | 0 |
Контроль P1–P3 (r1, check_facts.py): 0 выдумок на 3 карточках — всего у контроля 0/10. Искажений фактов паспорта (другой цвет, другое число) — 0 у всех: модели не врут про то, что дано, а дописывают то, чего не дано.
По карточкам
| Карта | Прогон | Грубая | Мягкая | Видимое, не в паспорте |
|---|---|---|---|---|
| X19 | Agflash-P1 | «МУЖСКОЙ», «ПРЕМИУМ» | — | — |
| X04 | Agpro-P1 | макет экрана WB: цена 1 300 ₽ / 1 390 ₽, «53 %», «Добавить в корзину»; «мужской» | «надёжный» | — |
| X32 | Agpt54-P1 | — | — | — |
| X08 | Agflash-P2 | «ЭКСКЛЮЗИВНО ДЛЯ WILDBERRIES», «подходят для мелких пород» (размер — unknown) | — | дино-принт |
| X24 | Agpro-P2 | макет экрана WB (время, дата, заряд) | «полная защита лап» | принт динозавров |
| X20 | Agpt54-P2 | «защита лап от грязи и пыли в любую погоду» (водостойкость — unknown) | — | — |
| X33 | Agflash-P3 | — | — | — |
| X13 | Agpro-P3 | «винтовая крышка», «подходит для холодных напитков» (тема unknown) | «лёгкий вес» | — |
| X12 | Agpt54-P3 | — | «лёгкая» | — |
| X21 | Agflash-P4 | — | — | — |
| X09 | Agpro-P4 | «унисекс, для мужчин и женщин», «коричневые кожаные элементы» (материал накладки — unknown) | «долговечность» | серебристая пряжка |
| X15 | Agpt54-P4 | — | «надёжная застёжка» | — |
| X10 | C-P4 | — | — | — |
| X28 | Agflash-P5 | «Ручная работа», «TOP SELLER» | — | — |
| X01 | Agpro-P5 | «женский» | — | синий омбре |
| X26 | Agpt54-P5 | «Ручная работа» | — | — |
| X27 | C-P5 | — (текста нет) | — | — |
| X05 | Agflash-P6 | — | «ЭКО-ДОСКА», «экологичный» | — |
| X30 | Agpro-P6 | макет экрана WB: цена 2 099,09 ₽, рейтинг 4.7 (182), «Добавить в корзину» | — | — |
| X07 | Agpt54-P6 | — | «надёжная и прочная» | — |
| X25 | C-P6 | — | — | — |
| X35 | Agflash-P7 | «РУЧНАЯ РАБОТА», «ЧЕХОЛ НЕ СЪЕМНЫЙ» (unknown), кнопка «В КОРЗИНУ» | — | 4 сердца, синие и серые тона |
| X02 | Agpro-P7 | — (текста нет) | — | — |
| X14 | Agpt54-P7 | — | — | — |
| X06 | C-P7 | — (текста нет) | — | — |
| X22 | Agflash-P8 | — | «мягкая» (наполнитель — unknown, но это свойство подушки вообще) | шоколадная глазурь |
| X17 | Agpro-P8 | — | «мягкая и удобная» | шоколадная глазурь, посыпка |
| X03 | Agpt54-P8 | — | — | — |
| X29 | C-P8 | — | — | — |
| X31 | Agflash-P9 | макет Ozon: 1 490 ₽, −20 %, «Скидка Ozon карта» | — | — |
| X11 | Agpro-P9 | — | «прочный корпус», «долгий срок службы» | — |
| X18 | Agpt54-P9 | — | «прочный корпус и долговечные материалы» | — |
| X16 | C-P9 | — (текста нет) | — | — |
| X23 | Agpro-P10 | «для бани», «лёгкий в уходе и долговечный материал» (вид пластика — unknown) | «прочный» | белый/зелёный, «эффект мрамора» |
| X36 | Agpt54-P10 | — | «лёгкий, прочный и долговечный» | — |
| X34 | C-P10 | — | — | — |
Расхождения скрипта и ручной сверки
- Скрипт помечает «выдумка?» 221 из 351 единицы текста у API-моделей и 0 из 11 у контроля: почти все срабатывания — оценки и служебные слова («WILDBERRIES», «Описание», «на каждый день»), которых нет в словаре
EVAL. Для итога годится только ручная сверка; скрипт полезен как отбор (жёсткие шаблоны отметили 5 карточек — 4 макета экрана площадки и кнопку «В КОРЗИНУ»; ручная сверка нашла те же 5, лишних 0). - Тему
unknownскрипт поймал верно в 1 карточке из 6 по ручной сверке (X08 «размер»); X17 «Оригинальная» → «бренд» — ложное срабатывание. КорниUNKNOWN_ROOTSне знают «съёмный», «кожаный», «холодных напитков», «в любую погоду». Словарь не расширяла: итог ручной, а подгонка словаря под эти 36 карточек ничего не проверит.
Вывод для статьи
- Контроль (ChatGPT по подписке, промпт протокола) — 0 выдумок на 10 карточках, но короткий текст: 3–5 строк или без надписей.
- Модели через API пишут длиннее и дописывают: GPT-5.4 — в основном мягкие качества (грубое — 2 из 10: «ручная работа», «защита в любую погоду»); Gemini Pro и Flash — пол, «ручная работа», статус и в 4 карточках рисуют экран площадки, в 3 из них — с выдуманной ценой, скидкой или рейтингом. Такую карточку нельзя загружать без правки текста.
- Практический совет: в промпте запрещать цену, рейтинг, интерфейс площадки, пол и материал, если их нет в паспорте; после генерации — вычитка текста против паспорта. Эффект такого промпта не проверялся (не проверено).
Не проверено
- Транскрипция — критика по превью 300×400; мелкий текст (строки статуса, сноски) мог быть прочитан с ошибками. Сверка выборочно по большим файлам — не делалась.
- «Видимое, не в паспорте» сверено с исходниками только через гейт S критика, не мной.
- Площадки (п. 4) и цена карточки (п. 5) — следующий шаг.