Все исследования

Исследование

Фабрика исследований

Как мультиагентный конвейер провёл реальный аудит завода и собрал из него книгу, которая поймала ошибки в самой себе — с открытым реестром верифицированных утверждений.

7 глав, 3 открыто без регистрации.

Данные, которым нельзя верить

Наверх ушло слово «внедрили». Вниз — датчики за 500 тысяч, лежащие в карманах рабочих. Модель, обученная на таком отчёте, ускоряет не производство, а ошибку.

Один полевой пилот на промышленном предприятии и один производственный день сборки — N=1, границы обобщения расписаны в самом издании. Смотреть здесь стоит не на вывод, а на цех: как из 19:57:11 записанных интервью получается пакет документов, почему шапка реестра обещала 156 болей, а пересчёт тела дал 88, и как готовая книга нашла арифметически невозможную таблицу в собственной главе про ловлю невязок.

Как это было

Я приехал на предприятие с готовым набором гипотез. Первое, что выяснилось: датчики стоимостью полмиллиона за штуку лежат в карманах рабочих, а наверх ушло «внедрили». Второе: ~21–22% штата живёт вне официального учёта — значит любая производительность «на официальную численность» смещена системно, до всякого ИИ.

Дальше начинается собственно фабрика. 19:57:11 — это не оценка длительности интервью, а сумма таймкодов: пересчёт первички вместо доверия к отчёту. Реестр обещал 156 болей, пересчёт тела дал 88 — клиенту ушла вторая цифра. Это же правило легло в конвейер издания: не верь шапке, верь пересчёту тела.

В производственный день книга собрала сама себя: 5 инструментов, 182 субагента, 21 609 960 измеренных токенов — и один вендор, вычеркнутый из итога за отсутствие телеметрии. Затем 22 агента проверили результат и нашли арифметически невозможную таблицу — в главе о ловле арифметических невязок. Опубликованы оба факта: и таблица, и протокол её поимки.

Три приёма из издания

Каждый приём ведёт в открытую главу, где он разобран целиком.

Что вы унесёте

По одному пункту на главу — без обещаний на будущее.

  1. 01

    Отчёт ≠ внедрение

    Как отличить внедрение от отчёта о внедрении.

  2. 02

    Цифра, выдержавшая пересчёт

    Как считать первичку так, чтобы цифра выдержала пересчёт на стороне клиента.

  3. 03

    Антагонист в чистой сессии

    Почему автор не может быть своим проверяющим и что делает антагонист в чистой сессии.

  4. 04

    Из чего состоит день сборки

    Из чего физически состоит день, в который исследование собирается.

  5. 05

    Самопроверка, которая ловит

    Как встроить самопроверку, которая ловит вас, а не хвалит.

  6. 06

    Себестоимость — это человек

    Почему дешевеющие модели почти не меняют себестоимость исследования.

  7. 07

    Окно и дата пересмотра

    Где окно возможности и по какой дате оно пересматривается.

Дополнительно к тексту

Как читать это издание

Это не учебник и не кейс-стади. Это фабрика исследований, показанная в работе: цех, телеметрия, смета — и обязательно брак с протоколом того, как его поймали и что он стоил. N=1: в основе один полевой пилот и один производственный день, генерализация ограничена — её границы честно расписаны в главе 7.

Счётчик честности

Каждое несущее и продающее число этого издания — клейм в открытом реестре с вердиктом верификации:

49 клеймов: 39 confirmed · 8 corrected · 0 refuted · 2 unverifiable

В главе 5 встретится другой счётчик — 44 клейма: это улов самопроверки первой сборки в производственный день; 49 — текущий реестр издания после финализации. Исправленные не спрятаны: у каждого corrected опубликованы обе версии — «было» и «стало» — с причиной замены. Фильтр реестра по corrected открыт; мы советуем начинать проверку доверия именно с него.

Правило, из которого вырос этот реестр, — «не верь шапке, верь пересчёту тела» — можно исполнить самостоятельно: его публичная версия живёт на /gate. Вставьте свой отчёт — гейт пересчитает заявленное в шапке против тела документа прямо в браузере.

Легенда градаций

  • measured — снято телеметрией или пересчётом первички (run_id, wc, суммы таймкодов);
  • estimated — модельная оценка с объявленными допущениями;
  • self-reported — заявлено участником без независимого следа (в measured-итоги не входит);
  • confirmed / corrected / unverifiable — вердикты реестра клеймов.

Легенда объявляется один раз — здесь; дальше в тексте только маркировка.

Маршрут

Карта глав — ниже: у каждой главы есть крючок и одна выделенная цифра; выделенные цифры не повторяются между главами — у каждой выделенной цифры один дом.

Три главы открыты и образуют завершённую мини-историю: глава 1 — почему нельзя верить доложенным данным, глава 2 — как из 20 часов интервью делается пакет документов, глава 4 — судовой журнал дня, в который эта книга собрала сама себя. Остальные четыре — контур доверия, самопроверка издания, экономика и прогноз — открываются после регистрации.

Счётчик честности

Каждое несущее число издания — утверждение в открытом реестре с вердиктом независимой проверки. Исправленные не спрятаны: у каждого опубликованы обе версии.

7 глав — карта

  1. 0110 минЧитать

    Датчики в кармане

    Датчики за 500 тысяч лежали в карманах рабочих — наверх ушло «внедрили». ИИ на таких данных не бесполезен, он вреден.

  2. 0211 минЧитать

    19:57:11

    Реестр обещал 156 болей. Пересчёт тела дал 88 — и только эта цифра пошла клиенту.

  3. 0310 минПо регистрации

    Автор не проверяет себя

    Источник «Gemini Research» выглядел как консалтинговая фирма. Фирмы не существует — существует генеративный ИИ. Поймал не автор — поймал антагонист в чистой сессии.

  4. 0411 минЧитать

    Фабрика, собравшая эту книгу

    Эта книга собрала сама себя за один день: 5 инструментов, 182 субагента, 21,6 млн токенов — и один вендор, вычеркнутый из итога за отсутствие телеметрии.

  5. 0511 минПо регистрации

    Книга поймала себя за руку

    22 агента проверили готовую книгу и нашли арифметически невозможную таблицу — в главе про ловлю арифметических невязок. Оба факта опубликованы.

  6. 0610 минПо регистрации

    Труд = 99,4%

    Счёт за токены — арифметическая пыль: 99,4% себестоимости исследования — это человек. Дешевеющие модели не изменят почти ничего.

  7. 0710 минПо регистрации

    2027: фабрики как категория

    0 из 9 вендоров публикуют исполняемый контур честности. Это не приговор рынку — это окно, и у него есть дата истечения.

Что дальше

Читать открытую главу

Датчики в кармане

Открытые главы читаются целиком и без регистрации — начните с первой.

Инструмент-спутник

Приёмный гейт

Правило, из которого вырос реестр этого издания, — «не верь шапке, верь пересчёту тела». Вставьте свой отчёт: гейт пересчитает заявленные числа против тела документа прямо в браузере, без сети и без LLM.

Реестр верифицированных утверждений

Каждое утверждение — атомарно цитируемый блок с постоянным якорем и вердиктом независимой проверки. Фильтр «исправлено» открыт: с него мы советуем начинать проверку доверия.

Показано 12 из 49

  1. 01ПодтвержденоДатчики в кармане

    Теневой контингент — ~21–22% штата пилотного завода вне официального учёта (аутсорс-контингент + внеучётные работники); реальная численность выше официальной на ~15–20%, поэтому производительность и себестоимость «на официальную численность» систематически искажены

    Первичка исследования (внутренний артефакт)

  2. 02ПодтвержденоДатчики в кармане

    Датчики мониторинга (~500 тыс. ₽/шт) лежали в карманах рабочих «чтобы не получить штраф»; по вертикали доложено «внедрили» — вскрыто просьбой «покажите на экране» (потёмкинская цифровизация, флаг [POTEMKIN?] + Gemba-тесты)

    Первичка исследования (внутренний артефакт)

  3. 03ПодтвержденоДатчики в кармане

    Официальная рентабельность около 1% названа инсайдером «фикцией» (реальная — в несколько раз выше, «два контура учёта») — намеренная фальсификация учёта под налоговую оптимизацию

    Первичка исследования (внутренний артефакт)

  4. 04ПодтвержденоДатчики в кармане

    У коммерческих LLM с поиском и deep-research агентов 3–13% URL-цитат сфабрикованы (нет ни живой страницы, ни архивного снапшота), 5–18% не резолвятся всего (10 моделей; DRBench 53 090 URL + ExpertQA 168 021 URL)

    Источник: arxiv.org
  5. 05ПодтвержденоДатчики в кармане

    Deep-research агенты галлюцинируют URL статистически значимо чаще search-augmented моделей: pooled 10,7% [10,2–11,2] против 4,8% [4,3–5,2], z=15,15, p<10⁻⁵¹

    Источник: arxiv.org
  6. 06ПодтвержденоДатчики в кармане

    0 упоминаний руководителя ИТ-направления за 27 интервью — «молчание = данные»: формальная улика оргизоляции ИТ, а не пробел корпуса

    Первичка исследования (внутренний артефакт)

  7. 07Подтверждено19:57:11

    19:57:11 — сумма таймкодов 34 файлов интервью (24 роли-респондента, ~4 месяца поля); кросс-проверка вторым способом: 218 822 слова расшифровок по wc -w

    Первичка исследования (внутренний артефакт)

  8. 08Исправлено19:57:11

    Реестр болей: 88 дедуплицированных записей (PP-FINAL-001…088 без пропусков) — единственная защищаемая цифра тела реестра

    Первичка исследования (внутренний артефакт)

  9. 09Исправлено19:57:11

    Из 17 гипотез 15 строго подтверждены (1 частично — H7, 1 расширена — H15, 0 опровергнуто)

    Первичка исследования (внутренний артефакт)

  10. 10Подтверждено19:57:11

    Флагманский клиентский отчёт — 2 279 строк / ~18 200 слов (≈90 страниц — claimed, согласуется с объёмом слов); клиентский пакет — 8 документов

    Первичка исследования (внутренний артефакт)

  11. 11Подтверждено19:57:11

    Аналитический конвейер пилота: 16 сессий за 2 календарных дня против плановых 14 дней; 5 стадий, 6 ролей агентов, 21 промпт-файл

    Первичка исследования (внутренний артефакт)

  12. 12Подтверждено19:57:11

    Срыв интервью с ИТ-руководителем: интервьюер совместил роли «диагност» и «продавец» и перешёл на личность; дословный финал респондента: «Всё. У меня нет времени. До свидания» → правило говорения ≤30/70 и красные линии интервьюера

    Первичка исследования (внутренний артефакт)

Автор

Вячеслав Федосеев

Вячеслав Федосеев

AI-эксперт для управленцев уровня C-Suite. Проектирует и внедряет агентные системы, консультирует руководителей по стратегии применения ИИ. Основатель F/ONE — портала «ИИ для тех, кто решает»: без хайпа, с цифрами и проверяемыми источниками.

Кто оркестрирует рой