Статус: промежуточный, открыт для дополнений и калибровки v2.0/3.2
Источники: LLM-пайплайн (4 этапа), экспертная разметка (JSON), авторская рефлексия (ответ Юлии Руна)
Дата: 2026-09-29
Проект: Оцифровка культурного кода» (Главная страница проекта | Хроника проекта)
1. Контекст и место кейса в архитектуре проекта
Проект «Оцифровка культурного кода» предполагает каскадную валидацию: четыре независимых LLM-агента анализируют полный текст книги, синтезатор проводит кросс-валидацию, затем результаты сверяются с экспертной разметкой. Кейс Медары — один из немногих, где доступен третий источник: авторская рефлексия, полученная через письмо-опросник.
Объект анализа
Кейс построен на материале романа «Оазис. Сила мёртвых корней» авторства Юлии Руны.
Произведение опубликовано на платформе Author.Today и доступно по ссылке: https://author.today/work/639164. Это первая книга цикла «Оазис» — бытовое фэнтези о героине, которая после переноса в чужое тело пытается остановить наступление пустыни, используя научные знания и союз с древними духами (дивами). Для настоящего кейса использован полный текст первой книги; авторская рефлексия получена в виде ответов на опросник из 10 вопросов, соответствующих шкалам сценарного вектора.
Данный кейс прецедентный. Он позволяет проверить не только точность LLM-реконструкции, но и границы метода: где автоматический анализ совпадает с экспертом, где расходится, и что добавляет авторский уровень, недоступный ни LLM, ни эксперту.
2. Данные и метод
LLM-пайплайн: четыре этапа — сюжетно-семантический профиль, поведенческая динамика, психоаналитический журнал, анализ внешних оценок. Результат — 10 оцифрованных шкал.
Экспертная разметка: независимый читатель-эксперт, JSON с 10 шкалами, интегральный индекс надёжности 5.0, флаги дефицита данных отсутствуют.
Авторская рефлексия: ответ Юлии Руна на 10 вопросов, соответствующих шкалам. Формат — свободный, без принудительной оцифровки.
Метод сравнения: покомпонентный анализ по 10 шкалам. Типология расхождений: «инсайт» (вскрытие скрытого слоя), «ошибка» (противоречие тексту), «спорный случай» (разная операционализация или недостаток данных).
3. Результаты: совпадения
| Шкала | LLM | Эксперт | Автор | Итог |
Scale_of_Goals | Выживание → статус → экологическая миссия | 3 | Выживание → статус → миссия | Совпадение |
Social_Radius | Себя, Кирад, дивы, оазис, земля | 3 | Я → мои → наши → мир | Совпадение |
Type_of_Agency | От реактивности к скрытому архитектору | 3 | Проактивна со второй трети | Совпадение |
Scenario_Autonomy | Внешняя конформность при внутреннем отказе | 3 | Подтачивает изнутри, не бунтует | Совпадение |
Cognitive_Flexibility | Смена парадигмы, интеграция науки и магии | 3 | Глубокая эволюция, смена парадигмы | Совпадение |
Scenario_Final | Не свобода, но не исходная жертва | 2 | Не триумф и не крах; выбор и наследие | Частичное |
Вывод: ядро сценарного вектора воспроизводится надёжно. Совпадение по 6 шкалам из 10 — выше заявленного порога. LLM улавливает структурную логику персонажа, а не генерирует правдоподобный текст.
4. Результаты: расхождения
4.1. Crisis_Strategy: «Conformism» vs сложная динамика
Эксперт: Conformism.
LLM: «Замирание → анализ → действие через союзников».
Автор: «Не бежит и не прячется, ищет выход… стратегическое отступление».
Эксперт читает кризисное поведение через внешний паттерн: Медара подчиняется отцу, генералу, скрывает связь с дивами. LLM фиксирует внутреннюю динамику: паника подавляется, затем следует анализ. Автор подтверждает вторую трактовку: для неё это не конформизм, а стратегическое отступление.
Тип расхождения: спорный случай. Разная операционализация шкалы: поведение vs внутренняя позиция.
4.2. Social_Validation: «Rejection» vs «влияние без принятия»
Эксперт: Rejection.
LLM: «Не изгой, но не полностью принята».
Автор: «Не изгой… но и не полностью принята… все вынуждены с ней считаться».
Эксперт усиливает негатив. LLM и автор смещают акцент на влияние. Автор прямо формулирует: «Её сценарий успеха — не “все её полюбили”, а “все вынуждены с ней считаться”».
Тип расхождения: спорный случай. Шкала одномерна, тогда как реальность требует минимум двух осей: принятие/отвержение × влияние/игнорирование.
4.3. Author_Verdict: «Sympathy_Justification» vs «ирония и дистанция»
Эксперт: Sympathy_Justification.
LLM: «Сочувствие + идеализация».
Автор: «Сопереживаю, но вижу недостатки… смотрю с лёгкой иронией… “щёлкаю её по носу”».
LLM и эксперт сходятся между собой, но оба расходятся с автором. Авторская позиция сложнее: любовь + ирония + дистанция. ИИ принял эмпатию за идеализацию, не уловив иронического модуса.
Тип расхождения: инсайт. Авторский уровень вскрывает слой, недоступный текстуальному анализу.
4.4. Финал: «новое подчинение» vs «выбор и наследие»
LLM: «Новое подчинение, пусть и более почётное»; «трагическая ирония вместо освобождения».
Автор: «Принятие судьбы как выбора… она больше не вещь… я поняла, как играть в эту игру, и буду делать это по своим правилам».
Ключевое расхождение. LLM читает финал как продолжение несвободы. Автор настаивает на агентности: отъезд — стратегическое решение, а не пассивная передача себя. В тексте есть основания для обеих трактовок, но авторский замысел смещает акцент с «поднадзорности» на «игру по своим правилам».
Тип расхождения: спорный случай + горизонт замысла. Автор описывает цикл, LLM — первую книгу.
5. Диагностика расхождений
5.1. Одномерная операционализация шкал
Шкалы Crisis_Strategy и Social_Validation в текущей версии одномерны. Реальность требует многомерности:
- Кризис: декларация / поведение / внутренняя позиция. Эксперт оценивал поведение, LLM— внутреннюю позицию. Оба правы в своих рамках.
- Социальная валидация: принятие/отвержение × влияние/игнорирование. Медара — не
Rejectionв чистом виде, а вынужденное признание без принятия.
5.2. Отсутствие авторского уровня в валидации
LLM и эксперт могут сходиться между собой, но расходиться с автором. Причина — разница онтологических уровней: текст (что написано) vs замысел (что автор имел в виду, включая будущие книги). Без авторского уровня валидация остаётся неполной.
5.3. Горизонт замысла
Автор описывает цикл из трёх книг. LLM анализирует первую. Отсюда расхождения в оценке финала: для автора это этап пути, для LLM — точка.
6. Выводы для калибровки v2.0
- Трёхуровневая операционализация шкал: декларация / поведение / внутренняя позиция. Это снимет расхождение по
Crisis_Strategy. - Многомерность социальной валидации: принятие/отвержение × влияние/игнорирование. Это снимет расхождение по
Social_Validation. - Протокол авторской валидации: отдельный этап, где авторские ответы сравниваются с LLM и экспертной разметкой. Формат — свободная рефлексия + оцифровка постфактум.
- Шкала горизонта замысла: одна книга / цикл. Это позволит различать «финал текста» и «финал замысла».
- Усложнение практической модели «Сценарного контраста»: карточки персонажей должны сопровождаться авторскими комментариями, где это возможно.
7. Открытые вопросы
- Как формализовать авторскую рефлексию, не сводя её к «правильному ответу»?
- Нужна ли отдельная шкала для горизонта замысла?
- Какие ещё кейсы дадут аналогичную тройную валидацию?
- Как избежать системной ошибки: LLM + эксперт сходятся, но оба расходятся с автором?
8. Приложения
Приложение А. JSON экспертной разметки. Скачать json →
Приложение Б. Ответ автора (с разрешения). Скачать pdf →
Приложение В. Сводная таблица по 10 шкалам. Скачать pdf →
Итог
Кейс Медары подтверждает методологическую устойчивость пайплайна: ядро сценарного вектора воспроизводится надёжно. Одновременно он вскрывает три системные границы текущей версии: одномерность шкал кризиса и социальной валидации, отсутствие авторского уровня, разницу горизонтов замысла. Эти границы — точки роста для калибровки промпта. Кейс приглашает коллег к обсуждению и дополнению.