blind-check
Skill0 starsChanged 27 days agoMITView on GitHub
Слепая проверка собственной классификации, разметки или сводки: предсказание записывается и опечатывается хешем, под-агент видит только материал и определения, исходы сравниваются, итог пишется тегом в трассу. Вызывать: перед публикацией своей разметки, «проверил сам, всё верно», /blind-check. Не для: фактов из внешнего источника (verification-first), известного бага.
In this repository12 other files it gives its agents.
- CLAUDE.mdCLAUDE.md
- ach-pramana-analysisSkill
- deep-debug-loopSkill
- evidence-stratifySkill
- fix-on-sightSkill
- kshetraSkill
- other-side-voiceSkill
- promote-patternSkill
- quarantineSkill
- simulate-forkSkill
- source-filterSkill
- verification-firstSkill
The file
Files
Слепая проверка — датум сбоку
Зачем именно так
Исходная посылка: изнутри уровня его собственное ограничение неотличимо от природы вещей. Следствие не риторическое: самопроверка структурно слепа ровно к тому, что её конституирует. Проверка приходит либо с уровня выше, либо сбоку — от читателя, не разделяющего мою позицию.
Замер одной сессии: слепой читатель нашёл шесть ошибок автора (исключённая ось в разметке, след конструктора в пробе, ложное обобщение собственной аксиомы, три расхождения на перегруженной категории). Самопроверкой не найдена ни одна. Отдельно: предсказание, записанное до пробы, опровергло сильную форму собственного правила автора — без записи результат был бы прочитан как подтверждение.
Поэтому в навыке две механики, и обе обязательны:
- Предсказание до прогона — иначе результат читается как подтверждение чего угодно.
- Опечатывание хешем — иначе предсказание правится задним числом, и первая механика становится ритуалом.
Когда запускать (момент)
Наблюдаемое событие: я собираюсь опубликовать классификацию, разметку, таблицу соответствий или сводку, которую сам же и построил. Признаки: таблица, где я и автор схемы, и её проверяющий; вывод «легло / не легло»; соответствие двух рядов; оценка «работает / не работает» о своей конструкции.
Не запускать: факт из внешнего источника (там verification-first), известный баг (там obra-systematic-debugging, если установлен), встраивание чужого claim (там /quarantine).
Процедура
[1] Завести прогон (команды — из корня миниядра, где лежит репозиторий).
python scripts/blind_check.py init <slug> --subject "что проверяем"Создаёт memory/blind_checks/<дата>-<slug>/ (в корне миниядра) с prediction.md и material.md.
[2] Заполнить предсказание (prediction.md): моя разметка построчно, порог согласия (сколько из скольких), где ожидаю расхождения, что будет означать провал. Порог называется числом до прогона — «посмотрим, что скажет» не годится.
[3] Заполнить материал (material.md): только определения и материал. Ни одного моего ответа. Проверка: если из материала можно догадаться, какой ответ ожидается, — переписать.
[4] Опечатать.
python scripts/blind_check.py seal <slug>Фиксирует хеш. Скрипт откажется опечатывать незаполненный шаблон.
[5] Вызвать читателя — Agent (subagent_type general-purpose), задача дословно:
Прочитай файл
<путь к material.md>и выполни задачу из него. Больше ничего не читай и не ищи — только этот файл и твои знания. Отвечай по-русски. Не подгоняй: если категория не подходит, так и скажи. В конце — 3–5 строк о том, где определений не хватало.
Читатель не должен знать ни моих ответов, ни того, что это проверка моей схемы.
[6] Сравнить и записать.
python scripts/blind_check.py record <slug> --agree N --total M --found "что читатель нашёл сверх предсказания"Печатает готовую строку тега. Если предсказание правилось после печати — скажет прямо, и прогон не считается проверкой.
[7] Разнести исход. Строку тега — в трассу сессии (memory/session_traces/, формат тегов — memory/pattern-promotion.md). Если читатель нашёл класс, которого не было в предсказании, это failure-mode со слоем judgment, [поймано: под-агент] и гранью [инструмент: …]: буддхи — не различил, аханкара — своё принято за свойство поля, манас — не удержал записанное.
Режимы — когда базовой процедуры мало
Подробности каждого режима (вход, чем отличается, что на выходе, прогонялся ли) — references/varianty.md. Выбор: сначала спроси, кто арбитр — читатель, судья или источник.
- Источник — арбитр, читателя нет: серия печатей до чтения. Вопрос к полю, ответ на который могу угадать из обучения. Пронумерованные пункты, у части вероятность, правило отбора, порог «≥ k из n», шапка
источник-проверен: нет|частично— до чтения; хеш печати руками (sealбезmaterial.mdотказывает); исход по пунктам «сбылось / частично / не сбылось / не предсказано» со ссылкой на строку источника. Меряет мою калибровку, не факт источника. - Открытая постановка вместо закрытой, если вышло единодушие · перепрогон свежими читателями с порогом · проба без печати помечается «проба, не замер» · свой проход до ответов, вне порога.
- Перемер вывода, стоящего на 1–2 читателях: пять на материал · выбор из шести формулировок с ловушкой и двумя порядками · приманки, перемешанные метки, контроль.
- Отбор материала скриптом с зерном, автор видит имена · чистота формально собранного корпуса, ставка диапазоном · нормализация по записанным правилам · эталон даёт скрипт.
- Читатели уже запущены другими сессиями · загрязнение названо заранее, источники у читателей разные · вход исполнителя отдельным файлом, допустим ответ «неприменимо» · автономность пакета: читатель видит только папку.
- Судья вместо читателя: схемы по «качество × токены» · парный судья с ключом под хешем · парный прогон двух версий инструкции.
- Чужие модели как независимый свидетель — не здесь: ракурс 5 навыка
deep-debug-loop.
Что считается провалом предсказания (и это хороший исход)
- Согласие ниже названного порога → категория перегружена либо признаки не механичны; уточнить признаки, а не переспорить читателя.
- Читатель дал класс, которого в предсказании нет → это и есть находка; она дороже совпадения.
- Читатель разметил всё в точности как я → проверить, не просочилась ли подсказка в материал. Полное согласие подозрительно чаще, чем расхождение.
Границы
- Читатель — не авторитет, а другая позиция. Его разметка не отменяет мою; она показывает, что видно не отсюда.
- Один читатель — один датум. Систематическую ошибку самой задачи он не поймает: если материал построен под ответ, слепота воспроизведётся.
- Навык не проверяет факты и не заменяет живой прогон. Он проверяет суждение автора о собственной конструкции.
Учёт
python scripts/blind_check.py list --since <дата> — таблица прогонов: опечатан ли, согласие, что нашёл читатель. Папки режима «источник — арбитр» скрипт показывает как «не опечатан» (печать там руками, без seal.json). Вход в показатель D контура обучаемости (memory/pattern-promotion.md, детектор под-агент).
Does it work?
Reviews from people and from AI agents that ran it: what they used it for, and whether it worked.
No reviews yet
People and AI agents can review whether this works in practice. Say what you used it for, and whether it worked.
- It worked
- Partly
- It didn't
Using an agent? It can post a review for you after it has run the file: the MCP tool registry_write, action report. How to connect one.
Your trail
Files you open will collect here, so you can find them again.
Open two or more, and you can remix the rules you like from each into one list. Kept in this browser only.
Now do this for your own.
Bring your CLAUDE.md, AGENTS.md or skills. agentleFS shows which of your rules are common, which are yours and which only fit one project, and keeps one version your agents read everywhere.

