Hypothesis Audit: инструмент, который ищет провалы, а не подтверждения

Пайплайн систематической проверки гипотезы по литературе с прицелом на неудачные проверки: сбор по восьми источникам, двойной скрининг, каппа Коэна и оценка полноты поиска.

Hypothesis Audit: инструмент, который ищет провалы, а не подтверждения
INGELLO / BUSINESS2835
Связаться с нами

Hypothesis Audit проверяет гипотезу по литературе с обратным прицелом: он ищет не тех, у кого получилось, а тех, у кого не получилось. Именно эта часть знания обычно теряется и стоит дороже всего.

Почему обычный поиск не находит неудачи

  • Publication bias: нулевые результаты реже публикуются и реже попадают в заголовок и аннотацию;
  • Language bias: неудача формулируется мягко: «modest», «limited», «did not generalize»;
  • Venue bias: неудачные результаты живут в workshop-статьях, диссертациях, препринтах и репозиториях;
  • Registry gap: исследование зарегистрировано, но так и не опубликовано.

Как устроен пайплайн

Сбор идёт по восьми источникам сразу, включая препринты, реестры регистраций, репозитории кода и базы клинических исследований, с декартовым произведением фраз «состояние × сигнал» и специальными запросами с отрицаниями. Дальше, эвристический предфильтр с уровнями, добор аннотаций по DOI, citation chasing от затравок и всех включённых работ до насыщения.

Скрининг двойной и независимый, с расчётом каппы Коэна и арбитражем конфликтов третьим рейтером. На выходе, вердикты по подгипотезам, полярность по типу сигнала и дизайну, оценка полноты поиска методом повторного захвата, кривая насыщения и список кандидатов «в ящик стола».

Полная прослеживаемость

Каждая запись хранит, какой именно запрос или цитирование её нашли. От финального вывода можно дойти до исходного источника, не восстанавливая путь по памяти.

Схема данных

Из чего состоит база проекта и как связаны сущности.

HYPOTHESIS AUDIT: Схема данных

Контур системы

Из каких частей собран проект.

HYPOTHESIS AUDIT: Контур системы

Где посмотреть

У проекта нет публичного адреса: он работает локально или на закрытом контуре и наружу не выкладывается. Показываем его на демонстрации, по записи.

Технологический стек и подходы

SaaS архитектура Микросервисы Облачные вычисления Масштабируемость ПО API интеграции DevOps процессы High-load системы Кибербезопасность решений

Частые вопросы

01Зачем искать неудачные исследования?

Потому что решение о запуске продукта или гранта чаще ломается не об отсутствие подтверждений, а об уже известные провалы, которые просто не видны в обычном поиске.

02Насколько полон поиск?

Полнота оценивается количественно методом повторного захвата и кривой насыщения, а не на глаз. Это даёт честную оценку того, сколько работ осталось ненайденными.

03Кому это нужно?

Исследовательским группам, медтех- и биотех-компаниям, инвесторам и продуктовым командам, которые проверяют научно обоснованную гипотезу до вложений.