Our Evidence Framework

Обзор

PeptideInsight использует структурированную систему оценки доказательств, чтобы помочь читателям быстро оценить качество и количество научных исследований, лежащих в основе каждого пептида и заявленных эффектов. Эта система основана на принципах доказательной медицины (Evidence-Based Medicine, EBM) и адаптирована специально для ландшафта исследований пептидов, где большая часть доступных данных является доклинической.

Оценки доказательств присваиваются для каждого пептида и, где применимо, для каждого конкретного заявленного эффекта. Один пептид может иметь сильные доказательства для одного применения, умеренные доказательства для другого и только доклинические данные для третьего. Эта детализация важна, поскольку маркетинговые материалы и онлайн-обсуждения часто обобщают наиболее подтвержденное использование пептида для всех его заявленных преимуществ.

Иерархия доказательств

Прежде чем объяснять нашу конкретную систему оценки, важно понять более широкую иерархию научных доказательств, которая лежит в ее основе. Перечислено от самого сильного к самому слабому:

Уровень 1: Систематические обзоры и мета-анализы

Систематический обзор использует предопределенную, воспроизводимую стратегию поиска для выявления всех релевантных исследований по вопросу, затем критически оценивает и синтезирует их результаты. Мета-анализ идет дальше, статистически объединяя количественные результаты нескольких исследований для получения обобщенной оценки эффекта с большей точностью, чем любое отдельное исследование.

Почему это самый высокий уровень: Агрегируя данные из нескольких испытаний, мета-анализы увеличивают статистическую мощность, могут выявлять небольшие, но реальные эффекты и помогают определить согласованность (или несогласованность) результатов в различных популяциях и условиях.

Оговорки: Мета-анализ хорош настолько, насколько хороши включенные в него исследования. Объединение ошибочных исследований приводит к ошибочному синтезу — «мусор на входе, мусор на выходе». Гетерогенность между исследованиями (различные популяции, дозировки, конечные точки) может сделать объединение неуместным.

Уровень 2: Рандомизированные контролируемые исследования (РКИ)

Участники случайным образом распределяются для получения либо лечения, либо контроля (плацебо или активного компаратора). Рандомизация минимизирует систематическую ошибку отбора и уравновешивает известные и неизвестные смешивающие факторы между группами. Двойное слепое исследование (ни участник, ни исследователь не знают о назначении) дополнительно снижает систематическую ошибку измерения и отчетности.

Почему это высокий уровень: Рандомизация — самый надежный метод установления причинно-следственной связи. Если единственное систематическое различие между группами — это лечение, то различия в исходах можно отнести к лечению.

Ключевые факторы качества:

Размер выборки и статистическая мощность
Адекватность рандомизации и сокрытия распределения
Слепое исследование (одностороннее, двойное или открытое)
Анализ по намерению лечить (intention-to-treat analysis)
Предварительно определенные первичные конечные точки
Уровень выбывания и обработка пропущенных данных
Продолжительность наблюдения

Уровень 3: Когортные исследования

Наблюдательные исследования, которые отслеживают группы людей с течением времени, сравнивая тех, кто подвергался воздействию фактора (или лечения), с теми, кто не подвергался. Проспективные когортные исследования отслеживают участников вперед во времени; ретроспективные когорты смотрят назад на исторические данные.

Сильные стороны: Могут изучать долгосрочные исходы, редкие воздействия и множественные исходы одновременно. Полезны, когда РКИ были бы неэтичными или непрактичными.

Слабые стороны: Не могут установить причинно-следственную связь из-за смешивающих переменных. Люди, которые решают принимать пептид, могут систематически отличаться от тех, кто этого не делает.

Уровень 4: Исследования «случай-контроль»

Исследователи идентифицируют людей с исходом (случаи) и без него (контроли), а затем смотрят назад, чтобы сравнить воздействия. Полезны для изучения редких заболеваний.

Слабые стороны: Высоко подвержены систематической ошибке воспоминаний и систематической ошибке отбора. Не могут установить причинно-следственную связь.

Уровень 5: Серии случаев и отчеты о случаях

Описание отдельных пациентов или небольших групп пациентов. Они могут генерировать гипотезы и выявлять редкие нежелательные явления, но не могут установить эффективность или причинно-следственную связь.

Уровень 6: Исследования на животных (in vivo)

Исследования, проводимые на живых животных, чаще всего на мышах и крысах. Они предоставляют важную информацию о механизмах, токсичности и фармакокинетике в полной биологической системе, но результаты часто не транслируются на людей. Примерно 90% лекарств, успешных в исследованиях на животных, терпят неудачу в клинических испытаниях на людях.

Уровень 7: Исследования in vitro

Эксперименты, проводимые на культурах клеток, тканевых препаратах или изолированных биохимических системах. Ценны для понимания молекулярных механизмов, но наиболее удалены от клинической значимости.

Уровень 8: Мнение экспертов и механистические рассуждения

Теоретические аргументы, основанные на известной биологии или консенсусе экспертов без прямого эмпирического тестирования. Самая слабая форма доказательств, хотя иногда и единственная доступная для новых соединений.

Наши четыре уровня доказательств

На основе вышеизложенной иерархии PeptideInsight присваивает одну из четырех оценок доказательств (плюс категорию «Недостаточно данных») для каждой пары пептид-показание.

Сильные доказательства

Критерии — должны быть выполнены все следующие условия:

По крайней мере два хорошо разработанных РКИ на людях с последовательными положительными результатами
Желательно подтверждено по крайней мере одним систематическим обзором или мета-анализом
Результаты, воспроизведенные независимыми исследовательскими группами (не все из одной лаборатории)
Опубликовано в рецензируемых журналах с установленными импакт-факторами
Клинически значимые размеры эффекта (не только статистически значимые)
Обычно имеется хотя бы одно одобрение FDA, EMA или другого крупного регулирующего органа

Что это означает для читателей: Доказательства подтверждают, что этот пептид работает для данного конкретного показания у людей, с известными параметрами безопасности. Это не означает, что пептид не имеет риска или подходит для всех пациентов.

Примеры:

Семаглутид для лечения диабета 2 типа и контроля веса (десятки РКИ фазы III, несколько мета-анализов)
Тирзепатид для лечения диабета 2 типа и ожирения (программы испытаний SURPASS и SURMOUNT)
Бремеланотид для лечения гипоактивного расстройства сексуального влечения у женщин в пременопаузе (испытания RECONNECT фазы III)
Октреотид для лечения акромегалии и карциноидного синдрома

Умеренные доказательства

Критерии — по крайней мере два из следующих:

Одно или несколько РКИ на людях с положительными результатами, но ограниченные по количеству, размеру выборки или объему
Множественные хорошо разработанные наблюдательные исследования на людях с последовательными результатами
Обширные и последовательные доклинические данные, подтверждающие правдоподобный механизм
Завершены или продолжаются клинические испытания как минимум фазы II
Данные более чем одной независимой исследовательской группы

Что это означает для читателей: Существуют значимые доказательства, предполагающие, что этот пептид может быть эффективен для данного показания, но доказательства еще не являются окончательными. Необходимы дальнейшие исследования на людях.

Примеры:

BPC-157 для восстановления тканей (обширные данные на животных из множества моделей, очень ограниченные формальные данные клинических испытаний на людях, но правдоподобный механизм)
Тимазин бета-4 для заживления ран роговицы (завершены испытания фазы II)
GHK-Cu для регенерации кожи (множество исследований in vivo и некоторые исследования на людях)

Предварительные доказательства

Критерии — по крайней мере один из следующих:

Исследования на людях на ранних стадиях (фаза I, пилотные исследования или небольшие серии случаев)
Последовательные положительные результаты исследований на животных из нескольких независимых исследовательских групп
Сильное механистическое обоснование, подтвержденное данными in vitro, но ограниченное подтверждение in vivo
Исследования в основном из одного географического региона или исследовательской группы, но с правдоподобной методологией

Что это означает для читателей: Существуют сигналы о том, что этот пептид может оказывать заявленное действие, но доказательства далеко не убедительны. Результаты на животных могут не транслироваться на людей, а ранние данные на людях слишком ограничены для уверенности.

Примеры:

Семакс для улучшения когнитивных функций (российские клинические исследования, ограниченное западное воспроизведение)
LL-37 для заживления ран (данные фазы I/II, обширные in vitro)
Ипаморелин для секреции гормона роста (данные фазы II, ограниченные данные фазы III)

Только доклинические

Критерии:

Доказательства ограничены исследованиями на животных (in vivo) и/или лабораторными исследованиями (in vitro)
Отсутствуют опубликованные данные клинических испытаний на людях для данного конкретного показания
Механизм предполагается на основе лабораторных данных, но трансляция на человека неопределенна
Могут быть данные только от одной исследовательской группы или одного типа животной модели

Что это означает для читателей: Этот пептид показал многообещающие результаты в лаборатории, но нет прямых доказательств его эффективности у людей для данного показания. Скачок от клеточной культуры или модели грызунов к терапии человека огромен, и большинство соединений, выглядящих многообещающе на этой стадии, никогда не становятся успешными лекарствами.

Примеры:

Эпиталон для активации теломеразы и борьбы со старением (в основном данные лаборатории Хавинсона)
DSIP для регуляции сна (животные модели, ограниченные и противоречивые данные на людях)
Многие новые или недавно открытые пептиды

Недостаточно данных

Публикаций слишком мало, чтобы сделать какой-либо осмысленный вывод. Пептид может быть очень новым, или имеющиеся исследования могут быть слишком редкими, плохо спланированными или противоречивыми, чтобы сделать какие-либо выводы.

Типы исследований, которые мы оцениваем

При обзоре литературы по пептиду мы учитываем следующие типы исследований и оцениваем их соответствующим образом:

Интервенционные исследования (эксперименты):

Рандомизированные контролируемые исследования (параллельные группы, перекрестные, факторные)
Нерандомизированные контролируемые исследования
Интервенционные исследования с одной группой (без контрольной группы)

Наблюдательные исследования:

Проспективные когортные исследования
Ретроспективные когортные исследования
Исследования «случай-контроль»
Поперечные исследования
Экологические исследования

Описательные исследования:

Серии случаев
Отчеты о случаях

Вторичные исследования:

Систематические обзоры (с мета-анализом или без)
Нарративные обзоры
Зонтичные обзоры (обзоры систематических обзоров)

Доклинические исследования:

Исследования на животных in vivo (грызуны, приматы, другие)
Исследования тканей ex vivo
Исследования культур клеток in vitro
Компьютерные исследования in silico

Статистические концепции, которые мы учитываем

P-значения

P-значение представляет собой вероятность получения результатов, по крайней мере, столь же экстремальных, как и полученные, при условии, что нулевая гипотеза (отсутствие эффекта) верна. P-значение 0,05 означает, что существует 5% вероятность получения таких результатов, если лечение на самом деле не имеет эффекта.

Что p-значения НЕ говорят вам:

Вероятность истинности или ложности гипотезы
Размер или клиническую важность эффекта
Будет ли результат воспроизведен

Мы отмечаем исследования, которые полагаются на пограничные p-значения (0,04–0,05) без адекватных размеров выборки, и исследования, которые тестируют множество исходов без корректировки на множественные сравнения.

Доверительные интервалы (ДИ)

95% доверительный интервал предоставляет диапазон, в котором, вероятно, находится истинный эффект. Более узкие интервалы указывают на более точные оценки. Мы предпочитаем исследования, которые сообщают доверительные интервалы, а не те, которые сообщают только p-значения, поскольку ДИ передают как величину, так и точность эффекта.

Ключевые правила интерпретации:

Если 95% ДИ для разницы пересекает ноль (или для отношения — 1,0), результат статистически незначим на уровне 0,05.
Широкие ДИ указывают на неточные оценки, часто из-за малых размеров выборки.
Два исследования могут быть как «значимыми», так и иметь очень разные величины эффекта.

Число, необходимое для лечения (ЧНЛ)

Количество пациентов, которых необходимо пролечить, чтобы один дополнительный пациент получил пользу. Более низкие ЧНЛ указывают на более эффективное лечение. ЧНЛ 1 означает, что каждый пациент получает пользу; ЧНЛ 100 означает, что необходимо пролечить 100 пациентов, чтобы один получил пользу. Мы используем ЧНЛ для контекстуализации клинической значимости, когда это возможно.

Отношение рисков (ОР)

Используется в основном в анализе выживаемости и исследованиях времени до наступления события. Отношение рисков 0,5 означает, что группа лечения имеет вдвое меньшую частоту события (например, смерти, прогрессирования заболевания) по сравнению с контрольной группой в любой данный момент времени. ОР 1,0 означает отсутствие разницы.

Абсолютное и относительное снижение риска

Мы уделяем пристальное внимание тому, сообщают ли исследования об абсолютном или относительном снижении риска, поскольку относительные меры могут вводить в заблуждение. Если лечение снижает риск с 2% до 1%, относительное снижение риска составляет 50% (звучит впечатляюще), но абсолютное снижение риска составляет всего 1% (менее впечатляюще). Оба числа технически верны, но абсолютное снижение лучше передает практическое воздействие.

Типы систематических ошибок, которые мы оцениваем

Систематическая ошибка отбора

Систематические различия между сравниваемыми группами. В РКИ это минимизируется надлежащей рандомизацией и сокрытием распределения. В наблюдательных исследованиях это является серьезной проблемой.

Систематическая ошибка публикации

Исследования с положительными результатами с большей вероятностью будут опубликованы, чем отрицательные. Это создает искаженную литературу, в которой методы лечения кажутся более эффективными, чем они есть на самом деле. Мы ищем признаки систематической ошибки публикации, включая асимметричные воронкообразные диаграммы в мета-анализах и зарегистрированные испытания, результаты которых так и не были опубликованы.

Систематическая ошибка финансирования

Исследования, финансируемые промышленностью, как правило, сообщают о благоприятных результатах чаще, чем исследования, финансируемые независимо. Мы отмечаем источники финансирования и оцениваем, могли ли коммерческие интересы повлиять на дизайн исследования.

Систематическая ошибка наблюдателя/обнаружения

Различия в том, как измеряются или оцениваются исходы между группами. Минимизируется путем ослепления оценщиков к назначению группы.

Систематическая ошибка отсева

Систематические различия в показателях выбывания между группами. Если больше пациентов выбывает из группы лечения (например, из-за побочных эффектов), оставшиеся участники могут быть не репрезентативными.

Систематическая ошибка отчетности

Выборочное представление результатов. Исследование может измерять 15 конечных точек, но сообщать только о 3, которые показали значимые результаты. Мы проверяем регистрации исследований (ClinicalTrials.gov) по сравнению с опубликованными результатами, чтобы выявить потенциальную систематическую ошибку отчетности.

Особые соображения: Пептиды Хавинсона

Несколько пептидов, обсуждаемых на PeptideInsight — включая Эпиталон, Вилон, Тималин и другие короткие пептиды — происходят в основном из лаборатории профессора Владимира Хавинсона в Санкт-Петербургском институте биорегуляции и геронтологии. Мы применяем дополнительную проверку к этим соединениям, потому что:

Большинство опубликованных исследований исходит из одной исследовательской группы
Многие исследования публикуются в русскоязычных журналах с ограниченным международным рецензированием
Некоторые заявленные механизмы (например, прямое взаимодействие с ДНК тетрапептидами) не имеют достаточного подтверждения в независимых биохимических исследованиях
Пептиды коммерчески продаются в России, что создает потенциальные конфликты интересов
Независимое воспроизведение западными исследовательскими группами очень ограничено

Это не означает, что эти пептиды неэффективны, но это означает, что доказательства следует интерпретировать с большей осторожностью. Мы явно отмечаем это ограничение одного источника в наших оценках доказательств.

Категории регуляторного статуса

Мы также отслеживаем регуляторный статус каждого пептида:

Одобрено FDA: Пептид одобрен Управлением по санитарному надзору за качеством пищевых продуктов и медикаментов США (FDA) для по крайней мере одного конкретного показания.
Одобрено EMA: Одобрено Европейским агентством лекарственных средств (EMA).
Одобрено в других юрисдикциях: Одобрено в конкретных странах (например, Россия, Япония, Австралия), но не FDA/EMA.
В клинических испытаниях: В настоящее время тестируется в зарегистрированных клинических испытаниях на людях (фаза I, II или III).
Исследуется: Активно исследуется, но еще не в формальных клинических испытаниях.
Исследовательское соединение: Доступно для лабораторных исследований; не одобрено для использования человеком.
Прекращено: Разработка остановлена из-за проблем с безопасностью, отсутствия эффективности или коммерческих причин.

Как мы присваиваем и обновляем оценки

Наш процесс оценки включает следующие шаги:

Поиск литературы: Мы ищем в PubMed, Google Scholar, ClinicalTrials.gov, Cochrane Library и EMBASE все опубликованные исследования по каждой паре пептид-показание.
Каталогизация исследований: Мы каталогизируем каждое релевантное исследование по дизайну, размеру выборки, качеству и источнику финансирования.
Оценка качества: Мы оцениваем качество исследований, используя установленные рамки (инструмент Cochrane Risk of Bias для РКИ, шкала Newcastle-Ottawa для наблюдательных исследований).
Проверка воспроизведения: Мы оцениваем, были ли результаты воспроизведены независимыми исследовательскими группами в различных условиях.
Оценка согласованности: Мы оцениваем, указывает ли совокупность доказательств в одном направлении или противоречива.
Присвоение оценки: Мы присваиваем оценку на основе совокупности имеющихся доказательств, отдавая предпочтение доказательствам более высокого качества.
Рецензирование: Оценки рецензируются по крайней мере одним дополнительным членом команды перед публикацией.
Периодические обновления: Мы пересматриваем и обновляем оценки по мере публикации значимых новых исследований, при этом дата последнего обзора указывается на каждой странице пептида.

Ограничения нашей системы

Оценки доказательств отражают текущее состояние опубликованных исследований и могут меняться по мере появления новых исследований.
Низкая оценка доказательств не означает, что пептид неэффективен — это означает, что существует недостаточно исследований для получения окончательных выводов.
Высокая оценка доказательств для одного применения не распространяется на другие заявленные использования того же пептида.
Наша система не может полностью учитывать неопубликованные данные, текущие испытания, которые еще не сообщены, или исследования на языках, к которым мы не имеем доступа.
Мы стремимся к объективности, но все системы оценки включают некоторую степень суждения.
Наша оценка не является заменой клинических решений, принимаемых квалифицированными медицинскими работниками.