Воспроизводимая невоспроизводимость и что с этим делать? (Г. В. Эрлих)

Аватар пользователя prometey2013

Одно из самых убийственных обвинений, которые могут быть предъявлены ученому, это обвинение в невоспроизводимости представленных им результатов. Оно губит репутацию, рушит карьеру, вплоть до изгнания из научного сообщества, приводит к закрытию научного направления, к его вытеснению за пределы истинной науки и навешиванию разных уничижительных приставок — лже-, пара-, псевдо- и т. д. Когда звучат обвинения в невоспроизводимости «отдельных» исследований, подразумевается, что подавляющая часть остальных хорошо воспроизводима. Но так ли это?

Ключевое понятие науки

Воспроизводимость — краеугольный камень научного метода, ключевое понятие. Оно возникло еще на заре становления современной науки, когда исследователи обратились к эксперименту как средству познания окружающего мира и к количественным измерениям как способу описания изучаемых явлений. Объективность истины подразумевает, что исключены любые субъективные факторы, поэтому различные исследователи, изучающие одинаковые объекты одинаковыми методами с использованием аналогичных инструментов, должны получать идентичные результаты независимо от времени и места проведения эксперимента. В этом состоит категорический императив воспроизводимости.

Идентичность результатов следует понимать, естественно, с учетом статистической погрешности. В этом смысле воспроизводимость аналогична (а во многих случаях и синонимична) точности измерений. Первичный и более узкий случай воспроизводимости — это повторяемость. Она характеризует сходимость повторных результатов индивидуального исследователя, который использует одни и те же материалы и оборудование, одну и ту же методику в идентичных рабочих условиях в течение короткого промежутка времени. Когда исследователя спрашивают о воспроизводимости результатов его работы, то подразумевают именно повторяемость. Близость всех перечисленных понятий подчеркивает и тот факт, что количественно их характеризуют общим параметром — величиной относительного стандартного отклонения (или аналогичными статистическими величинами).

Но суть и значение воспроизводимости гораздо шире ее математического выражения. Она выступает в качестве главного критерия, позволяющего отделить зерна от плевел, агнцев от козлищ, научное знание от прочего информационного шума. Результат, полученный исследователем, — это всего лишь набор цифр, рисунков и неких умозаключений. Статус научного знания эти результаты получат лишь после того, как их примет научное сообщество. И единственный надежный метод такой верификации — повторение, воспроизведение полученных результатов другими, независимыми исследователями по представленным протоколам (методикам) проведения эксперимента. Здесь недопустимы ссылки на «тайное» знание, магические ритуалы, доступные только избранным и посвященным, «секретные» компоненты и таинственное «ноу-хау», они сразу выводят рассматриваемые результаты за пределы научного знания, и там, за этими пределами, их можно квалифицировать по-разному, от шарлатанства и мошенничества до вполне работоспособных технологических регламентов.

Более мягкий вариант верификации результатов — их представление научному сообществу на научных конференциях и защитах диссертаций, в виде публикаций в научных журналах. Рассмотрение результатов, ответы на возникающие вопросы, дискуссия позволяют установить, насколько методически правильно была выполнена работа, насколько достоверны полученные результаты и обоснованны выводы. Чем выше уровень экспертов (рецензентов), тем больше доверия к результатам экспертизы. Понятно, что наибольшее сомнение вызывают статьи в нерецензируемых журналах (при том, что в них среди откровенного мусора могут присутствовать и настоящие бриллианты, которые по каким-то причинам не могут пробиться в «высокорейтинговые» издания). Но в любом случае все эти презентации лишь предварительная апробация результатов, истинное признание может принести лишь их воспроизведение другими исследователями.

Масштабы катастрофы

Но все это в теории. Все это в прошлом. Реальная жизнь отличается от теоретических схем, а современная наука далеко ушла от классических канонов. Одной из основных проблем науки стало стремительное нарастание количества невоспроизводимых результатов. Стремительное — потому что происходит буквально на наших глазах.

Во времена моей студенческо-аспирантской молодости литературные методики имели свойство воспроизводиться, и первой реакцией руководителя на сообщение, что методика не воспроизводится, были нелицеприятные предположения, откуда растут руки у исполнителя. По прошествии тридцати лет первая реакция принципиально изменилась: опять эти (неполиткорректное упоминание национальности авторов статьи) начудили. И происходит это не только в химии, но и во всех дисциплинах, где существует понятие объективной истины и где воспроизводимость результатов — необходимый критерий научности.

Оценить количественно масштабы катастрофы (а это именно катастрофа) затруднительно, потому что исследований этого явления нет и вряд ли они возможны. Но есть результаты выборочного контроля в некоторых узких областях. Так, Гленн Бигли и Ли Эллис, ведущие специалисты американской фармацевтической компании «Amgen», в статье, опубликованной в журнале Nature(2012, 483, 7391, 531–533), рассказали о предклинических испытаниях антираковых препаратов, переданных в компанию университетскими лабораториями. Из 53 проверенных препаратов лишь 6 показали удовлетворительные результаты, данные по остальным 47, опубликованные, к слову сказать, в высокорейтинговых журналах, не воспроизвелись. Несколько более оптимистичны специалисты компании «Bayer», по их данным, опубликованным годом ранее в Nature Reviews Drug Discovery, воспроизводимость работ по онкологии, сердечно-сосудистым и женским заболеваниям составляет 20–25%. И это при том, что тестирование проводили высокопрофессиональные специалисты, заинтересованные в положительном результате испытаний, — ведь таким образом компании выбирают препараты для последующей коммерческой проработки.

Эти и некоторые похожие публикации вызвали широкое обсуждение. Опросы специалистов в этих областях показали, что в среднем 55% опрошенных сталкивались с невоспроизводимостью чужих результатов. Треть опрошенных сообщали об этом в научных публикациях, причем наибольшую принципиальность проявляли «старшие» научные сотрудники, а «младшие» предпочитали не высовываться. И это понятно, потому что две трети молодых смельчаков признали, что имели проблемы при попытке опубликовать опровергающие данные.

Причины невоспроизводимости

Наибольший интерес представляют мнения участников дискуссий о причинах нарастающей невоспроизводимости научных результатов. Откровенная и сознательная подтасовка данных практически не рассматривается. Конечно, мошенники есть в любом сообществе, но, согласимся, доля таких индивидов в науке несравненно ниже, чем в других сферах человеческой деятельности — в политике, экономике, юриспруденции и т. д.

Основной драйвер невоспроизводимости — торопливость, стремление утвердить свой приоритет в новой области исследований. Это имеет вполне земную подоплеку — приоритет повышает вероятность получения финансирования на дальнейшие исследования. Это раньше ученые пеклись о репутации, теперь они думают о первородстве и грантах. Что же до возможных обвинений в невоспроизводимости, то здесь авторы вполне могут следовать логике Кочкарева из «Женитьбы» Гоголя: «Какая ж беда, если рассердятся! ...ведь здесь самое большее, если кто-нибудь из них плюнет в глаза — вот и всё». Когда всё вскроется, грант уже будет получен, а там, глядишь, разработка будет доведена до ума, то есть до воспроизводимости.

Следующая причина публикации «сырых» результатов — погоня за числом публикаций и индексом Хирша, который ныне возведен в ранг главного индикатора качества научной деятельности. Как говорят молодые научные сотрудники, опубликуй в высокорейтинговом журнале или умри. В результате мы наблюдаем картину, немыслимую в прежние времена, — отзыв статей из журналов (в том числе рецензируемых и высокорейтинговых) как на стадии подготовки к печати, так и после публикации из-за опровержений других исследователей.

Складывается также впечатление, что многие авторы совершенно не заинтересованы в воспроизведении своих работ другими исследователями и потому вполне осознанно опускают некоторые важные экспериментальные подробности. Раньше этим грешили патенты: кто хоть раз пытался воспроизвести пример из патента, тот поймет. Но патент на изобретение — это в первую очередь правовой документ, который устанавливает существенные признаки изобретения. А некоторые экспериментальные тонкости, ноу-хау, автор вполне может утаить как дополнительный козырь при продаже патента. С этой точки зрения патент вообще нельзя рассматривать как научную публикацию, и в рамках, например, диссертации патент может выступать только как свидетельство практической значимости.

Но сейчас, к сожалению, принцип ноу-хау всё шире распространяется и на научные статьи. Приходится прилагать большие усилия, чтобы выяснить, о чем умолчали авторы оригинальной публикации. А те, в свою очередь, получают некоторый временной гандикап, чтобы удержаться на гребне исследований и, возможно, продвинуться в сторону их коммерциализации. В этом им невольно подыгрывают издатели научных журналов, которые максимально сокращают место, отведенное описанию экспериментальной части работы (материалам, методикам, оборудованию). Правда, сейчас ведущие научные журналы на своих сайтах выкладывают методики в виде приложения к статьям. Но это пока что скорее исключение, чем правило.

Впрочем, большую часть опубликованных научных результатов никто не воспроизводит и тем самым не верифицирует. Это одно из следствий того громадного вала, Big Data, научных публикаций, который производит в последние годы научное сообщество и который оно само не может переварить. Чтобы воспроизвести результаты, представленные в какой-нибудь статье, ее нужно для начала прочитать. Сколько из опубликованных статей были прочитаны хотя бы одним человеком, не знают даже Web of Science и Scopus, тем более что они охватывают не весь массив научной информации. Но можно сделать оценку, основанную на психологии. Если исследователь по какой-то причине скачал статью и прочитал ее, то он непременно когда-нибудь на нее сошлется, в положительном или отрицательном смысле или просто «до кучи», придавая солидность списку цитированной литературы.

По количеству мы имеем богатую статистику — это импакт-факторы журналов, которые рассчитывают как отношение числа цитирований статей, опубликованных в определенный год, к общему числу статей, опубликованных в том же году. Возьмем теперь импакт-факторы журналов, например российских из списка ВАК. Подавляющая часть попадает в интервал от 0,01 до 0,5. Это и будет оценка среднего числа читателей одной статьи в соответствующем журнале. Несомненно, что многие из этих статей подготовлены грамотными, высококвалифицированными специалистами, изучающими узкие, специальные проблемы. Но в то же время необходимо признать, что подобное отсутствие хоть какой-то внешней экспертизы снижает внутреннюю требовательность к качеству работы и создает условия для производства и публикации недостоверных, невоспроизводимых данных.

Что делать?

Как со всем этим бороться? Бороться тяжело, если вообще возможно, потому что все эти причины обусловлены самим строем современной науки, нацеленной на публикации и коммерческий эффект. Не случайно исследователи, принимающие участие в обсуждении этих проблем, не могут предложить ничего конструктивного, кроме создания специальных научных организаций, которые будут заниматься выборочной проверкой публикаций, хотя бы выполненных в ключевых направлениях, на воспроизводимость. Всё же идея инквизиции неискоренима в умах человечества и немедленно возрождается при любом кризисе! Еще более утопичным, на мой взгляд, выглядит предложение создать индекс воспроизводимости результатов из публикаций в научных журналах по аналогии с импакт-фактором или публиковать в журналах в виде электронного приложения все первичные данные, полученные исследователем.

Единственный, как мне кажется, путь решения проблемы состоит в воспитании и образовании молодого поколения ученых. Научная деятельность стала в последние десятилетия массовой профессией, невероятно выросло число научных работников, учебных заведений и исследовательских центров. Как следствие, упал средний уровень экспериментальной подготовки молодых специалистов (утверждение спорное, но, полагаю, многие с ним согласятся). Они зачастую просто не понимают, что такое воспроизводимость результатов. В лучшем случае они проводят повторные измерения характеристик образца. Получить в этом случае хорошую сходимость результатов — дело нехитрое при известном навыке. Мысль о том, что необходимо повторить всю последовательность эксперимента, включая получение образцов, даже не приходит им в голову. Кто бы им объяснил, сколько великих открытий было закрыто после того, как исследователь, исчерпав одну банку реактивов, открыл новую!

Но никакие объяснения, призывы или виртуальные эксперименты не заменят живой экспериментальной работы с неизбежными ошибками (на которых, собственно, и учатся). Только так, набив шишки, начинающий исследователь поймет, что «тупое» повторение экспериментов, стандартизация и поверка оборудования — это не прихоть руководителя, а неотъемлемая составляющая научной деятельности. В плане же воспитания необходимо накрепко вбить в голову, что первейшая обязанность ученого — получение достоверных знаний и воспроизводимых результатов, в этом состоит один из важнейших принципов этики ученого, а не в модной ныне рефлексии по поводу ответственности ученого за последствия использования результатов его исследований. У невоспроизводимых результатов может быть только одно последствие — падение престижа науки. И вот за это придется нести ответственность.

Проблема уникальности

Все перечисленные факторы, влияющие на воспроизводимость научных исследований, можно отнести к разряду субъективных, обусловленных в значительной мере системой функционирования современной науки. Однако необходимо также учитывать, что изменилась сама наука и возникли объективные факторы, играющие против воспроизводимости в ее классическом понимании.

Современная наука всё чаще обращается к изучению уникальных объектов, систем, явлений, исследователи выполняют уникальные эксперименты на единственном в своем роде оборудовании. Всё это вызывает законное восхищение прогрессом науки, но, с другой стороны, порождает неудобные вопросы. Возьмем, например, историю с открытием бозона Хиггса на Большом адронном коллайдере. Это открытие не было подтверждено независимыми исследованиями и с очевидностью не будет воспроизведено в обозримом будущем, потому что у мирового сообщества просто нет средств для строительства еще одного подобного циклопического сооружения. Как тут быть: принять на веру утвердительный вердикт Нобелевского комитета или стоически следовать жесткому утверждению известного философа Карла Поппера, что «единичное невоспроизведенное сообщение ничего не значит для науки»?

Другой свежий пример связан с высадкой зонда «Филы» на поверхность ядра кометы Чурюмова—Герасименко. Это само по себе выдающееся достижение. Теперь ученые с нетерпением ждут, когда же наконец заработает установленное на зонде научное оборудование и они получат информацию о физических и химических характеристиках ядра кометы. Всё это, конечно, безумно интересно, но ведь это будут единичные данные, невоспроизведенные и невоспроизводимые в обозримом будущем и, кроме того, нерепрезентативные. (Представьте, что некие инопланетяне высадили единственный зонд на Землю и обозрели несколько квадратных метров ее поверхности. Понятно, что их представление о Земле будет сильно зависеть от места посадки — на Северном полюсе, в пустыне Сахара или на поле аэрации в Подмосковье.) Можно ли рассматривать эти данные как истинно научное знание? Это вопрос, над которым стоит задуматься.

Классическая наука имела дело с большими ансамблями объектов и с повторяющимися процессами и научилась прекрасно разбираться с ними. Анализ результатов измерений в таких системах и понятие доверительного интервала основаны на нормальном, гауссовом распределении, при котором вероятность событий, существенно отличающихся от среднего значения, пренебрежимо мала. Но в последние десятилетия наука приступила к изучению систем, в которых распределение событий отличается от гауссова, их еще называют распределениями с «тяжелыми хвостами». Они характерны, в частности, для фрактальных, безмасштабных систем. В них вероятность событий, существенно отличающихся от среднего, имеет значимую величину, которой нельзя пренебречь. Такие редкие события можно назвать уникальными, а еще во многих случаях их называют катастрофами, что по понятным причинам привлекает к ним особый интерес.

Для изучения уникального нужна другая методология. Она в целом разработана, осталось преподать ее студентам — будущим исследователям и, крайне желательно, донести в популярном виде до широкой общественности, чтобы ее не сбивали с толку «сенсационные разоблачения» журналистов.

Проблема уникальности и связанной с этим невоспроизводимости обострилась в связи с разворотом науки от изучения неживых объектов и создания технических устройств к исследованию живых систем. Сегодня как минимум половина публикаций в научных журналах так или иначе связана с медициной, здоровьем, экологией, а также изучением социальных процессов. А все живые существа, по сути своей, разные, и к ним неприменимы методы стандартизации, используемые при работе с неживыми объектами.

Выше мы говорили о катастрофической невоспроизводимости характеристик лекарственных препаратов и связывали это с субъективными факторами — спешкой, погоней за приоритетом, коммерциализацией, недостаточной квалификацией и ошибками в методологии. Но есть и объективные факторы. Живые объекты невероятно сложны. Принципиально невозможно досконально описать выборку живых объектов (мух, мышей, людей) и тем более взять ее повторно. Исследователи каждый раз имеют дело с уникальной выборкой, то есть зародыш невоспроизводимости присутствует в эксперименте изначально, и бороться с ним очень трудно.

За последние десятилетия выявлена также еще одна фундаментальная причина возможной невоспроизводимости результатов. Классическая наука основана на идее детерминированности процессов, однозначности их протекания. Тут можно провести аналогию с математикой: если исходить из одних и тех же постулатов и правильно применять разрешенные логические процедуры, то с неизбежностью будет получен один и тот же результат. Можно также сказать, что воспроизводимость — оборотная сторона предсказуемости, первая относится к эксперименту, вторая — к теории.

Именно математика разрушила эту благостную картину, выявив процессы с множественными решениями. Существует обширный класс систем, развитие которых протекает через точки бифуркации, где возникают альтернативные варианты развития системы. Выбор того или иного варианта происходит под влиянием незначительных флуктуаций параметров системы и, в сущности, случайно. Конечные состояния системы (результаты измерения) могут при этом принципиально различаться.

Но в таких системах существует, по крайней мере, возможность теоретического предсказания этих множественных конечных состояний (при незначительном количестве точек бифуркации). Гораздо хуже обстоит дело с системами, чувствительными к флуктуациям параметров исходной системы. В них возникает так называемый эффект бабочки: незначительное изменение исходных параметров приводит к непредсказуемым последствиям развития системы. Поведение таких систем описывают, используя различные подходы, в частности теорию динамического (детерминированного) хаоса. И это отнюдь не экзотические системы, а хорошо знакомые нам атмосферные явления, сердечные патологии, популяционная динамика, экономика, политика и другие социальные явления.

Проблема заключается в том, что априори экспериментатор не знает, относится ли изучаемая им система к классу «хаотических». Он видит только патологическую невоспроизводимость результатов. Конечно, задним числом можно попытаться создать теоретическую модель, объясняющую эти результаты, однако не каждый исследователь обладает необходимыми для этого знаниями, кроме того, он может счесть, что овчинка не стоит выделки. Мало кто решится опубликовать такие противоречивые экспериментальные данные, еще меньше число редакторов научных журналов, которые примут подобную статью. Так что исследователи, устав от борьбы, обычно либо прекращают работу, либо публикуют наиболее сходящиеся данные, отбросив все «странные». А во втором случае всегда есть риск нарваться на обвинения в невоспроизводимости.

Объективная истина и субъективные усилия

В заключение заметим, что системы, которые изучает современная наука, невероятно усложнились. Они могут быть очень чувствительны как к исходным параметрам (что порождает проблемы со стандартизацией), так и к многочисленным параметрам проведения процесса. Задача исследователя состоит в том, чтобы выявить эти параметры, оптимизировать их и добиться максимальной повторяемости результатов. Но вполне реальна ситуация, когда он не сможет решить эту задачу, не сможет найти параметры, критичные для изучаемого процесса. Они могут оказаться совершенно неожиданными, хотя бы потому, что не вытекают из существующего знания. Это может быть предшествием открытия, и честь и хвала исследователю, который ознакомит научное сообщество с этими сырыми результатами в надежде на то, что его коллеги больше преуспеют в их исследовании.

При оценке таких результатов необходимо также учитывать субъективные факторы, которые обычно игнорируют «теоретики» науки. Из жизненного опыта все мы знаем, что воспроизвести какое-либо действие весьма не просто даже при наличии детальной инструкции или демонстрации. Впервые сделанное блюдо или табуретка обычно очень далеки от образца. Но, повторяя раз за разом необходимые операции, мы постепенно приближаемся к совершенству. И вроде бы делаем всё точно так же, но результат улучшается, это то, что называется «набить руку». Причем одни вещи воспроизводятся легко, на раз-два-три, а на другие уходят годы тренировок.

В науке всё происходит точно так же. Объективная истина зависит от субъективных усилий по ее достижению. Исследователю, чтобы добиться повторяемости результатов (пусть даже не очень хорошей), тоже приходится иногда пройти очень долгий путь «набивания руки» в одном конкретном эксперименте. Существуют ли гарантии, что этот эксперимент «влёт» воспроизведется у другого исследователя? Никаких. Воспроизведение будет скорее случайностью, чем правилом. Особенно если исследователь не верит, что у него что-нибудь получится, и подсознательно настроен на опровержение, а не на подтверждение.

Речь сейчас идет об исследованиях, которые не вписываются в общепринятые представления. Тут надо с очень большой осторожностью относиться к заявлениям о невоспроизводимости результатов и тем более не спешить с навешиванием ярлыков. Ведь так легко с водой выплеснуть и ребенка. Именно «странные» результаты должны быть предметом первоочередного изучения в науке. Пусть большая часть их после детального исследования будет в конце концов опровергнута и отвергнута, но то, что останется, превратится в открытия. Наука не может и не должна останавливаться в своем познании мира и сосредотачиваться на обслуживании утилитарных потребностей людей. Мы верим в грядущие открытия. Возможно, они уже сделаны. Их просто нужно воспроизвести.

Авторство: 
Копия чужих материалов
Комментарий автора: 

Описанная проблема уникальности особенно интересна в медицине - ведь все исследования лекарств делаются на тех или иных выборках и имеют лишь статистический смысл. А нельзя ли пойти по принципиально другому пути? Почему нельзя проводить испытания действия тех или иных лекарств непосредственно для конкретного больного? Более того - можно пойти еще дальше и посмотреть как эта эффективность зависит от внутренних биоритмов. Ведь человек, как и все живое подстраивается под циклы Солнца и Луны, - наиболее известные нам примеры - это суточные, месячные (особенно у женщин) и годовые циклы. Хотя выделяют как более длинные (например 12-летние), так и более короткие (часовые циклы). Что на это скажут медики?

Комментарии

Аватар пользователя И-23
И-23(8 лет 8 месяцев)

Поменьше увлекайтесь западной культурой, особенно — в коммерческом сегменте.
Лучше перечитайте доктора Вернера, во втором томе достаточно подробно раскрыт в том числе этот вопрос.
При ближайшем рассмотрении выясняется, что константа не такая уж и неизменная.

Аватар пользователя sasha7777
sasha7777(6 лет 9 месяцев)

smileyПо меньше увлекайтесь....Так правильней.Прагматика наше все.

А на счет константы,то пока никто не изменил.А подходов было вагон и маленькая тележка,потом только говорили "народ не такой".Оно нанотехнологи всегда говорят изменим,вот еще чуть,чуть,вот применим метод от эвгеники до и изменения ДНК и усе будет,а воз и ныне там.

Аватар пользователя prometey2013
prometey2013(8 лет 6 месяцев)

А применимо ли к экономике вообще понятие "эксперимент"? (чтобы говорить о его воспроизводимости).
Или здесь ситуация такая же как и для истории с астрономией? Как вы скажем воспроизведете взрыв сверхновой?

Аватар пользователя Redvook
Redvook(11 лет 3 недели)

Полноте! При таком количестве звезд сверхновые - вполне себе повторяющееся событие.

Аватар пользователя BOV
BOV(9 лет 6 дней)

В нашей Галактике?

Аватар пользователя Redvook
Redvook(11 лет 3 недели)

В нашей порядка десятка наблюдалось, если не ошибаюсь.

Аватар пользователя BOV
BOV(9 лет 6 дней)

В нашей порядка десятка наблюдалось, если не ошибаюсь.

 

Считается что да, около десятка.  За 2 тысячи лет. И последняя больше трехсот лет назад.

Что создает проблему. Считается, что мы находимся в обычной спиральной галактике. Но по наблюдению других спиральных галактик установлена частота появления в них сверхновых. Для нашей она должна бы составлять около двух в столетие, таких, видимых из окна.

Легко убедиться, что это не так. Значит, мы живем в необычной спиральной галактике? Или это случайность? Скорее всего, ответа мы не получим.

Аватар пользователя Gribnik
Gribnik(8 лет 8 месяцев)

В нашей галактике есть масса туманностей, которые очевидно есть результат "недавней" сверхновой. Крабовидная когда рванула ее и днем было видно.

Аватар пользователя prometey2013
prometey2013(8 лет 6 месяцев)

Вы подменяете понятия: вместо воспроизводимости эксперимента говорите о воспроизводимости наблюдений. А много ли сверхновых взорвали именно земляне? А без этого нет 100% уверенности, что то что наблюдается - это и в самом деле взрыв сверхновой, а не какое-то другое явление. 

Аватар пользователя Redvook
Redvook(11 лет 3 недели)

А много ли солнечных или лунных затмений создали именно земляне? laugh

Аватар пользователя prometey2013
prometey2013(8 лет 6 месяцев)

Вот и я о том же))

Аватар пользователя Gribnik
Gribnik(8 лет 8 месяцев)

Но затмения же все таки есть.)) Наблюдения - тоже часть изучения и часть науки, особенно наблюдения повторяемых процессов. И на земле можно имитировать массу "далеких" явлений. А астрономия - весьма полезная наука, т.к. у нее одна из наибольших границ с концептуально непознанным (темная материя, темная энергия, происхождение жизни...).

И да, отдельное Вам СПАСИБО за этот красивый и интересный пост!!!

Аватар пользователя ИЮЛь Майский

Полноте! При таком количестве звезд сверхновые - вполне себе повторяющееся событие.

А Большой Взрыв? 

Аватар пользователя Александр Хуршудов

Он возможен и в экономике. Но крайне редко производится.

Аватар пользователя sasha7777
sasha7777(6 лет 9 месяцев)

Конечно применимо

Аватар пользователя Ктулху
Ктулху(8 лет 5 месяцев)

А для астрономии? Нет, конечно :) Но есть возможность наблюдать и систематизировать наблюдения. По сути любой эксперимент ― это наблюдение, вопрос в другом как часто мы можем наблюдать одно и то же явление.

Аватар пользователя BOV
BOV(9 лет 6 дней)

Почему нельзя проводить испытания действия тех или иных лекарств непосредственно для конкретного больного?

 

Похоже на известный вопрос, все ли грибы можно есть.

Все, но некоторые только один раз в жизни.

Аватар пользователя prometey2013
prometey2013(8 лет 6 месяцев)

Цианистый калий хотите тестировать?

Аватар пользователя BOV
BOV(9 лет 6 дней)

Я - нет.

А что даст испытание действия лекарства по Вашей методике? И сейчас результатом всегда является действие препарата на конкретного пациента.

Аватар пользователя Lokki
Lokki(9 лет 2 месяца)

Оно и сейчас можно.

Но обычно, почему-то, пациент хочет что бы ему выписали лекарство сразу а не через неделю\месяц\полгода.

И никто не хочет провести неделю в больнице за сдачей анализов.

И заплатить за это кучу денег.

Аватар пользователя prometey2013
prometey2013(8 лет 6 месяцев)

Я не призываю копировать исследования один в один. Но даже сейчас пациент (особенно часто болеющий) принимает массу лекарств. Можно ли научиться контролировать результаты их приема, набирать статистику?
Во-вторых, перед применением лекарства тоже как-то тестируют на аллергию. 
По сути это и сейчас происходит - пациент запоминает какие лекарства ему помогли, а какие - нет. Но можно было бы поставить это все на более научную основу - собирать данные уже не по испытаниям на добровольцах, а по результатам лечения. Или в эпоху BigData это что-то невозможное?
В общем, я  не предлагаю отказаться от существующей системы, а предлагаю ее дополнить альтернативной. Ну и может в будущем появиться возможность более дешевого предварительного тестирования лекарств не предполагающего прохождения всего курса лечения. 

Аватар пользователя Lokki
Lokki(9 лет 2 месяца)

Отображать правильную статистику в первую очередь невыгодно самим врачам.

Вылезет масса их косяков и вполне вероятна отображение низкой эффективности многих лекарств, которые субсидируются государством.

Ну и пациент потом будет громко возмущаться что по факту ему скормили аспирин. а по отчёту ему предоставили высокотехнологичную помощь в размере 100500 рублей. (если не тысяч).

Сейчас сложно найти хоть одно лекарство, которое не имело бы вагона побочек. Или оно настолько высокоспециализированно. что реагирует даже на генетическое разнообразие человечества.

Аватар пользователя Redvook
Redvook(11 лет 3 недели)

Проблемы вы все описали правильно. Но есть еще одна, которая и является первопричиной перечисленных. Сейчас существует лишь одна система финансирования науки. Ее несовершенство вы и описали. У нее нет конкурентов. Больше нет. Советский принцип финансирования ушел в небытие. Кто будет заниматься выживанием E.coli в кишечнике жужелиц, к примеру? Никто никогда не даст грант на эту тему, а статьи не будут иметь высокий рейтинг цитирования. А вот выживанием ее же на мясозаводах - нет проблем. Вы спросите, а на кой нам жужелицы. С одной стороны вы правы, типа зачем платить деньги ученым на удовлетворение их собственного любопытства. А откуда взяться новым "месторождениям" знаний, если все копают на известных местах. Там, где светлее, как в анекдоте про потерянные часы. Вот и топчемся на месте. "Прогресс остановился!". (здесь нужно добавить большими буквами - ТБМ).

Аватар пользователя gerasimenko-vla
gerasimenko-vla(9 лет 2 месяца)

а что говорить если академик химик пишет в большом учебнике, что сульфид серебра в азотной кислоте концентрированной становится растворимым нитратом серебра и выделяется элементарная сера!!!!!!!!!!!!  КАКАЯ ЖЕ ЭТО ГЛУПОСТЬ ПОТОМУ КАК СУЛЬФИД СЕРЕБРА СРАЗУ ОКИСЛЯЕТСЯ В СУЛЬФАТ СЕРЕБРА, И НИКАКОЙ СЕРЫ НЕ ВЫДЕЛЯЕТСЯ.

ЭТОТ АКАДЕМИК-ЕВРЕЙ- НИ РАЗУ ПРОБИРКИ В РУКАХ НЕ ДЕРЖАЩИЙ, И ДЕЛАЮЩИЙ ВИД, ЧТО ВСЁ ЗНАЕТ.

Современная наука-суть пирамида полномочий, ничего общего к настоящему ЗНАНИЮ  не имеющая, а только обслуживающая ВЛАСТЬ в научных (непонятных) терминах , обосновывающая, что  ВЛАСТЬ- ЕДИНСТВЕННАЯ ВОЗМОЖНОСТЬ УПОРЯДОЧЕННОГО РАЗВИТИЯ ОБЩЕСТВА, ИНАЧЕ БУДЕТ ХАОС-- БОЯТСЯ ЕГО НАДО  И ВСЕМИ СИЛАМИ ЗА ВЛАСТЬ ДЕРЖАТСЯ!!!!!!!!!!!!!!!!!!

КАКИЕ ЖЕ ОН СУКИ!!!!!!!!!

ЗЫ   А знаете почему "академик так решил??-- потому как сульфат серебра нерастворим, и в концентрированной азотной кислоте выглядит как элементарная сера, немного иначе для невидевших--- сульфид серебра-чёрный порошёк, при помещении его в концентрированную азотную кислоту, выделяется бурая окись двуокись азота (там всё вместе)  и чёрный порошёк становится цвета серы.  я долго не мог понять, как так, выход серебра мизер, где оно??  и когда понял что это не сера по "великим учебникам"  вот тогда я и оценил цену нашей академии наук:)))))))))))))))))))

ЗЗЫ   вот такая цена нашей "академии наук"   !

 

Комментарий администрации:  
*** Если ребёнок родился с браком - родителям следует положить ладонь на рот и нос, и с любовью разьединить душу и тело (с) ***
Аватар пользователя vokum
vokum(9 лет 2 месяца)

порошок

Аватар пользователя gerasimenko-vla
gerasimenko-vla(9 лет 2 месяца)

как творог, только в зеленокрасной жидкости азотной кислоты цвет серы имеет

Комментарий администрации:  
*** Если ребёнок родился с браком - родителям следует положить ладонь на рот и нос, и с любовью разьединить душу и тело (с) ***
Аватар пользователя vokum
vokum(9 лет 2 месяца)

Ага, видел. Но я немного не о том.. wink

Аватар пользователя gerasimenko-vla
gerasimenko-vla(9 лет 2 месяца)

АААААААААААА  ну понятно ;) только это к другим, 

Комментарий администрации:  
*** Если ребёнок родился с браком - родителям следует положить ладонь на рот и нос, и с любовью разьединить душу и тело (с) ***
Аватар пользователя ascold
ascold(12 лет 2 месяца)

На самом деле все "украдено" до нас. Есть раздел системной медицины, который предлагает инструменты для замены статистической выборки из миллионов больных, статистической выборкой интегрального биологического сигнала ОДНОГО больного. К примеру интерваллограммы кардиоритма. Только у большинства медиков не хватает пока знаний, чтобы хотя бы отдаленно понять этот инструментарий, ведь он заимствован из теории фазовых переходов и нелинейной динамики!

Аватар пользователя prometey2013
prometey2013(8 лет 6 месяцев)

Значит не первому мне приходит эта мысль в голову.
Но тем не менее  инерция мышления сильна! А может и другие причины есть.

Аватар пользователя tiriet
tiriet(11 лет 2 месяца)

сдается мне, что большинство математиков Вас за это почти сразу унизят. Ибо очень-очень сомнительно, что "биологические сигналы" эргодичны.

Аватар пользователя И-23
И-23(8 лет 8 месяцев)

Чем аргументируется тезис о сомнительности?
С другой стороны есть ВОН.

Аватар пользователя ascold
ascold(12 лет 2 месяца)

В математике истина голосованием не устанавливается! Представления не имею кто вы по специальности, но я свой комментарий давал как математик, имевший некоторое отношение к исследованиям в данной области. Если вас интересуют подробности, то можно осведомится о них поискав работы д.м.н. Сараева И.А. и д.т.н. Довгаля В.М. Последний правда в силу специфики своей основной работы на оборонку не сильно светился. Есть еще работы питерских товарищей.. Но там все не так интересно и проработано.

Аватар пользователя Александр Хуршудов

Там где есть коммерческий выход (лекарства. например). воспроизводимость стала хреновой. А там. где его нет (астрономия, например), там все в порядке....smiley

Аватар пользователя prometey2013
prometey2013(8 лет 6 месяцев)

А представляете какой коммерческий выход у горячего термояда? И хочется ли ученым терять такую кормушку? Естественно, что с воспроизводимостью (а точнее с их признанием) у конкурентов возникнут большие проблемы. 

Аватар пользователя alx_me
alx_me(9 лет 11 месяцев)

Весьма страно, не правда ли? :-D Если всё меряется деньгами, то сколько стоит научная истина?

Аватар пользователя Александр Хуршудов

Нет. не так. У меня никакую "истину" купить нельзя. А есть продажные.

Кроме того. тут легко себя уговорить: если я не подрисую данные, план будет не выполнен, премию не дадут, а дома семья и дети.....

Аватар пользователя Алекс Гор
Алекс Гор(8 лет 10 месяцев)

А применимо ли к экономике вообще понятие "эксперимент"? (чтобы говорить о его воспроизводимости).///

///Еще как применимо! Не далее, лет 25-26 назад один пьяный упырь дал другому толстомордому упырю (правда, тоже сдохшему от алкоголизма) "порулить" экономикой в осколке Великой Империи на 1/7 части Суши Земли с целью понять: выживет пациент или не выживет, а также "...посмотреть, а ну как они все передохнут"(с)? Х/ф "Братва и кольцо" Других полномочий и задач, кроме еще Сверх задачи "невозвратности к Коммунизму", озвученной позже еще одним упырем рыжим чубысем, у толстомордого упыря  от ЕБНя не было. И он с ней блестяще справился ЗА ПОЛГОДА! До сих пор расхлебываем результаты этого эксперимента над страной и нами, ее жителями. Мне возразят, мол, ломать - не строить, а я и не спорю, но КАКОГО сокрушающе-выдающегося результата в экономике и социальной, а в итоге и политической жизни нашей страны и народа, в результате и всего мира, добился толстомордый покойник, у него уже не отнять! Сродни взрыву экономической "Матери всех бомб" над нашими головами! Превзойти по масштабу и последствиям могут только американцы или (тьфу-тьфу) китайцы.

Аватар пользователя prometey2013
prometey2013(8 лет 6 месяцев)

Допустим. А что у нас с воспроизводимостью данного эксперимента? Хотя   и тут ситуация уникальна - к рыночной экономике переходило сразу много стран, и у некоторых результаты куда лучше как у Польши, например. Ну не "заточены" мы под рынок - нужно честно признать. 

Аватар пользователя Алекс Гор
Алекс Гор(8 лет 10 месяцев)

Ну не "за­то­че­ны" мы под рынок - нужно честно при­знать. ///

///Ну, уж совсем то посыпать голову пеплом не надо, живем-выживаем как то, да еще и при самом настоящем "диком капитализме". Да еще и далеко не на последнем месте страна. А вот то, что многим из нас греющие душонку упырю чубысю отношения "купи-продай-надуй ближнего" не по душе, это факт! Мне точно.

Аватар пользователя dimks
dimks(8 лет 5 месяцев)

Вот так, потихоньку и без лишнего шума, наука и превратится постепенно в аналог религии. Чтобы не предпринимали, количество верифицируемых знаний будет неуклонно снижаться в общей доле научных знаний. Ученому придется выбирать - либо быть энциклопедистом, который знает во многих областях, но не очень глубоко, либо узким специалистом, который знает очень глубоко, но в очень локальной области. И энциклопедисту придется верить на слово узкому специалисту, потому что повторить его опыт даже в узкой области будет невозможно из-за огромной сложности полученного опыта и ускорения развития науки. Ресурсов не будет хватать на то, чтобы подтверждать каждый опыт.

Скрытый комментарий Повелитель Ботов (без обсуждения)
Аватар пользователя Повелитель Ботов

Перспективный чат детектед! Сим повелеваю - внести запись в реестр самых обсуждаемых за последние 4 часа.

Комментарий администрации:  
*** Это легальный, годный бот ***
Аватар пользователя Здешний
Здешний(9 лет 11 месяцев)

Хорошая статья. Но не без маниловщины - в части "Что делать?", где предлагается "заниматься воспитанием" ученой молодежи, чтобы они не жили в науке по принципу "прокукарекаю, а там хоть не рассветай".

Сегодняшняя наука превращена в отрасль шоу-биза. И именно поэтому процветают всякие "британские учОные"(с), лепятся мелкие и грандиозные научные аферы, грантососничание и т.д. и т.п.  

В этой парадигме невозможно никакое "подлинно научное воспитание", потому что оно прямо противоречит критерию практики успешности.  

 

Аватар пользователя Ким Лит
Ким Лит(8 лет 9 месяцев)

Хорошая статья. По многим пунктам показаны проблемы современной науки. Особенно про неоднозначность реакции живых систем. Жалко это не учитывают при переносе западного опыта в экономике, социологии, образовании на российскую почву.

Аватар пользователя sapphir1970
sapphir1970(12 лет 3 месяца)

Первый ученый, который пришел в голову на тему невоспроизводимости - это Стивен Хокинг. И плевал он на невоспроизводимость черных дыр! Всем своим видом он показывает, что черные дыры есть!

Комментарий администрации:  
*** Отключен (систематические манипуляции и набросы) ***
Аватар пользователя sery.kardinal
sery.kardinal(9 лет 7 месяцев)

Сермяжная правда капитализма. Учёные тоже люди, им надо обеспечивать себя и семью.

На первое место убеждений и ценностей выходят деньги. Прежде всего, учёные думают о грантах, а научное творчество отодвигается на задний план.

В нынешней системе экономических отношений проблема «честного учёного» неразрешима.

Аватар пользователя Аббе
Аббе(10 лет 10 месяцев)

Автор ещё не залез в политику! Вот где чудеса в решете.

Аватар пользователя e.tvorogov
e.tvorogov(8 лет 4 месяца)

Отличная статья. В закладки.

Аватар пользователя alx_me
alx_me(9 лет 11 месяцев)

Сова трещит. Интересна причина по которой аффтар так легко отвергает роль подтасовки в приводимом вале невоспроизводимостей? Им можно верить? Они не обманут? Те которые каждый божий день продают свою потасканную научную числоплотность? Полноте, любезный! У них уже свои сообщества. Рука руку моет. Границы между капиталом и наукой больше не существует. Автор хочет вообще убить научный метод? Нет воспроизводимости - нет науки. Всё. И никакие единороги и креативные эпатажные псевдоучёные готовые объяснить нам всё что угодно не помогут организовать циклическое("воспроизводимое") производство чего-либо наукоёмкого и осязаемого.

Аватар пользователя ng
ng(7 лет 11 месяцев)

Довольно типичная картина, когда алгоритм или метод описывается общими словами. При этом формально все корректно, но воспроизвести невозможно или трудно. Нужно проводить независимые исследования. Причем даже в случае, когда точно известно, что у автора все работает, воспроизводимость оказывается сложной задачей. Для этого нужен достаточный уровень квалификации. Неоднократно наблюдал, как это не удается. А полное и детальное опубликование алгоритмов и методов решения многих сложных задач невозможно в принципе из-за ограничений размера научных статей. К тому же, сейчас выгоднее дробить результаты на маленькие кусочки и публиковать во нескольких статьях. При этом паззлы обычно не собираются.

Страницы