Предвзятость в отчетности - Reporting bias

В эпидемиологии , отчетность смещение определяются как «селективное раскрытие или подавление информации» субъекты (например , о прошлом истории болезни, курении, сексуальные переживания). В исследованиях искусственного интеллекта термин «предвзятость в отчетности» используется для обозначения склонности людей занижать всю доступную информацию.

В эмпирических исследованиях авторы могут занижать сведения о неожиданных или нежелательных экспериментальных результатах, приписывая результаты ошибкам выборки или измерений, в то же время более доверяя ожидаемым или желательным результатам, хотя они могут быть подвержены тем же источникам ошибок. В этом контексте предвзятость в сообщении может в конечном итоге привести к статус-кво, когда несколько исследователей обнаруживают и отвергают одни и те же результаты, а более поздние экспериментаторы оправдывают свою предвзятость в отчетности, наблюдая, что предыдущие экспериментаторы сообщали разные результаты. Таким образом, каждый случай предвзятости в сообщении может повысить вероятность инцидентов в будущем.

Сообщение о предвзятости в исследованиях

Исследования могут способствовать накоплению знаний только в том случае, если исследователи сообщают об этом сообществу. Общепринятым основным средством коммуникации является «полная» публикация методов исследования и результатов в статье, опубликованной в научном журнале. Иногда исследователи также предпочитают представить свои выводы на научном совещании в устной или стендовой форме. Эти презентации включены как часть научной документации в виде кратких «рефератов», которые могут или не могут быть записаны в общедоступные документы, которые обычно находятся в библиотеках или во всемирной паутине.

Иногда исследователи не публикуют результаты всех исследований. В Хельсинкской декларации и других согласованных документах изложено этическое обязательство делать результаты клинических исследований общедоступными.

Предвзятость в отчетности возникает, когда на распространение результатов исследования влияет характер и направление результатов, например, в систематических обзорах . Положительные результаты - это часто используемый термин для описания исследования, в котором установлено, что одно вмешательство лучше другого.

Были предприняты различные попытки преодолеть влияние предвзятости в отчетности, включая статистические корректировки результатов опубликованных исследований. Однако ни один из этих подходов не оказался удовлетворительным, и растет признание того, что предвзятость в отчетности должна устраняться путем создания реестров контролируемых испытаний и содействия надлежащей практике публикации. Пока эти проблемы не будут решены, оценки эффектов лечения, основанные на опубликованных данных, могут быть предвзятыми.

Тематическое исследование

Судебный процесс, возбужденный потребителями и страховыми компаниями против Pfizer за мошеннические методы сбыта лекарственного препарата габапентин в 2004 году, выявил всеобъемлющую стратегию публикации, в которой использовались элементы предвзятости в отчетности. Вращение использовалось, чтобы акцентировать внимание на благоприятных результатах в отношении габапентина, а также для объяснения неблагоприятных результатов в отношении препарата. В этом случае благоприятные вторичные исходы оказались в центре внимания по сравнению с исходным первичным исходом, который был неблагоприятным. Другие изменения, обнаруженные в отчетности по исходам, включают введение нового первичного результата, неспособность провести различие между первичными и вторичными исходами и неспособность сообщить об одном или нескольких первичных исходах, определенных протоколом.

Решение опубликовать определенные результаты в определенных журналах - это еще одна стратегия. Испытания со статистически значимыми результатами, как правило, публиковались в академических журналах с более высоким тиражом чаще, чем испытания с незначительными результатами. На сроки публикации результатов испытаний повлияло то, что компания попыталась оптимизировать сроки между выпуском двух исследований. Было обнаружено, что испытания с незначительными результатами были опубликованы в шахматном порядке, так что не было опубликовано двух последовательных испытаний без существенных результатов. Призрачное авторство также было проблемой, когда профессиональные медицинские писатели, составлявшие опубликованные отчеты, не получали должного признания.

Последствия этого дела все еще урегулируются Pfizer в 2014 году, через 10 лет после первоначального судебного разбирательства.

Типы предвзятости в отчетности

Предвзятость публикации

Публикация или непубликация результатов исследования в зависимости от характера и направления результатов. Хотя медицинские писатели признали проблему сообщения о предвзятости более века, только во второй половине 20-го века исследователи начали исследовать источники и масштабы проблемы сообщения о предвзятости.

За последние два десятилетия накопились доказательства того, что неспособность публиковать исследования, в том числе клинические испытания, проверяющие эффективность вмешательства, является повсеместным. Почти все случаи отказа в публикации происходят из-за того, что следователь не предоставил информацию; только небольшая часть исследований не публикуется из-за отказа журналов.

Наиболее прямые доказательства предвзятости публикаций в области медицины поступают из последующих исследований исследовательских проектов, выявленных во время утверждения финансирования или этики. Эти исследования показали, что «положительные результаты» являются основным фактором, связанным с последующей публикацией: исследователи говорят, что причина, по которой они не пишут и не отправляют отчеты о своих исследованиях для публикации, обычно заключается в том, что они «не заинтересованы» в результатах ( редакционный отказ журналов - редкая причина отказа в публикации).

Даже те исследователи, которые изначально опубликовали свои результаты в виде тезисов конференций, с меньшей вероятностью опубликуют свои выводы полностью, если результаты не являются «значительными». Это проблема, потому что данные, представленные в рефератах, часто являются предварительными или промежуточными результатами и, следовательно, не могут быть надежным представлением того, что было обнаружено после того, как все данные были собраны и проанализированы. Кроме того, рефераты часто недоступны для публики через журналы, MEDLINE или легкодоступные базы данных. Многие из них публикуются в программах конференций, трудах конференций или на компакт-дисках и доступны только для участников встречи.

Основным фактором, связанным с отказом в публикации, являются отрицательные или нулевые результаты. Контролируемые испытания, о которых в конечном итоге сообщается полностью, публикуются быстрее, если их результаты положительны. Предвзятость публикации приводит к завышению оценки эффекта лечения в метаанализах, что, в свою очередь, может привести врачей и лиц, принимающих решения, к мнению, что лечение более полезно, чем оно есть на самом деле.

В настоящее время четко установлено, что предвзятость публикации с более благоприятными результатами по эффективности связана с источником финансирования исследований, которые иначе нельзя было бы объяснить обычным риском оценок предвзятости.

Смещение задержки во времени

Быстрая или отсроченная публикация результатов исследования в зависимости от характера и направления результатов. В систематическом обзоре литературы Хопуэлл и ее коллеги обнаружили, что в целом испытания с «положительными результатами» (статистически значимыми в пользу экспериментальной группы) были опубликованы примерно на год раньше, чем испытания с «нулевыми или отрицательными результатами» (статистически не значимые или статистически значимые в пользу контрольной группы).

Предвзятость множественных (повторяющихся) публикаций

Многократная или единичная публикация результатов исследования в зависимости от характера и направления результатов. Исследователи также могут публиковать одни и те же результаты несколько раз, используя различные шаблоны «дублирующих» публикаций. Многие дубликаты публикуются в приложениях к журналам, что потенциально затрудняет доступ к литературе. Положительные результаты чаще публикуются в двух экземплярах, что может привести к переоценке лечебного эффекта.

Предвзятость по местоположению

Публикация результатов исследований в журналах с разной легкостью доступа или уровнями индексации в стандартных базах данных, в зависимости от характера и направленности результатов. Также есть свидетельства того, что по сравнению с отрицательными или нулевыми результатами статистически значимые результаты в среднем публикуются в журналах с более высокими импакт-факторами, и что публикация в основной (не серой) литературе связана с общим более сильным эффектом лечения по сравнению с серым. литература.

Предвзятость цитирования

Цитирование или отказ от цитирования результатов исследования в зависимости от характера и направления результатов. Авторы склонны ссылаться на положительные результаты вместо отрицательных или нулевых, и это было установлено по широкому кругу тем. Дифференциальное цитирование может привести к восприятию в сообществе того, что вмешательство является эффективным, когда это не так, и может привести к чрезмерному представлению положительных результатов в систематических обзорах, если те, которые не процитированы, трудно найти.

Выборочное объединение результатов в метаанализе - это форма предвзятости цитирования, которая особенно коварна по своему потенциалу влиять на знания. Чтобы свести к минимуму систематическую ошибку, объединение результатов похожих, но отдельных исследований требует тщательного поиска всех соответствующих исследований. То есть метаанализ (или объединение данных из нескольких исследований) всегда должен быть результатом систематического обзора (а не выборочного обзора литературы), даже если систематический обзор не всегда имеет связанный метаанализ.

Языковой уклон

Публикация результатов исследования на определенном языке в зависимости от характера и направления результатов. Существует давний вопрос о том, существует ли языковая предвзятость, из-за которой исследователи предпочитают публиковать свои отрицательные результаты в неанглоязычных журналах и оставлять свои положительные результаты для англоязычных журналов. Некоторые исследования показали, что языковые ограничения в систематических обзорах могут повлиять на результаты обзора, а в других случаях авторы не обнаружили, что существует такая предвзятость.

Предвзятость в представлении информации

Частота, с которой люди пишут о действиях, результатах или свойствах, не является отражением реальных частот или степени, в которой свойство является характеристикой класса людей. Люди пишут только о некоторых частях мира вокруг них; большая часть информации остается недосказанной.

Предвзятость в отчетности о результатах

Выборочная отчетность о некоторых результатах, но не о других, в зависимости от характера и направления результатов. Исследование может быть опубликовано полностью, но заранее указанные результаты могут быть опущены или искажены. Результаты эффективности, которые являются статистически значимыми, имеют более высокий шанс быть полностью опубликованными по сравнению с результатами, которые не являются статистически значимыми.

Выборочное сообщение о предполагаемых или подтвержденных побочных эффектах лечения является областью, вызывающей особую озабоченность из-за возможности причинения вреда пациенту. В исследовании нежелательных явлений, связанных с лекарственными препаратами, представленных в скандинавские органы по лицензированию лекарственных средств, отчеты об опубликованных исследованиях с меньшей вероятностью, чем неопубликованные исследования, регистрировали нежелательные явления (например, 56 против 77% соответственно для финских исследований с участием психотропных препаратов). Недавнее внимание в непрофессиональных и научных СМИ к неспособности точно сообщить о побочных эффектах лекарственных препаратов (например, селективных ингибиторов захвата серотонина, розиглитазона, рофекоксиба) привело к появлению дополнительных публикаций, слишком многочисленных для обзора, что указывает на существенную избирательную отчетность о результатах (в основном подавление) известные или предполагаемые нежелательные явления.

Languages

In other projects