Международная группа известных статистиков из Сиднейского университета, Северо-Западного университета и Техасского университета объединилась для полного исследования прогностической эффективности модели COVID-19, разработанной Институтом показателей и оценки здоровья (IHME), которая предоставляет прогнозы для вентиляторов. использование и больничные койки в США.
Опубликованная на сервере предварительной публикации arXiv, исследователи обнаружили, что модель IHME существенно недооценивает неопределенность, связанную со смертями от COVID-19.
В семидесяти процентах штатов США фактический уровень смертности выходит за пределы 95-процентного прогнозного интервала для этого штата, что ставит под сомнение пригодность модели для информирования о распределении ресурсов COVID-19.
Модель, которая предоставляет прогнозы для каждого штата в Соединенных Штатах, была широко распространена в средствах массовой информации и в социальных сетях и использовалась для принятия политических решений на самом высоком уровне, о чем говорилось на пресс-конференции в Белом доме. 31 марта 2020 г.
"Несоответствие между прогнозируемой смертностью и фактическим уровнем смертности в США имеет серьезные последствия для будущего планирования правительством Соединенных Штатов и предоставления аппаратов ИВЛ, СИЗ и укомплектования персоналом медицинских работников, оснащенных для реагирования на эту пандемию," сказала статистик Сиднейского университета и директор Центра трансляционных данных, профессор Салли Криппс.
"Уровень неопределенности, подразумеваемый моделью, заставляет усомниться в ее полезности для стимулирования разработки политики в области здравоохранения, социальной и экономической политики," она сказала.
Профессор Мартин Таннер из Северо-Западного университета также сказал, что модель не способна делать долгосрочные прогнозы.
"Я обеспокоен тем, что, если модель UW-IHME столкнулась с трудностями при прогнозировании следующего дня, как прогнозы будут справедливыми в долгосрочной перспективе?," сказал профессор Таннер.
Понимание интервалов прогнозирования
"Делая прогноз – часто называемый точечной оценкой – скорости распространения и уровня смертности нового вируса в Нью-Йорке, широко понимается, что прогноз несет в себе неопределенность," сказала профессор Салли Криппс.
"Статистики дают диапазон, называемый интервалом прогноза, в котором, вероятно, будут находиться фактические будущие значения. Это включает оценку неопределенности. 95-процентный интервал прогноза – это интервал, в котором мы ожидаем, что 95% фактических будущих значений будут лежать," она сказала.
"Модель IHME дает 95-процентные интервалы прогноза количества смертей в каждом штате. Если неопределенность оценена правильно, то можно ожидать, что 95 процентов состояний с фактическими значениями лежат в этих интервалах," она сказала.
"Но мы не. Фактически, только 30 процентов штатов США имеют фактические показатели смертности, которые находятся в пределах 95-процентного прогнозного интервала, а 70 процентов находятся за пределами этого интервала. Таким образом, либо неопределенность недооценена, либо точечная оценка неточна, либо и то, и другое" она сказала.