<?xml version="1.0" encoding="UTF-8"?>
<!DOCTYPE article PUBLIC "-//NLM//DTD JATS (Z39.96) Journal Publishing DTD v1.3 20210610//EN" "JATS-journalpublishing1-3.dtd">
<article article-type="research-article" dtd-version="1.3" xmlns:mml="http://www.w3.org/1998/Math/MathML" xmlns:xlink="http://www.w3.org/1999/xlink" xmlns:xsi="http://www.w3.org/2001/XMLSchema-instance" xml:lang="ru"><front><journal-meta><journal-id journal-id-type="publisher-id">nid</journal-id><journal-title-group><journal-title xml:lang="ru">Нефрология и диализ</journal-title><trans-title-group xml:lang="en"><trans-title>Nephrology and Dialysis</trans-title></trans-title-group></journal-title-group><issn pub-type="ppub">1680-4422</issn><issn pub-type="epub">2618-9801</issn><publisher><publisher-name>Российское диализное общество</publisher-name></publisher></journal-meta><article-meta><article-id pub-id-type="doi">10.28996/2618-9801-2021-1-105-118</article-id><article-id custom-type="elpub" pub-id-type="custom">nid-13</article-id><article-categories><subj-group subj-group-type="heading"><subject>Research Article</subject></subj-group><subj-group subj-group-type="section-heading" xml:lang="ru"><subject>ШКОЛА НЕФРОЛОГА</subject></subj-group><subj-group subj-group-type="section-heading" xml:lang="en"><subject>EDUCATIONAL MATERIALS</subject></subj-group></article-categories><title-group><article-title>«Подводные камни» статистического анализа и клинической интерпретации полученных оценок на примере пациентов с хронической болезнью почек. Часть III: Оценка информативности биомаркеров</article-title><trans-title-group xml:lang="en"><trans-title>Pitfalls of statistical analysis and clinical interpretation of the estimates on the example of patients with chronic kidney disease. Part III: Evaluating the informativeness of biomarkers</trans-title></trans-title-group></title-group><contrib-group><contrib contrib-type="author" corresp="yes"><name-alternatives><name name-style="eastern" xml:lang="ru"><surname>Зулькарнаев</surname><given-names>А. Б.</given-names></name><name name-style="western" xml:lang="en"><surname>Zulkarnaev</surname><given-names>A. B.</given-names></name></name-alternatives><email xlink:type="simple">noemail@neicon.ru</email><xref ref-type="aff" rid="aff-1"/></contrib><contrib contrib-type="author" corresp="yes"><name-alternatives><name name-style="eastern" xml:lang="ru"><surname>Паршина</surname><given-names>Е. В.</given-names></name><name name-style="western" xml:lang="en"><surname>Parshina</surname><given-names>E. V.</given-names></name></name-alternatives><email xlink:type="simple">noemail@neicon.ru</email><xref ref-type="aff" rid="aff-2"/></contrib></contrib-group><aff-alternatives id="aff-1"><aff xml:lang="ru"><institution>ГБУЗ МО "Московский областной научно-исследовательский клинический институт (МОНИКИ) им. М.Ф. Владимирского"</institution><country>Россия</country></aff><aff xml:lang="en"><institution>M.F.Vladimirsky Moscow Regional Research and Clinical Institute ("MONIKI")</institution><country>Russian Federation</country></aff></aff-alternatives><aff-alternatives id="aff-2"><aff xml:lang="ru"><institution>Санкт-Петербургский государственный университет</institution><country>Россия</country></aff><aff xml:lang="en"><institution>Saint Petersburg State University Hospital</institution><country>Russian Federation</country></aff></aff-alternatives><pub-date pub-type="collection"><year>2021</year></pub-date><pub-date pub-type="epub"><day>21</day><month>06</month><year>2024</year></pub-date><volume>23</volume><issue>1</issue><fpage>105</fpage><lpage>118</lpage><permissions><copyright-statement>Copyright &amp;#x00A9; Зулькарнаев А.Б., Паршина Е.В., 2024</copyright-statement><copyright-year>2024</copyright-year><copyright-holder xml:lang="ru">Зулькарнаев А.Б., Паршина Е.В.</copyright-holder><copyright-holder xml:lang="en">Zulkarnaev A.B., Parshina E.V.</copyright-holder><license xml:lang="ru" license-type="creative-commons-attribution" xlink:href="https://creativecommons.org/licenses/by/4.0/" xlink:type="simple"><license-p>Данная работа распространяется под лицензией Creative Commons Attribution 4.0.</license-p></license><license xml:lang="en" license-type="creative-commons-attribution" xlink:href="https://creativecommons.org/licenses/by/4.0/" xlink:type="simple"><license-p>This work is licensed under a Creative Commons Attribution 4.0 License.</license-p></license></permissions><self-uri xlink:href="https://journal.nephro.ru/jour/article/view/13">https://journal.nephro.ru/jour/article/view/13</self-uri><abstract><p>В эпоху современной медицины исследователи перешли от практики простого эмпирического описания частоты встречаемости симптомов при различных заболеваниях к представлению определенных оценок. Практикующие доктора нередко ошибочно интерпретируют показатели информативности биомаркеров, приводимые в научных публикациях. Наиболее распространенными оценками являются чувствительность (Se) - вероятность наличия маркера при условии наличия заболевания, специфичность (Sp) - вероятность отсутствия маркера при условии отсутствия заболевания, прогностическая ценность положительного результата теста (PPV) - вероятность наличия болезни при условии наличия маркера, прогностическая ценность отрицательного результата (NPV) - вероятность отсутствия заболевания при условии отсутствия маркера. Означает ли, что большое значение Se, Sp, PPV или NPV, а также выявленная статистическая значимость сопряженности маркера и исхода будет свидетельствовать, что маркер эффективен? Далеко не всегда. Статистическая значимость связи маркера с исходом - лишь необходимое, но не достаточное условие. На особенности практического применения маркера непосредственное влияние оказывают частота его встречаемости (PM) и распространенность заболевания (PD) в анализируемой популяции. Тот факт, что некоторые условные показатели информативности могут принимать большие значения даже в условиях отсутствия реальной сопряженности маркера и исхода (определяемые в данном случае лишь PM и PD), может вводить в заблуждение. Например, на практике крайне редко встречаются PM и PD более 10-20%. Тогда оценки Sp и NPV могут принимать большие значения. При этом Sp стремится к (1-PM), то есть доле лиц, свободных от маркера, а NPV - к (1-PD), то есть доле лиц, свободных от заболевания. Из этого следует важный вывод: условные оценки информативности (Se, Sp, PPV и NPV) биомаркера должны в обязательном порядке дополняться указанием общих мер сопряженности (отношения шансов или отношения рисков), а также - интегральных показателей информативности маркера (скрининговой или прогностической балансовой точности - SBA или PBA). Только при статистической значимости сопряженности маркера и исхода, OR&gt;5,5 и SBA/PBA&gt;0,7 маркер является эффективным скрининговым или прогностическим классификатором. Перечень эмпирически оцениваемых показателей информативности и сопряжённости непосредственным образом определяется дизайном исследования: исследование «случай-контроль» позволяет непосредственно оценить Se, Sp, SBA и OR, когортное исследование - PPV, NPV, PBA, OR и RR. Популяционное исследование позволяет оценить любые показатели информативности и сопряженности. Также необходимо помнить, что Se, Sp и SBA (AUC) характеризуют исключительно скрининговую информативность маркера. PPV, NPV и PBA характеризует исключительно прогностическую информативность маркера. OR и RR является мерами силы сопряженности маркера и исхода.</p></abstract><trans-abstract xml:lang="en"><p>Physicians do not often correctly interpret the informativeness measures of biomarkers provided in scientific papers. The most common estimates are sensitivity (Se) the probability that the biomarker is positive in a case of disease, specificity (Sp) the probability that the marker is negative for patients who do not have a disease, the positive predictive value of a test result (PPV) the probability of a disease in a marker-positive patient, a negative predictive value (NPV) the probability that a marker-negative patient does not have a disease. Does the very high Se, Sp, PPV or NPV, as well as the revealed a statistically significant association between marker and outcome, mean that the marker is effective? Not always so. The statistical significance of the marker-outcome association is only a necessary condition, but not a sufficient one. The practical use of the marker depends on its frequency of occurrence (PM) and the prevalence of the disease (PD) in the population under study. The fact that some conventional indices of informativeness can be high even in the absence of a real association between marker and outcome (defined in such a case only by PM and PD) can be misleading. This leads us to an important conclusion: conventional indices of biomarker informativeness (Se, Sp, PPV and NPV) must be supplemented by statistics that measure the strength of the relationship between marker and outcome (odds ratio or risk ratio), as well as integral measures of marker informativeness (screening or predictive balance accuracy - SBA or PBA). The quantity of empirically evaluated diagnostic performance measures is directly determined by the study design: the case-control study enables to measure directly Se, Sp, SBA, and OR, the cohort study allows to evaluate PPV, NPV, PBA, OR, and RR. The population-based study provides investigators with any performance indices of diagnostic tests. It also should be kept in mind that Se, Sp and SBA (AUC) characterize only the screening informativeness of the marker. PPV, NPV and PBA characterize only the predictive informativeness of the marker. OR and RR quantify the strength of the association between marker and outcome.</p></trans-abstract><kwd-group xml:lang="ru"><kwd>биомаркер</kwd><kwd>чувствительность</kwd><kwd>специфичность</kwd><kwd>прогностическая ценность положительного результата</kwd><kwd>прогностическая ценность отрицательного результата</kwd><kwd>распространенность заболевания</kwd><kwd>статистика</kwd><kwd>biomarker</kwd><kwd>sensitivity</kwd><kwd>specificity</kwd><kwd>positive predictive value</kwd><kwd>negative predictive value</kwd><kwd>disease prevalence</kwd><kwd>statistics</kwd></kwd-group></article-meta></front><back><ref-list><title>References</title><ref id="cit1"><label>1</label><citation-alternatives><mixed-citation xml:lang="ru">Kidney Disease: Improving Global Outcomes (KDIGO) Glomerulonephritis Work Group. KDIGO Clinical Practice Guideline for Glomerulonephritis. Kidney inter., Suppl. 2012; 2: 139-274. DOI: 10.1038/kisup.2012.9</mixed-citation><mixed-citation xml:lang="en">Kidney Disease: Improving Global Outcomes (KDIGO) Glomerulonephritis Work Group. KDIGO Clinical Practice Guideline for Glomerulonephritis. Kidney inter., Suppl. 2012; 2: 139-274. DOI: 10.1038/kisup.2012.9</mixed-citation></citation-alternatives></ref><ref id="cit2"><label>2</label><citation-alternatives><mixed-citation xml:lang="ru">Puhan MA, Steurer J, Bachmann LM, ter Riet G. A randomized trial of ways to describe test accuracy: the effect on physicians' post-test probability estimates. Ann Intern Med. 2005;143(3):184-189. DOI:10.7326/0003-4819-143-3-200508020-00004</mixed-citation><mixed-citation xml:lang="en">Puhan MA, Steurer J, Bachmann LM, ter Riet G. A randomized trial of ways to describe test accuracy: the effect on physicians' post-test probability estimates. Ann Intern Med. 2005;143(3):184-189. DOI:10.7326/0003-4819-143-3-200508020-00004</mixed-citation></citation-alternatives></ref><ref id="cit3"><label>3</label><citation-alternatives><mixed-citation xml:lang="ru">Leeflang MM, Deeks JJ, Gatsonis C, Bossuyt PM; Cochrane Diagnostic Test Accuracy Working Group. Systematic reviews of diagnostic test accuracy. Ann Intern Med. 2008;149(12):889-897. DOI:10.7326/0003-4819-149-12-200812160-00008</mixed-citation><mixed-citation xml:lang="en">Leeflang MM, Deeks JJ, Gatsonis C, Bossuyt PM; Cochrane Diagnostic Test Accuracy Working Group. Systematic reviews of diagnostic test accuracy. Ann Intern Med. 2008;149(12):889-897. DOI:10.7326/0003-4819-149-12-200812160-00008</mixed-citation></citation-alternatives></ref><ref id="cit4"><label>4</label><citation-alternatives><mixed-citation xml:lang="ru">Perneger TV, Agoritsas T. Doctors and patients' susceptibility to framing bias: a randomized trial. J Gen Intern Med. 2011;26(12):1411-1417. Doi:10.1007/s11606-011-1810-x</mixed-citation><mixed-citation xml:lang="en">Perneger TV, Agoritsas T. Doctors and patients' susceptibility to framing bias: a randomized trial. J Gen Intern Med. 2011;26(12):1411-1417. Doi:10.1007/s11606-011-1810-x</mixed-citation></citation-alternatives></ref><ref id="cit5"><label>5</label><citation-alternatives><mixed-citation xml:lang="ru">Whiting PF, Davenport C, Jameson C, et al. How well do health professionals interpret diagnostic information? A systematic review. BMJ Open. 2015;5(7):e008155. DOI:10.1136/bmjopen-2015-008155</mixed-citation><mixed-citation xml:lang="en">Whiting PF, Davenport C, Jameson C, et al. How well do health professionals interpret diagnostic information? A systematic review. BMJ Open. 2015;5(7):e008155. DOI:10.1136/bmjopen-2015-008155</mixed-citation></citation-alternatives></ref><ref id="cit6"><label>6</label><citation-alternatives><mixed-citation xml:lang="ru">Parker VL, Ritchie JE, Drake TM, Hookham J, Balasubramanian SP. A Randomised Assessment of Trainee Doctors' Understanding and Interpretation of Diagnostic Test Results. World J Surg. 2016;40(1):21-28. DOI:10.1007/s00268-015-3214-2</mixed-citation><mixed-citation xml:lang="en">Parker VL, Ritchie JE, Drake TM, Hookham J, Balasubramanian SP. A Randomised Assessment of Trainee Doctors' Understanding and Interpretation of Diagnostic Test Results. World J Surg. 2016;40(1):21-28. DOI:10.1007/s00268-015-3214-2</mixed-citation></citation-alternatives></ref><ref id="cit7"><label>7</label><citation-alternatives><mixed-citation xml:lang="ru">Зулькарнаев А.Б. Подводные камни" статистического анализа и клинической интерпретации полученных оценок на примере пациентов с хронической болезнью почек. Часть I: оценка риска. Нефрология и диализ. 2019. 21(4): 419-429.</mixed-citation><mixed-citation xml:lang="en">Зулькарнаев А.Б. Подводные камни" статистического анализа и клинической интерпретации полученных оценок на примере пациентов с хронической болезнью почек. Часть I: оценка риска. Нефрология и диализ. 2019. 21(4): 419-429.</mixed-citation></citation-alternatives></ref><ref id="cit8"><label>8</label><citation-alternatives><mixed-citation xml:lang="ru">Alharbi FJ, Baig S, Rambhatla SB, et al. The clinical utility of total concentration of urinary globotriaosylsphingosine plus its analogues in the diagnosis of Fabry disease. Clin Chim Acta. 2020;500:120-127. DOI:10.1016/j.cca.2019.10.005</mixed-citation><mixed-citation xml:lang="en">Alharbi FJ, Baig S, Rambhatla SB, et al. The clinical utility of total concentration of urinary globotriaosylsphingosine plus its analogues in the diagnosis of Fabry disease. Clin Chim Acta. 2020;500:120-127. DOI:10.1016/j.cca.2019.10.005</mixed-citation></citation-alternatives></ref><ref id="cit9"><label>9</label><citation-alternatives><mixed-citation xml:lang="ru">Zhang S, Wu Z, Li J, et al. Evaluation of the clinical relevance of anti-annexin-A5 antibodies in Chinese patients with antiphospholipid syndrome. Clin Rheumatol. 2017;36(2):407-412. DOI:10.1007/s10067-016-3510-8</mixed-citation><mixed-citation xml:lang="en">Zhang S, Wu Z, Li J, et al. Evaluation of the clinical relevance of anti-annexin-A5 antibodies in Chinese patients with antiphospholipid syndrome. Clin Rheumatol. 2017;36(2):407-412. DOI:10.1007/s10067-016-3510-8</mixed-citation></citation-alternatives></ref><ref id="cit10"><label>10</label><citation-alternatives><mixed-citation xml:lang="ru">Levy MM, Fink MP, Marshall JC, Abraham E, Angus D, Cook D, et al. 2001 SCCM/ESICM/ACCP/ATS/SIS international sepsis definitions conference. Crit Care Med 2003;31(4):1250-6. DOI: 10.1007/s00134-003-1662-x</mixed-citation><mixed-citation xml:lang="en">Levy MM, Fink MP, Marshall JC, Abraham E, Angus D, Cook D, et al. 2001 SCCM/ESICM/ACCP/ATS/SIS international sepsis definitions conference. Crit Care Med 2003;31(4):1250-6. DOI: 10.1007/s00134-003-1662-x</mixed-citation></citation-alternatives></ref><ref id="cit11"><label>11</label><citation-alternatives><mixed-citation xml:lang="ru">Shapiro NI, Trzeciak S, Hollander JE, et al. The diagnostic accuracy of plasma neutrophil gelatinase-associated lipocalin in the prediction of acute kidney injury in emergency department patients with suspected sepsis. Ann Emerg Med. 2010;56(1):52-59.e1. DOI:10.1016/j.annemergmed.2010.02.010</mixed-citation><mixed-citation xml:lang="en">Shapiro NI, Trzeciak S, Hollander JE, et al. The diagnostic accuracy of plasma neutrophil gelatinase-associated lipocalin in the prediction of acute kidney injury in emergency department patients with suspected sepsis. Ann Emerg Med. 2010;56(1):52-59.e1. DOI:10.1016/j.annemergmed.2010.02.010</mixed-citation></citation-alternatives></ref><ref id="cit12"><label>12</label><citation-alternatives><mixed-citation xml:lang="ru">Рубанович А.В., Хромов-Борисов Н.Н. Теоретический анализ показателей предсказательной эффективности бинарных генетических тестов. Экологическая генетика. 2013; 11(1): 77-90.</mixed-citation><mixed-citation xml:lang="en">Рубанович А.В., Хромов-Борисов Н.Н. Теоретический анализ показателей предсказательной эффективности бинарных генетических тестов. Экологическая генетика. 2013; 11(1): 77-90.</mixed-citation></citation-alternatives></ref><ref id="cit13"><label>13</label><citation-alternatives><mixed-citation xml:lang="ru">Holmer M, Martínez JP, Gil E, Sandberg F, Olde B, Sörnmo L. Detection of ventricular premature beats based on the pressure signals of a hemodialysis machine. Med Eng Phys. 2018;51:49-55. DOI:10.1016/j.medengphy.2017.11.004</mixed-citation><mixed-citation xml:lang="en">Holmer M, Martínez JP, Gil E, Sandberg F, Olde B, Sörnmo L. Detection of ventricular premature beats based on the pressure signals of a hemodialysis machine. Med Eng Phys. 2018;51:49-55. DOI:10.1016/j.medengphy.2017.11.004</mixed-citation></citation-alternatives></ref><ref id="cit14"><label>14</label><citation-alternatives><mixed-citation xml:lang="ru">Luo JC, Qiu XH, Pan C, et al. Increased cardiac index attenuates septic acute kidney injury: a prospective observational study. BMC Anesthesiol. 2015;15:22. DOI:10.1186/s12871-015-0005-0</mixed-citation><mixed-citation xml:lang="en">Luo JC, Qiu XH, Pan C, et al. Increased cardiac index attenuates septic acute kidney injury: a prospective observational study. BMC Anesthesiol. 2015;15:22. DOI:10.1186/s12871-015-0005-0</mixed-citation></citation-alternatives></ref><ref id="cit15"><label>15</label><citation-alternatives><mixed-citation xml:lang="ru">Chang CH, Fu CM, Yang CH, et al. Society of Thoracic Surgeons score predicts kidney injury in patients not undergoing bypass surgery. Ann Thorac Surg. 2015;99(1):123-129. DOI:10.1016/j.athoracsur.2014.07.072</mixed-citation><mixed-citation xml:lang="en">Chang CH, Fu CM, Yang CH, et al. Society of Thoracic Surgeons score predicts kidney injury in patients not undergoing bypass surgery. Ann Thorac Surg. 2015;99(1):123-129. DOI:10.1016/j.athoracsur.2014.07.072</mixed-citation></citation-alternatives></ref><ref id="cit16"><label>16</label><citation-alternatives><mixed-citation xml:lang="ru">Kim S, Kim HJ, Ahn HS, et al. Is plasma neutrophil gelatinase-associated lipocalin a predictive biomarker for acute kidney injury in sepsis patients? A systematic review and meta-analysis. J Crit Care. 2016;33:213-223. DOI:10.1016/j.jcrc.2016.02.014</mixed-citation><mixed-citation xml:lang="en">Kim S, Kim HJ, Ahn HS, et al. Is plasma neutrophil gelatinase-associated lipocalin a predictive biomarker for acute kidney injury in sepsis patients? A systematic review and meta-analysis. J Crit Care. 2016;33:213-223. DOI:10.1016/j.jcrc.2016.02.014</mixed-citation></citation-alternatives></ref><ref id="cit17"><label>17</label><citation-alternatives><mixed-citation xml:lang="ru">Leeflang MM, Deeks JJ, Rutjes AW, Reitsma JB, Bossuyt PM. Bivariate meta-analysis of predictive values of diagnostic tests can be an alternative to bivariate meta-analysis of sensitivity and specificity. J Clin Epidemiol. 2012;65(10):1088-1097. doi:10.1016/j.jclinepi.2012.03.006</mixed-citation><mixed-citation xml:lang="en">Leeflang MM, Deeks JJ, Rutjes AW, Reitsma JB, Bossuyt PM. Bivariate meta-analysis of predictive values of diagnostic tests can be an alternative to bivariate meta-analysis of sensitivity and specificity. J Clin Epidemiol. 2012;65(10):1088-1097. doi:10.1016/j.jclinepi.2012.03.006</mixed-citation></citation-alternatives></ref></ref-list><fn-group><fn fn-type="conflict"><p>The authors declare that there are no conflicts of interest present.</p></fn></fn-group></back></article>
