<?xml version="1.0" encoding="UTF-8"?>
<!DOCTYPE article PUBLIC "-//NLM//DTD JATS (Z39.96) Journal Publishing DTD v1.3 20210610//EN" "JATS-journalpublishing1-3.dtd">
<article article-type="research-article" dtd-version="1.3" xmlns:mml="http://www.w3.org/1998/Math/MathML" xmlns:xlink="http://www.w3.org/1999/xlink" xmlns:xsi="http://www.w3.org/2001/XMLSchema-instance" xml:lang="ru"><front><journal-meta><journal-id journal-id-type="publisher-id">persmed</journal-id><journal-title-group><journal-title xml:lang="ru">Российский журнал персонализированной медицины</journal-title><trans-title-group xml:lang="en"><trans-title>Russian Journal for Personalized Medicine</trans-title></trans-title-group></journal-title-group><issn pub-type="ppub">2782-3806</issn><issn pub-type="epub">2782-3814</issn><publisher><publisher-name>ФОНД АЛМАЗОВА</publisher-name></publisher></journal-meta><article-meta><article-id pub-id-type="doi">10.18705/2782-3806-2023-3-5-6-13</article-id><article-id custom-type="edn" pub-id-type="custom">AVQVDF</article-id><article-id custom-type="elpub" pub-id-type="custom">persmed-191</article-id><article-categories><subj-group subj-group-type="heading"><subject>Research Article</subject></subj-group><subj-group subj-group-type="section-heading" xml:lang="ru"><subject>ИСКУССТВЕННЫЙ ИНТЕЛЛЕКТ И МАШИННОЕ ОБУЧЕНИЕ КАК ИНСТРУМЕНТ ПЕРСОНАЛИЗИРОВАННОЙ МЕДИЦИНЫ</subject></subj-group><subj-group subj-group-type="section-heading" xml:lang="en"><subject>ARTIFICIAL INTELLIGENCE AND MACHINE LEARNING AS A TOOL FOR PERSONALIZED MEDICINE</subject></subj-group></article-categories><title-group><article-title>Применение методов машинного обучения для персонализированной оценки риска летального исхода после операции аортокоронарного шунтирования</article-title><trans-title-group xml:lang="en"><trans-title>Using machine learning methods for personalized assessment of the risk of death after coronary artery bypass surgery</trans-title></trans-title-group></title-group><contrib-group><contrib contrib-type="author" corresp="yes"><name-alternatives><name name-style="eastern" xml:lang="ru"><surname>Голухова</surname><given-names>Е. З.</given-names></name><name name-style="western" xml:lang="en"><surname>Golukhova</surname><given-names>E. Z.</given-names></name></name-alternatives><bio xml:lang="ru"><p>Голухова Елена Зеликовна, академик РАН, директор,</p><p>121552, Москва, Рублевское шоссе, д. 135.</p></bio><bio xml:lang="en"><p>Golukhova Elena Z., Academician of the Russian Academy of Sciences, Director, </p><p>135, Rublevskoe shosse, Moscow, 121552.</p></bio><xref ref-type="aff" rid="aff-1"/></contrib><contrib contrib-type="author" corresp="yes"><name-alternatives><name name-style="eastern" xml:lang="ru"><surname>Керен</surname><given-names>М. А.</given-names></name><name name-style="western" xml:lang="en"><surname>Keren</surname><given-names>M. A.</given-names></name></name-alternatives><bio xml:lang="ru"><p>Керен Милена Абрековна, д.м.н., старший научный сотрудник отделения хирургии сочетанных заболеваний коронарных и магистральных артерий,</p><p>121552, Москва, Рублевское шоссе, д. 135.</p></bio><bio xml:lang="en"><p>Keren Milena A., MD, Senior Researcher at the Department of Surgery of Combined Diseases of the Coronary and Main Arteries, </p><p>135, Rublevskoe shosse, Moscow, 121552.</p></bio><email xlink:type="simple">milenamailru@mail.ru</email><xref ref-type="aff" rid="aff-1"/></contrib><contrib contrib-type="author" corresp="yes"><name-alternatives><name name-style="eastern" xml:lang="ru"><surname>Завалихина</surname><given-names>Т. В.</given-names></name><name name-style="western" xml:lang="en"><surname>Zavalikhina</surname><given-names>T. V.</given-names></name></name-alternatives><bio xml:lang="ru"><p>Завалихина Татьяна Владимировна, к.м.н., заместитель главного врача по амбулаторно-клинической работе ИКХ им. В. И. Бураковского, </p><p>121552, Москва, Рублевское шоссе, д. 135.</p></bio><bio xml:lang="en"><p>Zavalikhina Tatiana V., PhD, Deputy Chief Physician for Outpatient Clinical Work of the V. I. Burakovsky ICH, </p><p>135, Rublevskoe shosse, Moscow, 121552.</p></bio><xref ref-type="aff" rid="aff-1"/></contrib><contrib contrib-type="author" corresp="yes"><name-alternatives><name name-style="eastern" xml:lang="ru"><surname>Булаева</surname><given-names>Н. И.</given-names></name><name name-style="western" xml:lang="en"><surname>Bulaeva</surname><given-names>N. I.</given-names></name></name-alternatives><bio xml:lang="ru"><p>Булаева Наида Ибадулаевна, к.б.н., заведующая отделом координации и сопровождения научно-исследовательской деятельности и проведения тематических мероприятий, </p><p>121552, Москва, Рублевское шоссе, д. 135.</p></bio><bio xml:lang="en"><p>Bulaeva Naida I., Candidate of Biological Sciences, Head of the Department of Coordination and Support of Research Activities and Thematic Events, </p><p>Moscow.</p></bio><xref ref-type="aff" rid="aff-1"/></contrib><contrib contrib-type="author" corresp="yes"><name-alternatives><name name-style="eastern" xml:lang="ru"><surname>Сигаев</surname><given-names>И. Ю.</given-names></name><name name-style="western" xml:lang="en"><surname>Sigaev</surname><given-names>I. Yu.</given-names></name></name-alternatives><bio xml:lang="ru"><p>Сигаев Игорь Юрьевич, д.м.н., профессор, заведующий отделением хирургии сочетанных заболеваний коронарных и магистральных артерий, </p><p>121552, Москва, Рублевское шоссе, д. 135.</p></bio><bio xml:lang="en"><p>Sigaev Igor Yu., Doctor of Medical Sciences, Professor, Head of the Department of Surgery of Combined Diseases of the Coronary and Main Arteries,</p><p>135, Rublevskoe shosse, Moscow, 121552.</p></bio><xref ref-type="aff" rid="aff-1"/></contrib><contrib contrib-type="author" corresp="yes"><name-alternatives><name name-style="eastern" xml:lang="ru"><surname>Мерзляков</surname><given-names>В. Ю.</given-names></name><name name-style="western" xml:lang="en"><surname>Merzlyakov</surname><given-names>V. Yu.</given-names></name></name-alternatives><bio xml:lang="ru"><p>Мерзляков Вадим Юрьевич, д.м.н., заведующий отделением хирургического лечения ишемической болезни сердца и малоинвазивной коронарной хирургии, </p><p>121552, Москва, Рублевское шоссе, д. 135.</p></bio><bio xml:lang="en"><p>Merzlyakov Vadim Yu., MD, Head of the Department of Surgical Treatment of Coronary Heart Disease and Minimally Invasive Coronary Surgery, </p><p>135, Rublevskoe shosse, Moscow, 121552.</p></bio><xref ref-type="aff" rid="aff-1"/></contrib><contrib contrib-type="author" corresp="yes"><name-alternatives><name name-style="eastern" xml:lang="ru"><surname>Алшибая</surname><given-names>М. Д.</given-names></name><name name-style="western" xml:lang="en"><surname>Alsibaya</surname><given-names>M. D.</given-names></name></name-alternatives><bio xml:lang="ru"><p>Алшибая Михаил Дурмишханович, д.м.н., профессор, заведующий отделением хирургического лечения ишемической болезни сердца, </p><p>121552, Москва, Рублевское шоссе, д. 135.</p></bio><bio xml:lang="en"><p>Alsibaya Mikhail D., MD, Professor, Head of the Department of Surgical Treatment of Coronary Heart Disease, </p><p>135, Rublevskoe shosse, Moscow, 121552.</p></bio><xref ref-type="aff" rid="aff-1"/></contrib></contrib-group><aff-alternatives id="aff-1"><aff xml:lang="ru"><institution>Федеральное государственное бюджетное учреждение «Научный медицинский исследовательский центр сердечно-сосудистой хирургии имени А. Н. Бакулева» Министерства здравоохранения Российской Федерации</institution><country>Россия</country></aff><aff xml:lang="en"><institution>A. N. Bakulev National Medical Research Center for Cardiovascular Surgery</institution><country>Russian Federation</country></aff></aff-alternatives><pub-date pub-type="collection"><year>2023</year></pub-date><pub-date pub-type="epub"><day>22</day><month>11</month><year>2023</year></pub-date><volume>3</volume><issue>5</issue><fpage>6</fpage><lpage>13</lpage><permissions><copyright-statement>Copyright &amp;#x00A9; Голухова Е.З., Керен М.А., Завалихина Т.В., Булаева Н.И., Сигаев И.Ю., Мерзляков В.Ю., Алшибая М.Д., 2023</copyright-statement><copyright-year>2023</copyright-year><copyright-holder xml:lang="ru">Голухова Е.З., Керен М.А., Завалихина Т.В., Булаева Н.И., Сигаев И.Ю., Мерзляков В.Ю., Алшибая М.Д.</copyright-holder><copyright-holder xml:lang="en">Golukhova E.Z., Keren M.A., Zavalikhina T.V., Bulaeva N.I., Sigaev I.Y., Merzlyakov V.Y., Alsibaya M.D.</copyright-holder><license xml:lang="ru" license-type="creative-commons-attribution" xlink:href="https://creativecommons.org/licenses/by/4.0/" xlink:type="simple"><license-p>Данная работа распространяется под лицензией Creative Commons Attribution 4.0.</license-p></license><license xml:lang="en" license-type="creative-commons-attribution" xlink:href="https://creativecommons.org/licenses/by/4.0/" xlink:type="simple"><license-p>This work is licensed under a Creative Commons Attribution 4.0 License.</license-p></license></permissions><self-uri xlink:href="https://persmed.elpub.ru/jour/article/view/191">https://persmed.elpub.ru/jour/article/view/191</self-uri><abstract><p>Актуальность. Стремление к улучшению и оптимизации результатов хирургического лечения ишемической болезни сердца (ИБС), наряду с наблюдаемой интеграцией в здравоохранение методов искусственного интеллекта, создает предпосылки для изучения возможностей методов машинного обучения для прогнозирования неблагоприятных исходов после кардиохирургических вмешательств. Целью нашего исследования являлась оценка и сравнение точности прогнозирования смерти после операции АКШ с помощью методов машинного обучения и рекомендованной к применению шкалы оценки кардиохирургического риска EuroSCORE 2. Материалы и методы. На основании анализа обезличенных медицинских данных об исходах операции аортокоронарного шунтирования у 2 826 больных ИБС (выжившие — 2 785, умершие — 41), с помощью методов машинного обучения (логистическая регрессия (ЛР), LightGBM, XGBoost, CatBoost, бустинговая модель) были разработаны прогностические модели, оценивающие риск внутригоспитальной смерти после вмешательства. Эффективность прогнозирования полученных моделей была сравнена с результатами прогнозирования шкалы EuroSCORE 2. Для оценки производительности моделей использовались метрики, рекомендованные при анализе несбалансированных данных: точность, полнота, специфичность, F1-мера, ROC-AUC. Результаты. Модель, разработанная с помощью ЛР, обладала максимальной полнотой (0,88), однако при этом значительно завышала риск смерти (точность — 0,03). F1-мера для модели ЛР составила 0,06, ROC AUC — 0,77. Модели градиентного бустинга (LightGBM, XGBoost, CatBoost), в сравнении с ЛР, обладали более высокими показателями полноты, точности, специфичности, F1-меры и AUC. При этом наилучшие метрики качества наблюдались у бустинговой модели (БМ), которая объединяла в себе ЛР и модели градиентного бустинга. Показатели эффективности БМ: точность — 0,67, полнота — 0,50, F1-мера — 0,57, специфичность — 1,0, ROC-AUC — 0,85. Модель риска EuroSCORE 2 показала крайне низкую эффективность в прогнозировании смерти на исследуемой выборке: точность — 0,143, полнота — 0,125, F1-мера — 0,133, специфичность — 0,97, ROC-AUC — 0,47. Заключение. Методы машинного обучения (ММО) перспективны в прогнозной аналитике в кардиохирургии. В нашем исследовании прогностические модели на основе ММО показали преимущество в точности расчета риска госпитальной смерти после КШ в сравнении с классической моделью EuroSCORE 2. Для получения оптимальной модели риска, адаптированной к условиям применения в РФ, необходимы широкомасштабные многоцентровые исследования.</p></abstract><trans-abstract xml:lang="en"><p>Relevance. The desire to improve and optimize the results of surgical treatment of coronary heart disease (CHD), along with the observed integration of artificial intelligence methods into healthcare, creates prerequisites for exploring the possibilities of machine learning meth Relevance. The desire to improve and optimize the results of surgical treatment of coronary heart disease (CHD), along with the observed integration of artificial intelligence methods into healthcare, creates prerequisites for exploring the possibilities of machine learning methods for predicting adverse outcomes after cardiac surgery. The purpose of our study was to evaluate and compare the accuracy of predicting death after CABG surgery using machine learning methods and the recommended cardiac risk assessment scale EuroSCORE 2. Materials and methods. Based on the analysis of depersonalized medical data on the outcomes of coronary artery bypass surgery in 2,826 patients with coronary artery disease (survivors — 2,785, deceased — 41), using machine learning methods (logistic regression (LR), LightGBM, XGBoost, CatBoost, boosting model), prognostic models were developed that assess the risk of intrahospital death after intervention. The forecasting efficiency of the obtained models was compared with the forecasting results of the EuroSCORE 2 scale. To evaluate the performance of the models, the metrics recommended for the analysis of unbalanced data were used: precision, recall, specificity, F1-measure, ROC-AUC. Results. The model developed with the help of LR had the maximum recall (0.88), but at the same time significantly overestimated the risk of death (precision — 0.03). F1-measure for the LR model was 0.06, ROC AUC — 0.77. Gradient boosting models (LightGBM, XGBoost, CatBoost), in comparison with LR, had higher indicators of precision, recall, specificity, F1-measures and AUC. At the same time, the best quality metrics were observed in the boosting model (BM), which combined LR and gradient boosting models. BM performance indicators: precision — 0.67, recall – 0,50, F1-measure — 0.57, specificity — 1.0, ROC-AUC — 0.85. The EuroSCORE 2 risk model showed extremely low efficiency in predicting death in the study sample: precision — 0.143, recall — 0.125, F1-measure — 0.133, specificity — 0.97, ROC-AUC — 0.47. Conclusion. Machine learning (ML) methods are promising in predictive analytics in cardiac surgery. In our study, predictive models based on ML showed an advantage in the accuracy of calculating the risk of hospital death after CABG in comparison with the classic EuroSCORE 2 model. To obtain an optimal risk model adapted to the conditions of application in the Russian Federation, largescale multicenter studies are needed.</p></trans-abstract><kwd-group xml:lang="ru"><kwd>аортокоронарное шунтирование</kwd><kwd>искусственный интеллект</kwd><kwd>ишемическая болезнь сердца</kwd><kwd>машинное обучение</kwd><kwd>смерть после коронарного шунтирования</kwd></kwd-group><kwd-group xml:lang="en"><kwd>artificial intelligence</kwd><kwd>coronary artery bypass grafting</kwd><kwd>coronary heart disease</kwd><kwd>death after coronary bypass grafting</kwd><kwd>machine learning</kwd></kwd-group></article-meta></front><back><ref-list><title>References</title><ref id="cit1"><label>1</label><citation-alternatives><mixed-citation xml:lang="ru">Doenst T, Haverich A, Serruys P, et al. PCI and CABG for Treating Stable Coronary Artery Disease: JACC Review Topic of the Week. J Am Coll Cardiol. 2019;73(8):964–976.</mixed-citation><mixed-citation xml:lang="en">Doenst T, Haverich A, Serruys P, et al. PCI and CABG for Treating Stable Coronary Artery Disease: JACC Review Topic of the Week. J Am Coll Cardiol. 2019;73(8):964–976.</mixed-citation></citation-alternatives></ref><ref id="cit2"><label>2</label><citation-alternatives><mixed-citation xml:lang="ru">Nashef SA, Roques F, Sharples LD et al. EuroSCORE II. Eur J Cardiothorac Surg. 2012;41:734–44.</mixed-citation><mixed-citation xml:lang="en">Nashef SA, Roques F, Sharples LD et al. EuroSCORE II. Eur J Cardiothorac Surg. 2012;41:734–44.</mixed-citation></citation-alternatives></ref><ref id="cit3"><label>3</label><citation-alternatives><mixed-citation xml:lang="ru">Shahian DM, O’Brien SM, Filardo G, et al. The Society of Thoracic Surgeons 2008 cardiac surgery risk models: Part 1–coronary artery bypass grafting surgery. Ann Thorac Surg. 2009;88(1):S2–22.</mixed-citation><mixed-citation xml:lang="en">Shahian DM, O’Brien SM, Filardo G, et al. The Society of Thoracic Surgeons 2008 cardiac surgery risk models: Part 1–coronary artery bypass grafting surgery. Ann Thorac Surg. 2009;88(1):S2–22.</mixed-citation></citation-alternatives></ref><ref id="cit4"><label>4</label><citation-alternatives><mixed-citation xml:lang="ru">Silverborn M, Nielsen S, Karlsson M. The performance of EuroSCORE II in CABG patients in relation to sex, age, and surgical risk: a nationwide study in 14,118 patients. J Cardiothorac Surg. 2023;18(1):40.</mixed-citation><mixed-citation xml:lang="en">Silverborn M, Nielsen S, Karlsson M. The performance of EuroSCORE II in CABG patients in relation to sex, age, and surgical risk: a nationwide study in 14,118 patients. J Cardiothorac Surg. 2023;18(1):40.</mixed-citation></citation-alternatives></ref><ref id="cit5"><label>5</label><citation-alternatives><mixed-citation xml:lang="ru">Shahian DM, Blackstone EH, Edwards FH, et al. STS workforce on evidence-based surgery. Cardiac surgery risk models: a position article. Ann Thorac Surg. 2004;78(5):1868–77.</mixed-citation><mixed-citation xml:lang="en">Shahian DM, Blackstone EH, Edwards FH, et al. STS workforce on evidence-based surgery. Cardiac surgery risk models: a position article. Ann Thorac Surg. 2004;78(5):1868–77.</mixed-citation></citation-alternatives></ref><ref id="cit6"><label>6</label><citation-alternatives><mixed-citation xml:lang="ru">Голухова Е.З., Керен М.А., Сигаев И.Ю. и др. Датасет размеченных данных пациентов со стабильной ИБС, перенесших реваскуляризацию миокарда (коронарное шунтирование и коронарное стентирование), предназначенный для обучения нейронной сети. Свидетельство о регистрации № 2022620223, 25.01.2022].</mixed-citation><mixed-citation xml:lang="en">Golukhova EZ, Keren MA, Sigaev IYu, et al. A dataset of labeled data of patients with stable coronary artery disease who underwent myocardial revascularization (coronary bypass surgery and coronary stenting), created for training a neural network. Patent on the application #2021622974, 25.01.2022. (In Russian)</mixed-citation></citation-alternatives></ref><ref id="cit7"><label>7</label><citation-alternatives><mixed-citation xml:lang="ru">Голухова Е.З., Керен М.А., Завалихина Т.В. и др. Эффективность машинного обучения в прогнозировании ранней послеоперационной смерти после операции коронарного шунтирования. Креативная кардиология. 2023;17(1):77–93].</mixed-citation><mixed-citation xml:lang="en">Golukhova EZ, Keren MA, Zavalikhina TV, et al. The effectiveness of machine learning in predicting early postoperative death after coronary bypass surgery. Creative cardiology. 2023;17(1):77–93. (In Russian)</mixed-citation></citation-alternatives></ref><ref id="cit8"><label>8</label><citation-alternatives><mixed-citation xml:lang="ru">Penny-Dimri JC, Bergmeir C, Perry L, et al. Machine learning to predict adverse outcomes after cardiac surgery: A systematic review and meta-analysis. J Card Surg. 2022;37 (11):3838–3845.</mixed-citation><mixed-citation xml:lang="en">Penny-Dimri JC, Bergmeir C, Perry L, et al. Machine learning to predict adverse outcomes after cardiac surgery: A systematic review and meta-analysis. J Card Surg. 2022;37 (11):3838–3845.</mixed-citation></citation-alternatives></ref><ref id="cit9"><label>9</label><citation-alternatives><mixed-citation xml:lang="ru">Benedetto U, Dimagli A, Sinha S, et al. Machine learning improves mortality risk prediction after cardiac surgery: Systematic review and meta-analysis. J Thorac Cardiovasc Surg. 2022;163(6):2075–2087.</mixed-citation><mixed-citation xml:lang="en">Benedetto U, Dimagli A, Sinha S, et al. Machine learning improves mortality risk prediction after cardiac surgery: Systematic review and meta-analysis. J Thorac Cardiovasc Surg. 2022;163(6):2075–2087.</mixed-citation></citation-alternatives></ref><ref id="cit10"><label>10</label><citation-alternatives><mixed-citation xml:lang="ru">Голухова Е.З., Керен М.А., Завалихина Т.В. и др. Возможности методов машинного обучения в стратификации операционного риска у больных ишемической болезнью сердца, направляемых на коронарное шунтирование. Российский кардиологический журнал. 2023;28(2):102–109.</mixed-citation><mixed-citation xml:lang="en">Golukhova EZ, Keren MA, Zavalikhina TV, et al. The possibilities of machine learning methods in the stratification of operational risk in patients with coronary artery disease referred for coronary bypass surgery. Russian Journal of Cardiology. 2023;28(2):102–109. (In Russian)</mixed-citation></citation-alternatives></ref></ref-list><fn-group><fn fn-type="conflict"><p>The authors declare that there are no conflicts of interest present.</p></fn></fn-group></back></article>
