medalphabetМедицинский алфавитMedical alphabet2078-56312949-2807ООО «Альфмед»10.33667/2078-5631-2022-11-19-26medalphabet-2659Research ArticleСтатьиСогласование врачебных описаний электрокардиограммы с применением тезауруса (списка типовых фраз) заключенийAgreement process of ECG annotations using thesaurus (list of typical phrases) of ECG conclusionshttps://orcid.org/0000-0001-7374-3604ДроздовД. В.DrozdovD. V.

Дроздов Дмитрий Владимирович

Москва

Drozdov Dmitrii V.

Moscow

cardioexp@gmail.comhttps://orcid.org/0000-0003-1836-3689ШутовД. В.ShutovD. V.

Шутов Дмитрий Валериевич

Москва

Shutov Dmitry V.

Moscow

https://orcid.org/0000-0002-5875-9699ГазашвилиТ. М.GazashviliT. M.

Газашвили Тамара Михайловна

Москва

Gazashvili Tamara M.

Moscow

https://orcid.org/0000-0002-7733-4709ПолянскаяН. А.PolyanskayaN. A.

Полянская Наталья Анатольевна

Новосибирск

Polyanskaya Natalia A.

Novosibirsk

https://orcid.org/0000-0001-8147-6315ЖукМ. Ю.ZhukM. Y.

Жук Мария Юрьевна

Москва

Zhuk Maria Yu.

Novosibirsk

ФГАОУ ВО «Московский физико-технический институт» («МФТИ»)РоссияMoscow Institute of Physics and TechnologyRussian FederationГБУЗ города Москвы «Научно-практический клинический центр диагностики и телемедицинских технологий Департамента здравоохранения города Москвы» («НПКЦ ДиТ ДЗМ»)РоссияScientific and Practical Clinical Center for Diagnostics and Telemedicine Technologies of the Department of Healthcare of the City of MoscowRussian FederationГБУЗ города Москвы «Городская клиническая больница им. Л.А. Ворохобова Департамента здравоохранения города Москвы» («ГКБ им. Л.А. Ворохобова ДЗМ»)РоссияL.A. Vorokhobov City Clinical Hospital of the Department of Healthcare of the City of MoscowRussian FederationФГБУЗ «Сибирский окружной медицинский центр Федерального медико-биологического агентства» (СОМЦ ФМБА России)РоссияSiberian District Medical Centre Of Federal Medical-Biological AgencyRussian FederationГБУ города Москвы «Станция скорой и неотложной медицинской помощи им. А.С. Пучкова» Департамента здравоохранения города МосквыРоссияA.S. Puchkov Ambulance and Emergency Medical Care StationRussian Federation202216062022011Современная функциональная диагностика (2)1926Copyright © Дроздов Д.В., Шутов Д.В., Газашвили Т.М., Полянская Н.А., Жук М.Ю., 20222022Дроздов Д.В., Шутов Д.В., Газашвили Т.М., Полянская Н.А., Жук М.Ю.Drozdov D.V., Shutov D.V., Gazashvili T.M., Polyanskaya N.A., Zhuk M.Y.Данная работа распространяется под лицензией Creative Commons Attribution 4.0.This work is licensed under a Creative Commons Attribution 4.0 License.https://www.med-alphabet.com/jour/article/view/2659

Разработан тезаурус (логически упорядоченный список) утверждений для врачебного описания ЭКГ. С помощью этого тезауруса и веб-интерфейса 3 врачами независимо были описаны (проаннотированы) 549 ЭКГ из базы данных PTB Diagnostic ECG Database. Полученные описания совпали не полностью (при попарном сравнении аннотаций доля совпадений от 3 до 100% по разным группам заключений). Затем было произведено согласование полученных аннотаций, для чего была разработана специальная процедура с участием модераторов (врачей высокой квалификации) и с использованием видеоконференций. Описания ЭКГ размещены в открытом доступе и могут быть использованы как для целей контроля знаний, так и для проверки точности работы алгоритмов автоматического анализа ЭКГ.

A thesaurus (logically ordered list) of statements for the ECG annotation has been developed. 549 ECGs from the PTB Diagnostic ECG Database were independently annotated by 3 clinicians using this thesaurus and web interface. The resulting independent annotations did not match (the proportion of matches was from 3 to 100% for different groups of conclusions in pairwise comparison of annotators). The annotations were agreed, for which a special procedure was developed. The procedure includes participation of moderators (highly qualified physicians) and using videoconferencing. Annotations are published in the public domain and can be used both for the purposes of knowledge control and for testing the accuracy of the automatic ECG analysis algorithms and software.

ЭКГаннотированиетезаурусавтоматический анализ ЭКГсиндромальные ЭКГ заключенияECGannotationsthesaurusautomatic ECG analysissyndromic ECG annotationsАвторы благодарят руководство и сотрудников ООО «МКС» (Москва) за оказанную поддержку при выполнении работы. Авторы выражают благодарность сотрудникам Лаборатории ЭКГ Отдела новых методов диагностики ФГБУ «НМИЦК им. академика Е. И. Чазова» Т. А. Сахновой, Е. В. Блиновой, А. В. Соболеву за обсуждение рукописи и ряд ценных соображений, высказанных ими в процессе обсуждения.The authors would like to thank the management and staff of OOO MKS (Moscow) for their support during the work. The authors express their gratitude to the staff of the ECG Laboratory of the Department of New Diagnostic Methods of ‘National Medical Research Center for Cardiology named after academician E.I. Chazov’ T.A. Sakhnova, E.V. Blinova, A.V. Sobolev for discussion of the manuscript and a number of valuable considerations expressed by them during the discussion.ReferencesГОСТ IEC60601–2–51–2011 Изделия медицинские электрические. Часть 2–51. Частные требования безопасности с учетом основных функциональных характеристик к регистрирующим и анализирующим одноканальным и многоканальным электрокардиографам. // М.: Стандартинформ, 2013. – 100 с. Идентичен международному стандарту IEC60601–2–51:2003 Medical electrical equipment Part 2–51: Particular requirements for safety, including essential performance, of recording and analysing single channel and multichannel electrocardiographs.ГОСТ IEC60601–2–51–2011 Изделия медицинские электрические. Часть 2–51. Частные требования безопасности с учетом основных функциональных характеристик к регистрирующим и анализирующим одноканальным и многоканальным электрокардиографам. // М.: Стандартинформ, 2013. – 100 с. Идентичен международному стандарту IEC60601–2–51:2003 Medical electrical equipment Part 2–51: Particular requirements for safety, including essential performance, of recording and analysing single channel and multichannel electrocardiographs.Physionet The Research Resource for Complex Physiologic Signals электронный ресурс https://physionet.org/ (дата обращения 10.09.2020)Physionet The Research Resource for Complex Physiologic Signals электронный ресурс https://physionet.org/ (дата обращения 10.09.2020)Bousseljot R., Kreiseler D., Schnabel A. Nutzung der EKG-Signaldatenbank CARDIODAT der PTB über das Internet //Biomedizinische Technik / Biomedical Engineering. – 1995. – Vol. 40. – No. s1. – P. 317–318.Bousseljot R., Kreiseler D., Schnabel A. Nutzung der EKG-Signaldatenbank CARDIODAT der PTB über das Internet //Biomedizinische Technik / Biomedical Engineering. – 1995. – Vol. 40. – No. s1. – P. 317–318.PTB Diagnostic ECG Database (Ralf-Dieter Bousseljot, published: Sept. 25, 2004. Version: 1.0.0) электронный ресурс https://physionet.org/content/ptbdb/1.0.0/ DOI doi.org/10.13026/C28C71 (дата обращения 10.09.2020)PTB Diagnostic ECG Database (Ralf-Dieter Bousseljot, published: Sept. 25, 2004. Version: 1.0.0) электронный ресурс https://physionet.org/content/ptbdb/1.0.0/ DOI doi.org/10.13026/C28C71 (дата обращения 10.09.2020)Goldberger, A., Amaral, L., Glass, L. et. al. PhysioBank, PhysioToolkit, and PhysioNet: Components of a new research resource for complex physiologic signals. Circulation [Online]. – 2000. – Vol. 101. – No. 23. – P. e215–e220.Goldberger, A., Amaral, L., Glass, L. et. al. PhysioBank, PhysioToolkit, and PhysioNet: Components of a new research resource for complex physiologic signals. Circulation [Online]. – 2000. – Vol. 101. – No. 23. – P. e215–e220.ECG.RU. Клиническая оценка ЭКГ‑12. Электронный ресурс https://ecg.ru/ records (дата обращения 12.09.2020)ECG.RU. Clinical evaluation of ECG‑12. Electronic resource https://ecg.ru/records (accessed 12.09.2020)Recommendations for the standardization and interpretation of the electrocardiogram: part II: electrocardiography diagnostic statement list a scientific statement from the American Heart Association Electrocardiography and Arrhythmias Committee, Council on Clinical Cardiology; the American College of Cardiology Foundation; and the Heart Rhythm Society Endorsed by the International Society for Computerized Electrocardiology //Journal of the American College of Cardiology. – 2007. – Vol. 49. – No. 10. – P. 1128–1135.Recommendations for the standardization and interpretation of the electrocardiogram: part II: electrocardiography diagnostic statement list a scientific statement from the American Heart Association Electrocardiography and Arrhythmias Committee, Council on Clinical Cardiology; the American College of Cardiology Foundation; and the Heart Rhythm Society Endorsed by the International Society for Computerized Electrocardiology //Journal of the American College of Cardiology. – 2007. – Vol. 49. – No. 10. – P. 1128–1135.Касерес Ц. Какие доводы можно было бы привести против автоматизации электрокардиографии? / Вычислительные системы и автоматическая диагностика заболеваний сердца: [Сборник статей] / Под ред. Ц. Касереса и Л. Дрейфуса; Пер. с англ. Л.И. Титомира и В.В. Шакина – М.: Мир, 1974. – 501 с.Caceres C. What arguments could be made against the automation of electrocardiography? / Computing systems and automatic diagnosis of heart diseases: [Collected papers] / Ed.C. Caceres and L. Dreyfus; Per. from English. L.I. Titomir and V.V. Shakin – M .: Mir, 1974.– 501 p.Cook D.A., Oh S.Y., Pusic M.V. Accuracy of Physicians’ Electrocardiogram Interpretations: A Systematic Review and Meta-analysis. // JAMA Intern Med.– 2020 (Nov 1). – Vol. 180. – No. 11. – Р. 1461–1471. doi:10.1001/jamainternmed.2020.3989.Cook D.A., Oh S.Y., Pusic M.V. Accuracy of Physicians’ Electrocardiogram Interpretations: A Systematic Review and Meta-analysis. // JAMA Intern Med.– 2020 (Nov 1). – Vol. 180. – No. 11. – Р. 1461–1471. doi:10.1001/jamainternmed.2020.3989.Moody G.B., Mark R.G. The impact of the MIT-BIH Arrhythmia Database // IEEE Eng in Med and Biol. – 2001. – Vol. 20. – No. 3. – P. 45–50.Moody G.B., Mark R.G. The impact of the MIT-BIH Arrhythmia Database // IEEE Eng in Med and Biol. – 2001. – Vol. 20. – No. 3. – P. 45–50.Smíšek R. et al. CSE database: extended annotations and new recommendations for ECG software testing //Med Biol Eng Comp. – 2017. – Vol. 55. – No. 8.– P. 1473–1482. – doi:10.1007/s11517–016–1607–5Smíšek R. et al. CSE database: extended annotations and new recommendations for ECG software testing //Med Biol Eng Comp. – 2017. – Vol. 55. – No. 8.– P. 1473–1482. – doi:10.1007/s11517–016–1607–5Willems J. L. Common Standards for Quantitative Electrocardiography // Journal of medical engineering and technology. – 1985. – Vol. 9. – No. 5. – P. 209–217. – doi:10.3109/03091908509032101Willems J. L. Common Standards for Quantitative Electrocardiography // Journal of medical engineering and technology. – 1985. – Vol. 9. – No. 5. – P. 209–217. – doi:10.3109/03091908509032101Тестовая база РОХМИНЭ «ЭКГ в 12 стандартных отведениях» http://www.rohmine.org/baza-dannykh-rokhmine/testovaya-baza-standart-ekg‑2018-g/ (дата обращения 30.08.2020).Test database ROKhMINE «ECG in 12 standard leads» http://www.rohmine.org/baza-dannykh-rokhmine/testovaya-baza-standart-ekg‑2018-g/ (accessed 30.08.2020)Шутов Д.В., Дроздов Д.В., Газашвили Т.М. и др. Методические и нормативные аспекты создания набора данных ЭКГ для тестирования автоматизированных алгоритмов и систем искусственного интеллекта // Врач и информационные технологии.– 2021.– № 4.– С. 4–15.– doi: 1025881/18110193_2021_4_4.Shutov D.V., Drozdov D.V., Gazashvili T.M. et al. Methodological and normative aspects of creating an ECG data set for testing automated algorithms and artificial intelligence systems. Vrach i informatsionnye tekhnologii.– 2021.– No. 4.– P. 4–15. – doi:1025881/18110193_2021_4_4Statement of Validation and Accuracy for the Glasgow 12-Lead ECG Analysis Program. 2009 PhysioControl, Inc.Statement of Validation and Accuracy for the Glasgow 12-Lead ECG Analysis Program. 2009 PhysioControl, Inc.

The authors declare that there are no conflicts of interest present.