Introduction

farmaec

FARMAKOEKONOMIKA. Modern Pharmacoeconomics and Pharmacoepidemiology

ФАРМАКОЭКОНОМИКА. Современная фармакоэкономика и фармакоэпидемиология

2070-49092070-4933

IRBIS LLC

10.17749/2070-4909/farmakoekonomika.2020.021

farmaec-387

Research Article

ORIGINAL ARTICLES

ОРИГИНАЛЬНЫЕ ПУБЛИКАЦИИ

Analysis of 19.9 million publications from the PubMed/MEDLINE database using artificial intelligence methods: approaches to the generalizations of accumulated data and the phenomenon of “fake news

Анализ 19,9 млн публикаций базы данных PubMed/MEDLINE методами искусственного интеллекта: подходы к обобщению накопленных данных и феномен “fake news”

https://orcid.org/0000-0002-2659-7998

Торшин

И. Ю.

Torshin

I. Yu.

к.ф-м.н., к.х.н., с.н.с., Институт фармакоинформатики

Scopus Author ID: 7003300274; Author ID: 54104;

WoS ResearcherID: C-7683-2018; РИНЦ SPIN-код: 1375-1114

ул. Вавилова, д. 44, корп. 2, Москва 119333, Россия

Ленинские горы, д. 1, Москва 119991, Россия

MD, PhD, Senior Researcher; Big Data Storage and Analysis Center

Scopus Author ID: 7003300274; Author ID: 54104;

WoS ResearcherID: C-7683-2018; RSCI SPIN-code: 1375-1114 44-2 Vavilova Str., Moscow 119333, Russia

1 Leninskie gory, Moscow 119991, Russia

https://orcid.org/0000-0002-7663-710X

Громова

О. А.

Gromova

O. A.

д.м.н., профессор, в.н.с., научный руководитель Института фармакоинформатики; в.н.с.

Author ID: 94901; Scopus Author ID: 7003589812;

WoS ResearcherID: J-4946-2017. РИНЦ SPIN-код: 6317-9833

ул. Вавилова, д. 44, корп. 2, Москва 119333, Россия

Ленинские горы, д. 1, Москва 119991, Россия

MD, Dr Sci Med, Professor, Senior Researcher, Scientific Director; Leading Researcher, Center for Big Data Analysis

Author ID: 94901; Scopus Author ID: 7003589812;

WoS ResearcherID: J-4946-2017. RSCI SPIN-code: 6317-9833 44-2 Vavilova Str., Moscow 119333, Russia

1 Leninskie gory, Moscow 119991, Russia

unesco.gromova@gmail.com

Стаховская

Л. В.

Stakhovskaya

L. V.

д.м.н., профессор, директор

ул. Островитянова, д. 1, стр. 10, Москва 117342, Россия

MD, Dr Sci Med, Professor, director

ORCID ID: 0000-0001-6325-923 1-10 Ostrovityanova Str., Moscow 117997, Russia

https://orcid.org/0000-0003-1997-0202

Ванчакова

Н. П.

Vanchakova

N. P.

д.м.н., профессор, психиатр

пр. Культуры, д. 4, Санкт-Петербург 194291, Россия

MD, Dr Sci Med (medical psychology and psychiatry), Professor, Psychiatrist

(4 pr. Kultury, St. Petersburg, 194291, Russia

https://orcid.org/0000-0001-9679-632X

Галустян

А. Н.

Galustyan

A. N.

к.м.н., доцент, зав. кафедрой фармакологии с курсом клинической фармакологии и фармакоэкономики

ул. Литовская, д. 2, Санкт-Петербург 194100, Россия

MD, PhD, Associate Professor, Head of the Department of Pharmacology

2 Litovskaya Str., St. Petersburg 194100, Russia

Кобалава

Ж. Д.

Kobalava

Zh. D.

д.м.н., профессор, заведующая кафедрой внутренних болезней с курсом кардиологии и функциональной диагностики; заведующая кафедрой внутренних болезней, кардиологии и клинической фармакологии ФПК МР МИ ФГАОУ РУДН

ул. Миклухо-Маклая, д. 10/3, Москва 117198, Россия

MD, PhD, Professor, Head of the Department of Internal Medicine, Cardiology and Clinical Pharmacology

10/3 Miklukho-Maklaya Str., Moscow 117198, Russia

https://orcid.org/0000-0002-1665-1188

Гришина

Т. Р.

Grishina

T. R.

д.м.н., проф., зав. кафедрой фармакологии

Aurhor ID: 113019

Шереметевский проспект, д. 8, г. Иваново 153012, Россия

MD, Dr Sci Med, Нead of the Department of pharmacology

Aurhor ID: 113019

https://orcid.org/0000-0001-7507-191X

Громов

А. Н.

Gromov

A. N.

инженер-исследователь

AuthorID: 15082; Scopus Author ID: 7102053964;

WoS ResearcherID: C-7476-2018; РИНЦ SPIN-код: 8034-7910

ул. Вавилова, д. 44, корп. 2, Москва 119333, Россия

research engineer

AuthorID: 15082; Scopus Author ID: 7102053964;

WoS ResearcherID: C-7476-2018; RSCI SPIN-code: 8034-7910

44-2 Vavilova Str., Moscow 119333, Russia

https://orcid.org/0000-0003-3261-7366

Иловайская

И. А.

Ilovaiskaya

I. A.

врач-эндокринолог высшей категории, д.м.н., доцент, старший научный сотрудник отделения терапевтической эндокринологии

ResearcherID: I-1159-2014; Scopus Author ID: 6506067338

ул. Щепкина, д. 61/2, Москва 129110, Россия

MD, Dr Sci Med, endocrinologist of the highest category, associate professor, senior researcher at the Department of Therapeutic Endocrinology

ResearcherID: I-1159-2014; Scopus Author ID: 6506067338

Коденцова

В. М.

Kodentsova

V. M.

д.б.н., профессор, г.н.с., лаборатория витаминов и микроэлементов

Устьинский проезд, д. 2/14, Москва 109240, Россия

Dr Sci Biol, Professor, Senior Researcher, Laboratory of Vitamins and Microelements

14 Ustinsky proezd, Moscow 109240, Russia

https://orcid.org/0000-0001-6144-5781

Калачева

А. Г.

Kalacheva

A. G.

к.м.н., доцент кафедры фармакологии

Шереметевский проспект, д. 8, г. Иваново 153012, Россия

MD, PhD, Associate Professor of the Department of Pharmacology and Clinical Pharmacology

8 Sheremetevsky prospekt, Ivanovo 153012, Russia

https://orcid.org/0000-0002-2342-3036

Лиманова

О. А.

Limanova

O. A.

к.м.н., доцент кафедры фармакологии

Шереметевский проспект, д. 8, г. Иваново 153012, Россия

MD, PhD, Associate Professor of the Department of Pharmacology

https://orcid.org/0000-0003-4120-1071

Максимов

В. А.

Maksimov

V. A.

д.м.н., профессор кафедры диетологии и нутрициологии, гастроэнтеролог

Баррикадная ул., д. 2/1, стр. 1, Москва 125993, Россия

MD, Dr Sci Med, gastroenterologist, Professor of the Department of Dietetics and Nutritionology

https://orcid.org/0000-0003-2521-0824

Малявская

С. И.

Malyavskaya

S. I.

д.м.н., профессор, проректор по научной работе

eLIBRARY ID: 6257-4400

Троицкий проспект, д. 51, г. Архангельск 163000, Россия

MD, Dr Sci Med, Professor, Head of Sciences

eLIBRARY ID: 6257-4400

Мозговая

Е. В.

Mozgovaya

E. V.

д.м.н., доцент, руководитель акушерского отдела с перинатологией; профессор кафедры акушерства, гинекологии и репродуктологии медицинского факультета

WoS ResearcherID: L-1432-2017; Author ID Scopus: 24822403200; Author ID: 386830

Менделеевская линия, д. 3, Санкт-Петербург 199034,Россия

MD, Dr Sci Med, Associate Professor, Head of the Obstetric Department with Perinatology; Professor, Department of Obstetrics, Gynecology and Reproductology, Faculty of Medicine

WoS ResearcherID: L-1432-2017; Author ID Scopus: 24822403200; Author ID: 386830

https://orcid.org/0000-0001-5309-0087

Тапильская

Н. И.

Tapilskaya

N. I.

д.м.н., профессор, ведущий научный сотрудник отделения вспомогательных репродуктивных технологий

Author ID Scopus: 23013489000; WoS ResearcherID: A-7504-2016;

ID map of science: 00052162; РИНЦ SPIN-код: 3605-0413

ул. Литовская, д. 2, Санкт-Петербург 194100, Россия

Менделеевская линия, д. 3, Санкт-Петербург 199034,Россия

MD, Dr Sci Med, Professor, Leading Researcher of the Department of Assisted Reproductive Technologies

Author ID Scopus: 23013489000; WoS ResearcherID: A-7504-2016;

ID map of science: 00052162; RSCI SPIN-code: 3605-0413

2 Litovskaya Str., St. Petersburg 194100, Russia

3 Mendeleev Line, St. Petersburg 199034, Russia

Рудаков

К. В.

Rudakov

K. V.

акад. РАН, зам. директора, зав. кафедрой интеллектуальные системы МФТИ

Scopus Author ID: 6603540895

ул. Вавилова, д. 44, корп. 2, Москва 119333, Россия

Academician of the Russian Academy of Sciences, Scientifik Director, head of Department of Intellectual Systems MIPT.

Scopus Author ID: 6603540895

Семенов

В. А.

Semenov

V. A.

д.м.н., профессор

ул. Ворошилова, д. 22а, г. Кемерово 650056, Россия

MD, Dr Sci Med, Professor

22a Voroshilova Str., Kemerovo 650056, Russia

Федеральный исследовательский центр «Информатика и управление» РАН (ФИЦ ИУ РАН); Центр хранения и анализа больших данных, Федеральное государственное бюджетное образовательное учреждение высшего образования «Московский государственный университет имени М. В. Ломоносова»РоссияFederal Research Center “Informatics and Management of the Russian Academy of Sciences; Moscow State UniversityRussian Federation

Федеральное государственное бюджетное учреждение «Федеральный центр цереброваскулярной патологии и инсульта» Министерства здравоохранения Российской ФедерацииРоссияFederal Center for Cerebrovascular Pathology and StrokeRussian Federation

Центр психосоматической медицины при клинической больнице № 122 им. Л. Г. СоколоваРоссияCenter for Psychosomatic Medicine at the Clinical Hospital No. 122 named after L. G. SokolovRussian Federation

Федеральное государственное автономное образовательное учреждение высшего образования «Российский университет дружбы народов» (Медицинский институт)РоссияPeoples’ Friendship University of RussiaRussian Federation

Федеральное государственное бюджетное образовательное учреждение высшего образования «Ивановская государственная медицинская академия» Министерства здравоохранения Российской ФедерацииРоссияIvanovo State Medical AcademyRussian Federation

Федеральный исследовательский центр «Информатика и управление» РАН (ФИЦ ИУ РАН)РоссияFederal Research Center “Informatics and Management of the Russian Academy of SciencesRussian Federation

Государственное бюджетное учреждение здравоохранения Московской области «Московский областной научно-исследовательский клинический институт им. М. Ф. Владимирского»РоссияThe State Budgetary Healthcare Institution of Moscow Area Moscows regional research clinical institute n.a. M. F. VladimirskiyRussian Federation

Федеральное государственное бюджетное учреждение науки «ФИЦ питания и биотехнологии»РоссияFederal Research Center for Nutrition and BiotechnologyRussian Federation

Федеральное государственное бюджетное образовательное учреждение дополнительного профессионального образования «Российская медицинская академия непрерывного профессионального образования» Министерства здравоохранения Российской ФедерацииРоссияFederal State Budgetary Educational Institution of Continuing Professional Education “Russian Medical Academy of Continuing Professional Education” of the Ministry of Health of the Russian FederationRussian Federation

Федеральное государственное бюджетное образовательное учреждение высшего образования «Северный государственный медицинский университет» Министерства здравоохранения Российской ФедерацииРоссияNorthern State Medical UniversityRussian Federation

Федеральное государственное бюджетное научное учреждение «Научно-исследовательский институт акушерства, гинекологии и репродуктологии имени Д. О. Отта»РоссияThe Research Institute of Obstetrics, Gynecology and Reproductology named after D. O. Ott; Saint-Petersburg State Pediatric Medical UniversityRussian Federation

Государственное бюджетное образовательное учреждение высшего образования «Санкт-Петербургский государственный педиатрический медицинский университет» Министерства здравоохранения Российской Федерации; Федеральное государственное бюджетное научное учреждение «Научно-исследовательский институт акушерства, гинекологии и репродуктологии имени Д. О. Отта»РоссияSaint-Petersburg State Pediatric Medical University; The Research Institute of Obstetrics, Gynecology and Reproductology named after D. O. OttRussian Federation

Федеральное государственное бюджетное образовательное учреждение высшего образования «Кемеровский государственный медицинский университет»РоссияKemerovo State Medical UniversityRussian Federation

2020

08082020

132146163

Copyright © Torshin I.Y., Gromova O.A., Stakhovskaya L.V., Vanchakova N.P., Galustyan A.N., Kobalava Z.D., Grishina T.R., Gromov A.N., Ilovaiskaya I.A., Kodentsova V.M., Kalacheva A.G., Limanova O.A., Maksimov V.A., Malyavskaya S.I., Mozgovaya E.V., Tapilskaya N.I., Rudakov K.V., Semenov V.A., 2020

2020

Торшин И.Ю., Громова О.А., Стаховская Л.В., Ванчакова Н.П., Галустян А.Н., Кобалава Ж.Д., Гришина Т.Р., Громов А.Н., Иловайская И.А., Коденцова В.М., Калачева А.Г., Лиманова О.А., Максимов В.А., Малявская С.И., Мозговая Е.В., Тапильская Н.И., Рудаков К.В., Семенов В.А.

Torshin I.Y., Gromova O.A., Stakhovskaya L.V., Vanchakova N.P., Galustyan A.N., Kobalava Z.D., Grishina T.R., Gromov A.N., Ilovaiskaya I.A., Kodentsova V.M., Kalacheva A.G., Limanova O.A., Maksimov V.A., Malyavskaya S.I., Mozgovaya E.V., Tapilskaya N.I., Rudakov K.V., Semenov V.A.

This work is licensed under a Creative Commons Attribution 4.0 License.

https://www.pharmacoeconomics.ru/jour/article/view/387

Introduction

Introduction. The English-language databases PubMed/MEDLINE and Embase are valuable information resources for finding original publications in basic and clinical medicine. Currently, there are no artificial intelligence systems to evaluate the quality of these publications.

Aim

Aim. Development and testing of a system for sentiment analysis (i.e. analysis of emotional modality) of biomedical publications.

Materials and methods

Materials and methods. The technique of analysis of the “Big data” of biomedical publications was formulated on the basis of the topological theory of sentiment analysis. Algorithms have been developed that allow for the classification of texts from 16 sentiment classes with 90% accuracy (manipulative speech, research without positive results, propaganda, falsification of results, negative personal attitude, aggressive text, negative emotional background, etc.). Based on the algorithms, a scale for assessing the sentiment quality of research (β-score) is proposed.

Results

Results. Abstracts of 19.9 million publications registered in PubMed/MEDLINE over the past 50 years (1970–2019) were analyzed. It was shown that publications with low sentiment quality (the value of the β-score of the text is less than zero, which corresponds to the prevalence of manipulative and negative sentiments in the text) comprise only 18.5% (3.68 out of 19.9 million). The greatest values of the β-score were characterized by publications on sports medicine, systems biology, nutrition, on the use of applied mathematics and data mining in medicine. The rubrication of the entire array of publications by 27,840 headings (MESH-system of PubMed/MEDLINE) indicated an increase in the β-score by years (i.e., the positive dynamics of sentiment quality of the texts of publications) for 27,090 of the studied headings. The most intense positive dynamics was found for research in genetics, physiology, pharmacology, and gerontology. 249 headings with sharply negative dynamics of sentiment quality and with a pronounced increase in the manipulative sentiments characteristic of the tabloid press were highlighted. Separate assessments of international experts are presented that confirm the patterns identified.

Conclusion

Conclusion. The proposed artificial intelligence system allows a researcher to make an effective assessment of the sentiment quality of biomedical research papers, filtering out potentially inappropriate publications disguised as “evidence-based”.

Введение

Введение. Англоязычные базы данных PubMed/MEDLINE и Embase являются ценными информационными ресурсами для нахождения оригинальных публикаций по фундаментальной и клинической медицине. В настоящее время не существует систем искусственного интеллекта, позволяющих оценивать качество этих публикаций.

Цель

Цель. Разработка и апробация системы для проведения сентимент-анализа (то есть анализа эмоциональной модальности) публикаций по биомедицине.

Материалы и методы

Материалы и методы. Сформулирована методика анализа «больших данных» биомедицинских публикаций, основанная на топологической теории сентимент-анализа медицинских текстов. Разработаны алгоритмы, позволяющие с 90%-й точностью классифицировать тексты по 16 классам сентиментов (манипулятивные обороты речи, исследования без положительных результатов, пропаганда, подделка результатов, негативное личное отношение, агрессивность текста, негативный эмоциональный фон и др.). На основе алгоритмов предложена балльная шкала оценки сентимент-качества исследований (β-балл).

Результаты

Результаты. Проведен анализ текстов абстрактов 19,9 млн публикаций, зарегистрированных в PubMed/MEDLINE за последние 50 лет (1970–2019). Показано, что публикации с низким сентимент-качеством (значение β-балла текста меньше нуля, что соответствует преобладанию манипулятивных и негативных сентиментов в тексте) составляют всего 18,5% (3,68 из 19,9 млн). Наибольшими значениями β-балла характеризовались публикации по спортивной медицине, системной биологии, нутрициологии, по использованию методов прикладной математики и интеллектуального анализа данных в медицине. Рубрикация всего массива публикаций по 27840 рубрикам (MESH-система PubMed/MEDLINE) указала на повышение β-балла по годам (то есть на положительную динамику сентимент-качества текстов публикаций) для 27090 исследованных рубрик. Наиболее интенсивная положительная динамика найдена для исследований по генетике, физиологии, фармакологии и геронтологии. Выделены 249 рубрик с резко отрицательной динамикой сентимент-качества и с выраженным нарастанием манипулятивных сентиментов, характерных для «желтой» англоязычной прессы. Приведены отдельные оценки международных экспертов, которые подтверждают выявленные закономерности.

Заключение

Заключение. Разработанная система искусственного интеллекта позволяет проводить эффективную оценку сентимент-качества биомедицинских исследований, отфильтровывая потенциально неадекватные публикации, публикуемые под маской «доказательных».

Анализ больших данныхфармакоинформатикаискусственный интеллектдоказательная медицинамашинное обучениеалгоритмы оценки качества публикацийтематическое моделирование

Big data analysispharmacoinformaticsartificial intelligenceevidence-based medicinemachine learningpublication quality assessment algorithmsthematic modeling

Работа выполнена при поддержке грантов РФФИ 19-07-00356 17-07-00935 17-07-01419 18-07-01022 18-07-00944 18-07-00929 16-07-01133

This work was supported by grants from the Russian Foundation for Basic Research 19-07-00356 17-07-00935 17-07-01419 18-07-01022 18-07- 00944 18-07-00929 16-07-01133.

References1

Canese K., Weis S. PubMed: The Bibliographic Database. 2002 Oct 9 [Updated 2013 Mar 20]. In: The NCBI Handbook. 2nd edition. Bethesda (MD): National Center for Biotechnology Information (US); [Электронный ресурс] URL: https://www.ncbi.nlm.nih.gov/books/NBK153385/. Дата обращения: 12.12.2019.

Canese K., Weis S. PubMed: The Bibliographic Database. 2002 Oct 9 [Updated 2013 Mar 20]. In: The NCBI Handbook. 2nd edition. Bethesda (MD): National Center for Biotechnology Information (US); [Electronic resource] URL: https://www.ncbi.nlm.nih.gov/books/NBK153385/. Accessed: 12.12.2019.

Li L., Smith H. E., Atun R., Tudor Car L. Search strategies to identify observational studies in MEDLINE and Embase. Cochrane Database Syst Rev. 2019; MR000041. DOI: https://dx.doi.org/10.1002/14651858.MR000041.pub2.

Громова О. А., Торшин И. Ю. Витамин D – смена парадигмы. М. 2017; 750 с.

Gromova O. A., Torshin I. Yu. Vitamin D – a paradigm shift. Moscow. 2017; 750.

Громова О.А., Торшин И.Ю. Микронутриенты ирепродуктивное здоровье. Руководство. М. 2019; 672 c.

Gromova O. A., Torshin I. Yu. Micronutrients and reproductive health. Guide. Moscow. 2019; 672 c.

Stewart Chaplin. The Stained Glass Political Platform. The Century Magazine. USA. 1900.

Summers E. Weasel Words: 200 Words You Shouldn’t Trust: 200 Words You Can’t Trust. Chambers (Ed.), Slang & Idiom Dictionaries. 2009; 208 p.

Watson D. Watson’s Dictionary of Weasel Words, Contemporary Cliches, Cant and Management Jargon. Knopf, 1st Ed. 2004; 357 p.

Torshin I. Y., Rudakov K. V. Combinatorial analysis of the solvability properties of the problems of recognition and completeness of algorithmic models. Part 1: factorization approach. Pattern Recognition and Image Analysis (Advances in Mathematical Theory and Applications). 2017; 27 (1): 16–28.

Torshin I. Yu., Rudakov K. V. Combinatorial analysis of the solvability properties of the problems of recognition and completeness of algorithmic models. Part 2: metric approach within the framework of the theory of classification of feature values. Pattern Recognition and Image Analysis (Advances in Mathematical Theory and Applications). 2017; 27 (2): 184–199.

Torshin I. Y. Optimal dictionaries of the final information on the basis of the solvability criterion and their applications in bioinformatics. Pattern Recognition and Image Analysis (Advances in Mathematical Theory and Applications). 2013; 23 (2): 319–327.

Torshin I. Yu., Rudakov K. V. On the theoretical basis of the metric analysis of poorly formalized problems of recognition and classification. Pattern Recognition and Image Analysis (Advances in Mathematical Theory and Applications). 2015; 25 (4): 577–587.

Torshin I. Yu., Rudakov K.V. On the theoretical basis of the metric analysis of poorly formalized problems of recognition and classification. Pattern Recognition and Image Analysis (Advances in Mathematical Theory and Applications). 2015; 25 (4): 577–587.

Torshin I.Y., Rudakov K.V. On metric spaces arising during formalization of problems of recognition and classification. Part 1: properties of compactness. Pattern Recognition and Image Analysis (Advances in Mathematical Theory and Applications). 2016; 26 (2): 274.

Torshin I. Y., Rudakov K. V. On metric spaces arising during formalization of problems of recognition and classification. Part 1: properties of compactness. Pattern Recognition and Image Analysis (Advances in Mathematical Theory and Applications). 2016; 26 (2): 274.

Torshin I. Yu., Rudakov K. V. On metric spaces arising during formalization of problems of recognition and classification. Part 2: density properties. Pattern Recognition and Image Analysis (Advances in Mathematical Theory and Applications). 2016; 26 (3): 483–496.

Torshin I. Y., Rudakov K. V. On the application of the combinatorial theory of solvability to the analysis of chemographs. part 1: fundamentals of modern chemical bonding theory and the concept of the chemograph. Pattern Recognition and Image Analysis (Advances in Mathematical Theory and Applications). 2014; 24 (1): 11–23.

Torshin I.Y., Rudakov K.V. On the application of the combinatorial theory of solvability to the analysis of chemographs. part 1: fundamentals of modern chemical bonding theory and the concept of the chemograph. Pattern Recognition and Image Analysis (Advances in Mathematical Theory and Applications). 2014; 24 (1): 11–23.

Torshin I. Y., Rudakov K. V. On the application of the combinatorial theory of solvability to the analysis of chemographs. Part 2: local completeness of invariants of chemographs in view of the combinatorial theory of solvability. Pattern Recognition and Image Analysis (Advances in Mathematical Theory and Applications). 2014; 24 (2): 196–208.

Torshin I. Yu., Rudakov K. V. On the Procedures of Generation of Numerical Features Over Partitions of Sets of Objects in the Problem of Predicting Numerical Target Variables. Pattern Recognition and Image Analysis (Advances in Mathematical Theory and Applications). 2019; 29 (4): 654–667. DOI: https://dx.doi.org/10.1134/S1054661819040175.

Torshin I. Yu., Rudakov K. V. On the Procedures of Generation of Numerical Features Over Partitions of Sets of Objects in the Problem of Predicting Numerical Target Variables. Pattern Recognition and Image Analysis. 2019; 29 (4): 654–667. DOI: https://dx.doi.org/10.1134/S1054661819040175.

Чернышев В. М. Меч Обоюдоострый. Конспект по Сектоведению. М. 2011; 138 с.

Chernyshev V. M. Sword Double-edged. Abstract on Sectology. Moscow. 2011; 138 s. (in Russ)

Дворкин А. Л. Сектоведение: Тоталитарные секты. Опыт систематического исследования. 3-е изд., перераб. и доп. Н. Новгород. 2014; 816 с.

Dvorkin A.L. Sectology: Totalitarian sects. Experience in systematic research. 3rd ed., Revised. and add. N. Novgorod. 2014; 816 s. (in Russ)

Okter A. Mastermind: The Truth of the British Deep State. Arashtirma Publishing. 2017; 698 pp.

Котеров А. Н. Критерии причинности в медикобиологических дисциплинах: история, сущность и радиационный аспект. Сообщение 1. постановка проблемы, понятие о причинах и причинности, ложные ассоциации. Радиационная биология, радиоэкология. 2019; 59 (1): 5–36. DOI: https://dx.doi.org/10.1134/S0869803119010065.

Koterov A. N. Causal Criteria in Medical and Biological Disciplines: History, Essenceand Radiation Aspect. Report 1. Problem Statement, Conceptionof Causes and Causation, False Associations. Radiatsionnaya biologiya, radioekologiya (in Russ). 2019; 59 (1): 5–36. DOI: https://dx.doi.org/10.1134/S0869803119010065.

Поппер К.Р. Предположения и опровержения: рост научного знания. М. 2004; 638 с.

Popper K. R. Assumptions and rebuttals: the growth of scientific knowledge. Moscow. 2004.

Громова О.А., Торшин И.Ю., Тетруашвили Н.К., Тапильская Н.И. Систематический анализ эффектов молибдена: здоровье беременной и плода. Вопросы гинекологии, акушерства и перинатологии. 2019; 18 (4): 83–94. DOI: https://dx.doi.org/10.20953/1726-1678-2019-4-83-94.

Gromova O. A., Torshin I. Yu., Tetruashvili N. K., Tapil’skaya N.I. A systematic analysis of the effects of molybdenum: the health of the pregnant woman and the fetus. Voprosy ginekologii, akusherstva i perinatologii. 2019; 18 (4): 83–94 (in Russ). DOI: https://dx.doi.org/10.20953/1726-1678-2019-4-83-94.

Громова О.А., Торшин И.Ю., Тетруашвили Н.К., Галустян А.Н., Курицына Н.А. О перспективах использования комбинаций фолиевой кислоты и активных фолатов для нутрициальной поддержки беременности. Акушерство и гинекология. 2019; 4: 87–94. DOI: https://dx.doi.org/10.18565/aig.2019.4.87-94.

Gromova O. A., Torshin I. Yu., Tetruashvili N. K., Galustyan A. N., Kuritsyna N. A. On prospects for using combinations of folic acid and active folates for the nutritional support of pregnancy. Akusherstvo i ginekologiya. 2019; 4: 87–94 (in Russ). DOI: https://dx.doi.org/10.18565/aig.2019.4.87-94

Торшин И. Ю., Лила А. М., Громова О. А., Наумов А. В., Громов А. Н. Об антикоагулянтных и антиагрегантных свойствах молекулы глюкозамина сульфата. Современная ревматология. 2019; 13 (3): 135–141. DOI: https://dx.doi.org/10/14412/1996-7012-2019-3-135-141.

Torshin I.Y., Lila A.M., Gromova O.A., Naumov A.V., Gromov A.N. On the anticoagulant and antiaggregatory properties of a glucosamine sulfate molecule. Modern Rheumatology Journal. 2019; 13 (3): 135–141. (In Russ.) DOI: https://doi.org/10.14412/1996-7012-2019-3-135-141.

Громова О. А., Торшин И. Ю., Максимов В. А., Громов А. Н., Рудаков К. В. Систематический анализ исследований лактитола. Экспериментальная и клиническая гастроэнтерология. 2019; (2): 131–142. DOI: https://doi.org/10.31146/1682-8658-ecg-162-2-131-142.

Gromova O. A., Torshin I. Y., Maximov V. A., Gromov A. N., Rudakov K. V. Systematic analysis of lactitol studies. Experimental and Clinical Gastroenterology. 2019;(2):131-1 42. (In Russ.) DOI: https://doi.org/10.31146/1682-8658-ecg-162-2-131-142.

Арнольд В., Ильяшенко Ю., Аносов Д. и др. Динамические системы – 1. Итоги науки и техн. Сер. Соврем. пробл. мат. Фундам. Направления. М.: ВИНИТИ. 260 с.

Arnold V., Ilyashenko Yu., Anosov D. et al. Dynamical systems – 1. Results of science and technology. Ser. Lying. prob. mat. Fundam. Directions. Moscow. 260 s. (in Russ)

Левенштейн В. И. Двоичные коды с исправлением выпадений, вставок и замещений символов. Доклады Академий Наук СССР. 19654 163 (4): 845–848.

Levenshtein V. I. Binary codes with correction of loss, insertion and substitution of characters. Doklady Akademii Nauk SSSR. 1965; 163 (4): 845–848 (in Russ).

Ioannidis J. P.A. Hijacked evidence-based medicine: stay the course and throw the pirates overboard. J Clin Epidemiol. 2017 Apr; 84: 11–13. DOI: https://dx.doi.org/10.1016/j.jclinepi.2017.02.001.

Ioannidis J. P. Evidence-based medicine has been hijacked: a report to David Sackett. J Clin Epidemiol. 2016 May; 73: 82–6. DOI: https://dx.doi.org/10.1016/j.jclinepi.2016.02.012. PMID: 26934549.

Ioannidis J. P. Evidence-based medicine has been hijacked: a report to David Sackett. J Clin Epidemiol. 2016 May; 73: 82–6. DOI: https://dx.doi.org/10.1016/j.jclinepi.2016.02.012.

Møller M. H., Ioannidis J. P.A., Darmon M. Are systematic reviews and meta-analyses still useful research? We are not sure. Intensive Care Med. 2018 Apr; 44 (4): 518–520. DOI: https://dx.doi.org/10.1007/s00134-017-5039-y.

Møller M.H., Ioannidis J.P.A., Darmon M. Are systematic reviews and meta-analyses still useful research? We are not sure. Intensive Care Med. 2018 Apr; 44 (4): 518–520. DOI: https://dx.doi.org/10.1007/s00134-017-5039-y.

Cochrane is a registered trademark in Australia, Canada, the European Community and the USA. 2017-09-19. [Электронный ресурс] URL: http:// trademarks.justia.com/791/85/cochrane-79185910.html. Дата обращения: 12.12.2019.

Cochrane is a registered trademark in Australia, Canada, the European Community and the USA. 2017-09-19. [Electronic resource] URL: trademarks.justia.com/791/85/cochrane-79185910.html. Accessed: 12.12.2019.

Торшин И.Ю., Громова О.А., Кобалава Ж.Д. О репрессиях ω-3 полиненасыщенных жирных кислот адептами доказательной медицины. ФАРМАКОЭКОНОМИКА. Современная Фармакоэкономика и Фармакоэпидемиология. 2019; 12 (2): 91–114. DOI: https://doi.org/10.17749/2070-4909.2019.12.2.91-114.

Torshin I. Y., Gromova O. A., Kobalava Z. D. Concerning the “repression” of ω -3 polyunsaturated fatty acids by adepts of evidencebased medicine. FARMAKOEKONOMIKA. Modern Pharmacoeconomic and Pharmacoepidemiology. 2019; 12 (2): 91–114 (In Russ.) DOI: https://doi.org/10.17749/2070-4909.2019.12.2.91-114.

Hannemann A., Wallaschofski H., Nauck M., Marschall P., Flessa S., Grabe H. J., Schmidt C. O., Baumeister S. E. Vitamin D and health care costs: Results from two independent population-based cohort studies. Clin Nutr. 2018 Dec; 37 (6 Pt A): 2149–2155. DOI: https://dx.doi.org/10.1016/j.clnu.2017.10.014.

Механик А. Г. Искусственный интеллект на страже здоровья. Беседа вторая с О. А. Громовой и И. Ю. Торшиным. Стимул: Журнал об инновациях в России. 30 Октября 2019. [Электронный ресурс] URL: https://stimul.online/articles/science-and-technology/iskusstvennyy-intellekt-na-strazhe-zdorovya-beseda-vtoraya/. Дата обращения: 12.12.2019.

Mekhanik A. G. Artificial intelligence on guard of health. The second conversation with O. A. Thundering and I. Yu. Torshin. Stimul: Zhurnal ob innovatsiyakh v Rossii. 30.10.2019. (in Russ) [Electronic resource] URL: https://stimul.online/articles/science-and-technology/iskusstvennyy-intellekt-na-strazhe-zdorovya-beseda-vtoraya/. Accessed: 12.12.2019.

Блинов Д. В., Акарачкова Е. С., Орлова А. С., Крюков Е. В., Корабельников Д. И. Новая концепция разработки клинических рекомендаций в России. ФАРМАКОЭКОНОМИКА. Современная Фармакоэкономика и Фармакоэпидемиология. 2019; 12 (2): 125–144. DOI: https://doi.org/10.17749/2070-4909.2019.12.2.125-144.

Blinov D.V., Akarachkova E.S., Orlova A.S., Kryukov E.V., Korabelnikov D.I. New framework for the development of clinical guidelines in Russia. FARMAKOEKONOMIKA. Modern Pharmacoeconomic and Pharmacoepidemiology. 2019; 12 (2): 125–144 (In Russ.) DOI: https://doi.org/10.17749/2070-4909.2019.12.2.125-144.

Журавлева Н.И., Шубина Л.С., Сухоруких О.А. Обзор методик оценки достоверности научных доказательств и убедительности рекомендаций, применяемых при разработке клинических рекомендаций в российской федерации. ФАРМАКОЭКОНОМИКА. Современная Фармакоэкономика и Фармакоэпидемиология. 2019; 12 (1): 34–41 DOI: https://doi.org/10.17749/2070-4909.2019.12.1.34-41.

Zhuravleva N.I., Shubina L.C., Sukhorukikh O.A. The use of the level of evidence and grade of recommendations scales in developing clinical guidelines in the Russian Federation. FARMAKOEKONOMIKA. Modern Pharmacoeconomic and Pharmacoepidemiology. 2019; 12 (1): 34–41 (In Russ.). DOI: https://doi.org/10.17749/2070-4909.2019.12.1.34-41.

Хачатрян Г. Р., Омельяновский В. В., Мельникова Л. С., Ратушняк С. С. Международный опыт организации и финансового обеспечения агентств по оценке технологий здравоохранения. ФАРМАКОЭКОНОМИКА. Современная Фармакоэкономика и Фармакоэпидемиология. 2019. Т. 12. № 2. С. 146-154. DOI: https://doi.org/10.17749/2070-4909.2019.12.2.146-154.

Khachatryan G.R., Omelyanovskiy V.V., Melnikova L.S., Ratushnyak S.S. Organizational structure and funding of health technology assessment agencies around the world. FARMAKOEKONOMIKA. Modern Pharmacoeconomic and Pharmacoepidemiology. 2019; 12 (2): 146–154 (In Russ.) DOI: https://doi.org/10.17749/2070-4909.2019.12.2.146-154

Лазарева М. Л., Тюрина И. В. Финансовая статистическая отчетность медицинских организаций: существующие недостатки и направления оптимизации. ФАРМАКОЭКОНОМИКА. Современная Фармакоэкономика и Фармакоэпидемиология. 2018; 11 (4): 61–66 DOI: https://doi.org/10.17749/2070-4909.2018.11.4.061-066.

Lazareva M. L., Tyurina I. V. Financial statistical reporting by medical organizations: shortcomings and areas of optimization. FARMAKOEKONOMIKA. Modern Pharmacoeconomic and Pharmacoepidemiology. 2018; 11 (4): 61–66. (In Russ.) DOI: https://doi.org/10.17749/2070-4909.2018.11.4.061-066.

Омельяновский В. В., Федяева В. К., Мусина Н. З. Концепция многокритериального анализа принятия решений в текущей системе оценки технологий в здравоохранении России. ФАРМАКОЭКОНОМИКА. Современная Фармакоэкономика и Фармакоэпидемиология. 2018; 11 (3): 3–7 DOI: https://doi.org/10.17749/2070-4909.2018.11.3-003-007.

Omelyanovsky V. V., Fedyaeva V. K., Musina N. Z. The concept of multi-criteria analysis of decision-making in the current system of health technology assessment in Russia. FARMAKOEKONOMIKA. Modern Pharmacoeconomic and Pharmacoepidemiology. 2018; 11 (3): 3–7 (In Russ.) DOI: https://doi.org/10.17749/2070-4909.2018.11.3-003-007

Хрусталев М. Б., Максимова А. А. Эффективный поиск научных разработок с инновационным потенциалом в медицине. ФАРМАКОЭКОНОМИКА. Современная Фармакоэкономика и Фармакоэпидемиология. 2019; 12 (1): 27–33 DOI: https://doi.org/10.17749/2070-4909.2019.12.1.27-33.

Khrustalev M.B., Maksimova A.A. Effective search for potentially innovative scientific results in medicine. FARMAKOEKONOMIKA. Modern Pharmacoeconomic and Pharmacoepidemiology. 2019; 12 (1): 27–33. (In Russ.) DOI: https://doi.org/10.17749/2070-4909.2019.12.1.27-33

Мусина Н.З., Федяева В.К., Омельяновский В.В., Хачатрян Г.Р., Герасимова К.В., Лемешко В.А., Кончиц С.П. Обзор существующих зарубежных подходов к определению и оценке инновационности лекарственных препаратов. ФАРМАКОЭКОНОМИКА. Современная Фармакоэкономика и Фармакоэпидемиология. 2017; 10 (3): 66–74 DOI: https://doi.org/10.17749/2070-4909.2017.10.3.066-074

Musina N.Z., Fedyaeva V.K., Omel’yanovskii V.V., Khachatryan G.R., Gerasimova K. V., Lemeshko V. A., Konchits K. P. Review of the current approaches to the assessment of the drug innovative potential worldwide. FARMAKOEKONOMIKA. Modern Pharmacoeconomic and Pharmacoepidemiology. 2017; 10 (3): 66–74. (In Russ.) DOI: https://doi.org/10.17749/2070-4909.2017.10.3.066-074.

The authors declare that there are no conflicts of interest present.