The role of the primary care physician in identifying patients at high risk of fractures in real clinical practice

Cover Page


Cite item

Full Text

Open Access Open Access
Restricted Access Access granted
Restricted Access Subscription or Fee Access

Abstract

BACKGROUND: The FRAX calculator is an accessible method for identifying patients at high risk of fracture. However, data on its practical use in primary health care settings are limited.

AIM: To evaluate the correctness of calculating the 10-year fracture probability according to FRAX by primary care physicians and then analyze the impact of the results on patient routing.

MATERIALS AND METHODS: The base of the study was the city polyclinic No. 25 of the Nevsky district of Saint Petersburg. The study included men and women aged 40 years and older.

During 2017–2020, polyclinic doctors assessed the risk of fracture using the FRAX calculator for 11,013 people. A group of patients with significant differences (30% or more) in the obtained value of the risk of major osteoporotic fractures from the average was identified. A 10-year probability of fractures was recalculated for these patients.

RESULTS: Major osteoporotic fracture risk scores were compared before and after recalculation. In most cases of patients (83%), the risk category did not change after recalculation. In 15% of patients changed to a higher risk. In the total group (11,013 people), errors in FRAX calculation led to an underestimation of high fracture risk in 41 patients (0.4%).

CONCLUSIONS: The study showed that primary care physicians use the FRAX calculator correctly. The proportion of incorrect fracture risk calculations was low. Nevertheless, training of primary care physicians in the calculation and interpretation of the FRAX score is essential.

Full Text

ОБОСНОВАНИЕ

Остеопороз — распространенное в популяции заболевание и самая частая причина переломов у лиц в возрасте 50 лет и старше. Переломы сопровождаются тяжелыми последствиями для пациента и его семьи, приводят к снижению качества жизни, повышению потребности в постороннем уходе и мерах социальной поддержки, а также ассоциированы с повышением смертности, что является серьезным бременем для системы здравоохранения во всем мире [1]. Результаты исследования состояния проблемы остеопороза в 8 странах Евразийского региона, в том числе Российской Федерации, опубликованные в 2020 г. O. Lesnyak и соавт., продемонстрировали, что в России проживает 16 млн больных остеопорозом, а ожидаемый прирост количества переломов проксимального отдела бедренной кости к 2050 г. составит 70 % от уровня 2015 г. [2]. Именно поэтому профилактика переломов у лиц старшего возраста является одной из стратегических задач общественного здравоохранения, в том числе и российского, с целью сохранение здоровья граждан [3].

На протяжении последних лет были разработаны эффективные подходы к первичной и вторичной профилактике переломов. Существует целый ряд лекарственных препаратов, эффективно влияющих на риск переломов, снижая их частоту (инцидентность) на 40–70 % [4]. Однако во всем мире по-прежнему наблюдают существенное несоответствие между количеством пациентов, нуждающихся в лечении остеопороза, и теми, кто это лечение получает. Недостаточное выявление пациентов с высоким риском переломов приводит к их низкому охвату лечением [5–7].

Более 10 лет в России для оценки риска переломов применяют калькулятор FRAX, позволяющий подсчитать на основании наличия у пациента клинических факторов риска индивидуальный 10-летний риск основных остеопорозных переломов (ООП), в том числе, проксимального отдела бедренной кости, проксимального отдела плечевой кости, дистального отдела предплечья и тел позвонков, а также отдельно — риск перелома проксимального отдела бедренной кости. Использование калькулятора FRAX рекомендовано в качестве инструмента для выделения группы лиц, подлежащих направлению на денситометрию или инициации терапии антиостеопоротическими препаратами [8].

Корректность подсчета риска переломов с использованием калькулятора FRAX является важным фактором, обеспечивающим выявление групп пациентов, подлежащих терапии. В то же время данные о его практическом применении в условиях оказания первичной медико-санитарной помощи ограничены, что определило цель настоящего исследования.

Цель исследования — оценить корректность подсчета 10-летней вероятности переломов по FRAX в первичном звене здравоохранения с последующим анализом влияния полученных результатов на маршрутизацию пациентов.

МАТЕРИАЛЫ И МЕТОДЫ

Данная работа выполнена в рамках когортного исследования для оценки эффективности популяционного скрининга на наличие высокого риска переломов на базе городской поликлиники № 25 Невского района г. Санкт-Петербурга [9]. На этапе подготовки к исследованию проведено обучение врачей поликлиники (участковых терапевтов, невролога, эндокринолога, ревматолога, травматологов) по вопросам диагностики и лечения остеопороза, в том числе технологии подсчета и интерпретации FRAX.

В исследование включены все мужчины и женщины в возрасте 40 лет и старше (женщины — в периоде постменопаузы), обратившиеся по различным поводам на амбулаторный прием к участковому врачу или любому специалисту поликлиники из числа обученных. Врач либо медицинская сестра задавали стандартные вопросы, входящие в опросник FRAX. Если пациент не мог ответить на вопрос, ответ считали отрицательным. Подсчет 10-летнего риска переломов проводили онлайн с использованием модели FRAX, специфичной для Российской Федерации (https://www.sheffield.ac.uk/FRAX/tool.aspx?lang=rs).

Анкеты с факторами риска и результатом подсчета 10-летнего риска переломов распечатывали и фиксировали в медицинской карте пациента. Сведения об анкетировании регистрировали в медицинской информационной системе. Данные о локализации и количестве переломов в анамнезе также отмечали в первичной медицинской документации. Сведения о факторах риска, включенных в анкету FRAX, а также расчетной величине риска переломов были объединены в базу данных.

В исследовании проведен ретроспективный анализ данных о факторах и значении риска ООП, полученных врачами поликлиники при тестировании населения с использованием калькулятора FRAX за 2017–2020 гг. (11 013 пациентов). На основании анализа выделена группа лиц (1183 пациента) со значимыми (30 % и более) отличиями полученного значения риска ООП от средней величины для данного пола, возраста и факторов риска. Этим пациентам выполнен пересчет 10-летней вероятности переломов с оценкой полученного показателя FRAX на графике порога диагностического вмешательства (рис. 1) и анализом тактики, выбранной врачами первичного звена здравоохранения на основании предыдущего расчета риска переломов. В связи с тем что риск перелома проксимального отдела бедра в соответствии с национальными клиническими рекомендациями не применяют для идентификации пациентов, нуждающихся в терапии, его значение в данном исследовании не подлежало пересчету.

Информированное согласие пациента на участие в исследовании не было предусмотрено, поскольку скрининг проводили в рамках обычной клинической деятельности врача соответственно клиническим рекомендациям Минздрава России [8]. Исследование одобрено локальным этическим комитетом Клинической ревматологической больницы № 25 (протокол № 18 от 28 декабря 2023 г.).

Статистическая обработка результатов проведена с использованием пакета прикладных программ Statistica for Windows (версия 12.0). Полученные данные обрабатывали с помощью параметрических и непараметрических методов статистического анализа. Количественные признаки предварительно исследовали на нормальность распределения с помощью критерия Колмогорова – Смирнова. Описание количественных признаков, соответствующих нормальному распределению представлено в виде среднеарифметического значения и стандартного квадратического отклонения (М ± SD). Качественные признаки представлены в виде долей (в процентах) и абсолютных чисел.

Количественные признаки, удовлетворяющие условиям нормального распределения, сравнивали при помощи t-критерия Стьюдента. Качественные признаки анализировали с использованием таблиц сопряженности (критерия χ2) с поправкой Йетса на непрерывность. Критический уровень значимости при проверке статистических гипотез в данном исследовании принимали равным 0,05.

РЕЗУЛЬТАТЫ

За 2017–2020 гг. врачи поликлиники оценили риск переломов с использованием калькулятора FRAX у 11 013 человек (3057 мужчин и 7956 женщин), что составило 31,7 % от всего прикрепленного населения в возрасте 40 лет и старше. Характеристика этой группы описана ранее [9].

При оценке среднего риска переломов по возрастным группам и факторам риска подлежали пересчету значения риска FRAX у 1183 (10,7 %) пациентов. Доли лиц с вариабельностью значений риска ООП 30 % и более по возрастным группам составили от 9,4 до 13,8 % и значимо не различались. При сравнении этого показателя у мужчин и женщин отмечено, что женщин с риском переломов, подлежащим пересчету, было в 2,4 раза больше, чем мужчин (р = 0,0021) (табл. 1). Доля женщин с вариабельностью значений FRAX 30 % и выше была максимальной в возрастной группе 70–79 лет, достигая 18,4 %, в то время как у мужчин аналогичный показатель был максимальным в более молодых возрастных группах (40–49 и 50–59 лет).

 

Таблица 1. Распределение по полу и возрастным группам пациентов с вариабельностью значений риска основных остеопорозных переломов 30 % и более

Table 1. Distribution by gender and age groups of patients with a variability in the risk of major osteoporotic fractures of 30% or more

Возраст

Мужчины, n (%)

Женщины, n (%)

Оба пола, n (%)

40–49 лет

63 (11,7)

100 (9,9)

163 (10,5)

50–59 лет

80 (9,0)

249 (11,3)

329 (10,6)

60–69 лет

16 (1,5)

374 (12,3)

390 (9,4)

70–79 лет

2 (0,5)

214 (18,4)

216 (13,8)

80–90 лет

3 (2,4)

82 (15,7)

85 (12,7)

Всего

164/3057 (5,4)

1019/7956 (12,8)

1183/11 013 (10,7)

 

Средний возраст пациентов, отобранных для пересчета риска ООП, составил 62,3 года, при этом мужчины были моложе женщин на 11,4 года (табл. 2).

 

Таблица 2. Характеристика группы пациентов, подлежащих пересчету риска переломов (n = 1183)

Table 2. Characteristics of the group of patients subject to recalculation of fracture risk (n = 1183)

Показатель

Мужчины

Женщины

Оба пола

Статистическая значимость

Возраст, лет

52,5 ± 8,9

63,9 ± 10,9

62,3 ± 11,3

р < 0,001

Риск основных остеопорозных переломов (до пересчета), %

8,5 ± 4,2

12,0 ± 9,2

11,5 ± 8,8

р < 0,001

Риск основных остеопорозных переломов (после пересчета), %

8,6 ± 3,0

13,9 ± 8,3

13,1 ± 8,0

р < 0,001

Примечание. Данные представлены в виде среднеарифметического значения и стандартного квадратического отклонения.

 

Как видно из табл. 2, риск ООП у женщин был выше, чем у мужчин (р < 0,001). Следует отметить, что пересчет значений риска у мужчин не повлиял на изменение исходного значения риска ООП (р = 0,84). У женщин же после пересчета отмечено повышение среднего значения риска на 2 % (р = 0,0002).

Для оценки влияния пересчета значений риска на маршрутизацию пациентов (направление на денситометрию или лечение) полученные значения риска ООП оценены на наличие или отсутствие перехода между категориями «низкий риск» (нижняя зона графика), «средний риск» (средняя зона) и «высокий риск» (верхняя зона) (рис. 1). У большинства пациентов после пересчета риска его категория не изменилась. Риск перешел в более высокую категорию у 15,1 % пациентов. У мужчин категория риска не менялась достоверно чаще, чем у женщин (р = 0,007). В общей группе повышение категории риска отмечено всего у 1,6 % пациентов, у женщин — достоверно чаще (табл. 3).

 

Рис. 1. Порог вмешательства, основанный на 10-летней вероятности основных остеопорозных переломов (позвонков, бедренной, плечевой, лучевой костей) у женщин в постменопаузе 40 лет и старше

Fig. 1. Intervention threshold based on a 10-year probability of major osteoporosis fractures (vertebrae, femur, humerus, radius) in postmenopausal women 40 years and older

 

Таблица 3. Изменение категории риска в группе мужчин и женщин с вариабельностью значений риска основных остеопорозных переломов 30 % и более и в общей группе

Table 3. Change in the risk category in the group of men and women with a variability in the risk values of major osteoporotic fractures of 30 % or more and in the general group

Показатель

Мужчины, n (%)

Женщины, n (%)

Статистическая значимость

Оба пола, n (%)

Пациенты, подлежащие перерасчету значений риска (n = 1183, из них 164 мужчины и 1019 женщин)

Нет перехода между категориями риска

148 (90,2)

833 (81,7)

р = 0,007

982 (83,0)

Переход значения риска с низкого до среднего

12 (7,3)

126 (12,4)

р = 0,06

137 (11,6)

Переход значения риска с среднего до высокого

1 (0,6)

40 (3,9)

р = 0,03

41 (3,5)

Понижение риска

3 (1,8)

20 (2,0)

р = 0,4

23 (1,9)

Пациенты в общей группе (n = 11 013, из них 3057 мужчин и 7956 женщин)

Переход значения риска с низкого до среднего

12 (0,4)

126 (1,6)

р = 0,0001

137 (1,2)

Переход значения риска с среднего до высокого

1 (0,0)

40 (0,5)

р = 0,003

41 (0,4)

Понижение риска

3 (0,1)

20 (0,3)

р = 0,11

23 (0,2)

 

ОБСУЖДЕНИЕ

С момента создания в 2008 г. модель оценки индивидуального риска переломов FRAX получила широкое распространение и заняла достойное место в клинической практике. Инструмент FRAX в качестве способа оценки риска переломов является простым, доступным и применимым в условиях первичной медико-санитарной помощи [10].

Вместе с тем, есть ограниченное количество исследований, посвященных использованию алгоритма FRAX в первичном звене здравоохранения в реальной клинической практике. H. Salminen и соавт. на примере опроса врачей общей практики в Стокгольме продемонстрировали, что несмотря на знание о возможностях алгоритма FRAX для оценки риска переломов практически у всех участников опроса, не все понимали, как интерпретировать полученные при расчете результаты и применить данный инструмент в реальной практике [11]. Исследования, проведенные в Бельгии и Корее, также показали, что не более 20 % врачей используют FRAX в повседневной работе [12, 13].

Недавно опубликованные R.A. Alahmadi и соавт. результаты опроса врачей различных специальностей (терапевтов, врачей общей практики, гериатров, ревматологов, травматологов-ортопедов, акушеров гинекологов) продемонстрировали, что большинство (68,4 %) респондентов информированы об инструменте FRAX, однако применяют его на практике лишь половина (53,7 %) из них [14].

Немаловажна и корректность использования указанного инструмента оценки риска переломов. В приведенных выше работах исследователи сообщают, что одним из ограничений применения FRAX в повседневной практике для ряда врачей является неуверенность в правильности его использования. В связи с этим необходимы дополнительное обучение врачей первичного звена здравоохранения, а также внедрение «настольных» методических материалов по использованию калькулятора FRAX (брошюры с алгоритмом оценки и интерпретации полученных значений 10-летней вероятности переломов).

В настоящем исследовании впервые оценена корректность использования калькулятора FRAX в первичном звена здравоохранения.

Результаты показали, что доля ошибочных расчетов риска ООП была невысока и значимо не влияла на изменение маршрутизации пациентов.

Следует отметить, что у мужчин вариабельность значений рассчитанного риска переломов была значимо ниже, чем у женщин. В связи с этим доля мужчин со значениями риска, подлежащими пересчету, была в 2,4 раза ниже, чем доля женщин.

Несмотря на то, что в группе женщин отмечено повышение среднего значения риска ООП с 12 до 13,9 % (р = 0,0002), доля лиц с измененной категорией риска была невысокой. В общей группе исследуемых (n = 11 013) доля пациентов с повышенной категорией риска после пересчета значений FRAX составила 1,6 % и была выше среди женщин (2,1 %), чем среди мужчин (0,4 %) (р = 0,003). Ошибки в расчете FRAX привели к недооценке высокого риска переломов у 41 человека, что составило всего 0,4 %.

Анализируя ошибки в расчетах значений FRAX, авторы предполагают, что основной причиной недооценки риска ООП (получения заниженных значений) является использование модели FRAX для Великобритании. Она открывается по умолчанию при первичном обращении к ресурсу расчета 10-летней вероятности переломов через поисковые системы (https://www.sheffield.ac.uk) на сайте Шеффилдского Университета. На рис. 2 и 3 представлен пример расчета 10-летней вероятности переломов для 60-летней женщины с индексом массы тела 23,9 кг/м2 и переломом в анамнезе с использованием британской и российской моделей FRAX. Как видно из рисунков, риск ООП при использовании британской модели составляет 12 %, в то время как российская модель FRAX прогнозирует вероятность переломов 17 %. С учетом столь значимых различий в рассчитанном риске, очевидно, что данная ошибка приведет к некорректной маршрутизации (точка терапевтического вмешательства для возраста 60 лет — 16,77 % [8]) и «потере» пациента с высоким риском переломов для патогенетической терапии.

 

Рис. 2. Результаты расчета 10-летней вероятности перелома у женщины 60 лет с переломом на модели FRAX для Великобритании

Fig. 2. The results of calculating the 10-year probability of fracture in a 60-year-old woman with a fracture using the FRAX model for the UK

 

Рис. 3. Результаты расчета 10-летней вероятности перелома у женщины 60 лет с переломом на модели FRAX для Российской Федерации

Fig. 3. Results of calculating the 10-year probability of fracture in a 60-year-old woman with a fracture using the FRAX model for the Russian Federation

 

В ряде случав (0,2 % общей группы) определенный исходно риск ООП был завышен в связи с некорректно включенными в факторы риска переломами, не типичными для остеопороза (мелких костей кистей и стоп, лодыжки).

Несмотря на то что настоящее исследование проведено среди врачей, предварительно обученных использованию калькулятора FRAX, ошибки расчетов при определении 10-летней вероятности переломов встречались и могли приводить к недооценке риска переломов или необоснованно назначенному вмешательству.

ЗАКЛЮЧЕНИЕ

Исследование показало, что врачи первичного звена здравоохранения применяли калькулятор FRAX в большинстве случаев корректно. Доля ошибочных расчетов риска переломов была невысока и значимо не влияла на изменение маршрутизации пациентов.

Тем не менее, обучение врачей первичного звена технологии подсчета и интерпретации FRAX является необходимым элементом в организации медицинской помощи пациентам с высоким риском переломов.

Уменьшению доли ошибок при внедрении алгоритма FRAX в повседневную работу может способствовать разработка методических материалов для врачей (брошюры с алгоритмом оценки и интерпретации полученных значений 10-летней вероятности переломов).

ДОПОЛНИТЕЛЬНАЯ ИНФОРМАЦИЯ

Источник финансирования. Исследование проведено без финансового обеспечения или спонсорской поддержки.

Конфликт интересов. Авторы декларируют отсутствие явных и потенциальных конфликтов интересов, связанных с публикацией настоящей статьи.

Вклад авторов. Все авторы внесли существенный вклад в разработку концепции, проведение исследования и подготовку статьи, прочли и одобрили финальную версию перед публикацией.

Наибольший вклад распределен следующим образом: А.А. Соболева, М.С. Серегина — сбор и анализ данных, их интерпретация, подготовка первого варианта статьи; Е.Н. Гладкова — концепция и разработка исследования, анализ и интерпретация данных, редактирование, утверждение окончательной версии статьи.

Этический комитет. Протокол исследования был одобрен локальным этическим комитетом Клинической ревматологической больницы № 25 (№ 18 от 28.12.2023).

ADDITIONAL INFORMATION

Funding source. The preparation of the study did not have financial support or sponsorship.

Competing interests. The authors declare that they have no competing interests.

Author contribution. All authors made a substantial contribution to the conception of the study, acquisition, analysis, interpretation of data for the work, drafting and revising the article, final approval of the version to be published and agree to be accountable for all aspects of the study.

Personal contribution of each author: A.A. Soboleva, M.S. Seregina — collection and analysis of data, their interpretation, preparation of the first draft of the article; E.N. Gladkova — concept and development of the study, analysis and interpretation of data, editing, approval of the final version of the article.

Ethics approval. The present study protocol was approved by the local Ethics Committee of the Clinical Rheumatology Hospital No. 25 (No. 18 of 28.12.2023).

×

About the authors

Elena N. Gladkova

North-Western State Medical University named after I.I. Mechnikov; Clinical Rheumatology Hospital No. 25

Author for correspondence.
Email: gen4605@mail.ru
ORCID iD: 0000-0002-6689-6941
SPIN-code: 6535-4153

MD, Cand. Sci. (Med.)

Russian Federation, Saint Petersburg; Saint Petersburg

Maria S. Seregina

North-Western State Medical University named after I.I. Mechnikov

Email: sereginamasha7@yandex.ru
ORCID iD: 0009-0005-3825-1635
Russian Federation, Saint Petersburg

Anna A. Soboleva

North-Western State Medical University named after I.I. Mechnikov

Email: sobolevanura@yandex.ru
ORCID iD: 0000-0001-8134-7206
Russian Federation, Saint Petersburg

References

  1. Curtis EM, Harvey NC, Cooper C. The burden of osteoporosis. In: Osteoporosis: a lifecourse epidemiology approach to skeletal health. Boca Raton; CRC Press; 2018. P. 1–20. doi: 10.1201/9781351234627
  2. Lesnyak O, Bilezikian JP, Zakroyeva A, et al. Report on the audit on burden of osteoporosis in eight countries of the Eurasian region: Armenia, Belarus, Georgia, Moldova, Kazakhstan, the Kyrgyz Republic, the Russian Federation, and Uzbekistan. Arch Osteoporos. 2020;15(1):175. doi: 10.1007/s11657-020-00836-y
  3. Tkacheva ON, Kotovskaya YuV, Rozanov AV, et al. Methodological recommendations. A set of measures aimed at preventing falls and fractures in elderly and senile people. Мoscow; 2021. 48 p. [Internet]. Available from: https://static0.minzdrav.gov.ru/system/attachments/attaches/000/059/115/original/8.Комплекс_мер_падения_2021.pdf?1641888378. Accessed: 05 Feb 2024. (In Russ.)
  4. Wang QY, Ding N, Dong YH, et al. Pharmacological treatment of osteoporosis in elderly people: a systematic review and meta-analysis. Gerontology. 2021;67(6):639–649. doi: 10.1159/000514449
  5. Hoff M, Skurtveit S, Meyer HE, et al. Anti-osteoporosis drug use: too little, too much, or just right? The HUNT study, Norway. Osteoporos Int. 2018;29(8):1875–1885. doi: 10.1007/s00198-018-4560-3
  6. Yang X, Sajjan S, Modi A. High rate of non-treatment among osteoporotic women enrolled in a US Medicare plan. Curr Med Res Opin. 2016;32(11):1849–1856. doi: 10.1080/03007995.2016.1211997
  7. Barton DW, Behrend CJ, Carmouche JJ. Rates of osteoporosis screening and treatment following vertebral fracture. Spine J. 2019;19(3):411–417. doi: 10.1016/j.spinee.2018.08.004
  8. Belaya ZhE, Belova KYu, Biryukova EV, et al. Federal clinical guidelines for diagnosis, treatment and prevention of osteoporosis. Osteoporosis and Bone Diseases. 2021;24(2):4–47. EDN: TUONYE doi: 10.14341/osteo12930
  9. Gladkova EN, Tanaev VG, Lesnyak OM, et al. The effectiveness of screening to identify patients with osteoporosis/high risk of fractures in primary health care. Osteoporosis and Bone Diseases. 2022;25(1):14–22. EDN: MODYDH doi: 10.14341/osteo12946
  10. Kanis JA, Harvey NC, Johansson H, et al. FRAX Update. J Clin Densitom. 2017;20(3):360–367. doi: 10.1016/j.jocd.2017.06.022
  11. Salminen H, Piispanen P, Toth-Pal E. Primary care physicians’ views on osteoporosis management: a qualitative study. Arch Osteoporos. 2019;14(1):48. doi: 10.1007/s11657-019-0599-9
  12. Bruyere O, Nicolet D, Compere S, et al. Perception, knowledge, and use by general practitioners of Belgium of a new WHO tool (FRAX) to assess the 10-year probability of fracture. Rheumatol Int. 2013;33(4):979–983. doi: 10.1007/s00296-012-2461-x
  13. Ha YC, Lee YK, Lim YT, et al. Physicians’ attitudes to contemporary issues on osteoporosis management in Korea. J Bone Metab. 2014;21(2):143–149. doi: 10.11005/jbm.2014.21.2.143
  14. Alahmadi RA, Aljabri HM, Alharbi NM, et al. Osteoporosis as perceived by Saudi physicians: a cross-sectional study of quality of practice and current barriers in management. Cureus. 2023;15(11):e49578. doi: 10.7759/cureus.49578

Supplementary files

Supplementary Files
Action
1. JATS XML
2. Fig. 1. Intervention threshold based on a 10-year probability of major osteoporosis fractures (vertebrae, femur, humerus, radius) in postmenopausal women 40 years and older

Download (457KB)
3. Fig. 2. The results of calculating the 10-year probability of fracture in a 60-year-old woman with a fracture using the FRAX model for the UK

Download (173KB)
4. Fig. 3. Results of calculating the 10-year probability of fracture in a 60-year-old woman with a fracture using the FRAX model for the Russian Federation

Download (164KB)

Copyright (c) 2024 Eco-Vector

Creative Commons License
This work is licensed under a Creative Commons Attribution-NonCommercial-NoDerivatives 4.0 International License.

СМИ зарегистрировано Федеральной службой по надзору в сфере связи, информационных технологий и массовых коммуникаций (Роскомнадзор).
Регистрационный номер и дата принятия решения о регистрации СМИ: серия ПИ № ФС 77 - 70763 от 21.08.2017 г.


This website uses cookies

You consent to our cookies if you continue to use our website.

About Cookies