0% нашли этот документ полезным (0 голосов)
94 просмотров10 страниц

шкалы ПРД

Загружено:

Larisa Boronin
Авторское право
© © All Rights Reserved
Мы серьезно относимся к защите прав на контент. Если вы подозреваете, что это ваш контент, заявите об этом здесь.
Доступные форматы
Скачать в формате PDF, TXT или читать онлайн в Scribd
0% нашли этот документ полезным (0 голосов)
94 просмотров10 страниц

шкалы ПРД

Загружено:

Larisa Boronin
Авторское право
© © All Rights Reserved
Мы серьезно относимся к защите прав на контент. Если вы подозреваете, что это ваш контент, заявите об этом здесь.
Доступные форматы
Скачать в формате PDF, TXT или читать онлайн в Scribd

ОБОЗРЕНИЕ ПСИХИАТРИИ И МЕДИЦИНСКОЙ ПСИХОЛОГИИ № 2, 2012

Исследования

Выбор шкал для оценки послеродовой депрессии


Г.Э. Мазо1,2, Л.И. Вассерман1,2, М.В. Шаманина1
1
 Санкт-Петербургский научно-исследовательский психоневрологический институт им. В.М. Бехтерева;
2
СПбГУ
Резюме. Послеродовая депрессия является важной медицинской и социальной проблемой. В на-
стоящее время сохраняется необходимость создания эффективных скрининговых инструментов по-
слеродовой депрессии с учетом национальных и культуральных особенностей. В данной работе мы
провели анализ литературных данных и представили собственные результаты относительно наибо-
лее часто используемых психометрических шкал. Приведены данные относительно чувствительности,
специфичности и других показателей надежности и эффективности выбранных методик. Полученные
результаты свидетельствуют о том, что наиболее изученным и доступным скрининговым инструмен-
том по сравнению с другими шкалами, специально разработанными для диагностики послеродовой
депрессии, является EPDS. Проведено исследование для определения эффективности и надежности
использования данной шкалы у российских женщин.
Ключевые слова: послеродовая депрессия, психометрические методики, шкалы для скрининга.

Diagnostic methods for postpartum depression

G.E. Mazo1,2, L.I. Vasserman1,2, M.V. Shamanina1


1
Saint-Petersburg Bekhterev Psychoneurological Research Institute
2
Saint-Petersburg state university
Abstract: Postpartum depression is a significant mental health problem. This article presents a review and
our results of self-reported measurements used to assess depressive symptoms in the postpartum period. The
psychometric data are presented for each self-reported instruments: reliability, sensitivity, specificity, positive
predictive value and concurrent validity. Results suggest that the Edinburgh Postnatal Depression Scale is the
most extensively studied measurement for postpartum depression with moderate psychometric soundness. This
review illustrates the importance of further search in this area, involved the selection of screening instruments,
research of linguistic and cultural properties for psychometric scales. Additionally, it is necessary to investigate
the efficiency and reliability of EPDS for diagnostics of postpartum depression among Russian women.
Keywords: postpartum depression, depressive disorders, postnatal depression. These keywords were combi­
ned with: assessment, screening, psychometric testing.

Введение Вместе с тем в настоящее время существует два


В настоящее время послеродовая депрессия диаметрально противоположных подхода к оцен-
(ПРД) остается одной из важных общественных ке природы ПРД, которые влияют на выбор скри-
проблем [1, 2]. Женщины с ПРД не способны нинговых инструментов. Согласно первому ПРД
в полной мере выполнять свои обязанности по рассматривается как самостоятельная нозологиче-
отношению к ребенку и полноценно функцио- ская категория, имеющая особенности в клиниче-
нировать в семье [3]. Существует много данных ской структуре [8], и, следовательно, предполага-
о вредном влиянии материнской депрессии на ет необходимость создания специализированных
развитие ребенка, его когнитивное и социаль- шкал, нацеленных на более тонкое выявление
ное функционирование [4]. Кроме того, риск этой патологии. Второй подход утверждает, что
рецидива возрастает с каждыми последующи- депрессия в послеродовом периоде — это дебют
ми родами, особенно если в структуре аффек- депрессивного расстройства [9] или биполярного
тивного состояния отмечалась психотическая расстройства [10, 11], т.  е. корректно использова-
симптоматика [7]. Несмотря на растущую ния традиционных скрининговых шкал.
осведомленность относительно послеродовой Имеющиеся скрининговые шкалы, как прави-
депрессии, ее негативного влияния на матерей ло, представляют собой самоопросники. И конеч-
и членов их семей [5, 6], около 50  % случаев но, их нельзя рассматривать как диагностические
послеродовой депрессии остаются не диагно- инструменты. Цель их применения — выявление
стированными [57]. Кроме того, большинство женщин с высокой степенью риска по развитию
женщин, страдающих депрессией после родов, ПРД, нуждающихся в проведении дополнительной
активно не ищут помощи. Во многих странах диагностики [12]. Выявление женщин с высоким
по-прежнему уделяется большое внимание раз- риском развития послеродовой депрессии позво-
работке эффективных скрининговых программ лит проводить своевременную профилактику не-
и диагностических методов для выявления по- гативного влияния ПРД как на самих женщин, так
слеродовой депрессии. и на их семьи [13]. Именно поэтому выбор скри-

41
ОБОЗРЕНИЕ ПСИХИАТРИИ И МЕДИЦИНСКОЙ ПСИХОЛОГИИ № 2, 2012
Исследования

нингового инструмента имеет важное значение. лы: Эдинбургская шкала послеродовой депрессии
Целью данного исследования было сравнение эф- (EPDS), шкала самооценки депрессии Цунга, шка-
фективности и надежности специфических скри- ла депрессии Гамильтона. Все обследуемые жен-
нинговых инструментов для ПРД и самоопро- щины были осмотрены психиатром. Результаты
сников, традиционно используемых для оценки приведены в табл. 3.
потенциального риска присутствия депрессии.
Результаты
Методы В результате проведенного обзора были вы-
Проводился компьютеризированный обзор ли- делены восемь диагностических шкал. В табл. 2
тературных данных в системах Pubmed и PsycInfo приведены имеющиеся данные о внутренней со-
с использованием следующих ключевых слов: гласованности, стабильности и надежности каж-
«послеродовая депрессия» (postnatal depression or дой изучаемой тестовой методики. В табл. 3 при-
postpartum depression) и в сочетании данных клю- ведены данные относительно чувствительности и
чевых слов со словами «опросник», «психометри- специфичности изучаемых методик.
ческие методики», «клинические шкалы», а также Шкала депрессии Бека (BDI and BDI-II; Beck
названиям отдельных шкал. et al., 1961, 1996) предложена А. Т. Беком в 1961 г.
Анализировались статьи, опубликованные до и разработана на основе клинических наблюдений
октября 2011 года. Критериями включения в ра- авторов, позволивших выявить ограниченный на-
боту были: в исследовании использовались са- бор наиболее релевантных и значимых симптомов
моопросники; оценка симптомов депрессии, на- депрессии и наиболее часто предъявляемых па-
чиная со второй недели после родов и в течение циентами жалоб. После соотнесения этого списка
первого года после родов; исследование прово- параметров с клиническими описаниями депрес-
дилось с целью изучения надежности и валид- сии, содержащимися в соответствующей литера-
ности диагностических методик. Всего было ото- туре, был разработан опросник, включающий в
брано 38 исследований, приведенных в табл.  1. себя 21 категорию симптомов и жалоб, который
Каждый диагностический инструмент оцени- применяется для выявления депрессии в пси-
вался с использованием следующих показателей: хиатрической практике. Использование данной
устойчивость результатов теста или ретестовая шкалы для диагностики послеродовой депрессии
надежность, надежность как внутренняя согла- часто критикуется из-за зависимости шкалы Бека
сованность. Внутренняя согласованность оцени- от соматических симптомов депрессии, которые
валась с помощью метода расщепления или ме- перекликаются с естественными физиологически-
тода автономных частей [14] и Альфы Кронбаха. ми процессами, свойственными послеродовому
Валидность каждого инструмента оценивалась периоду [56]. Тем не менее данный инструмент
двумя путями. Во-первых, оценивались чувстви- используется в большинстве исследований ПРД.
тельность, специфичность и прогностическая Надежность (внутренняя согласованность) дан-
ценность положительного результата (ПЦПР) ной методики определяется как умеренная. Также
каждого инструмента* (табл. 3). Во-вторых, для шкала показала удовлетворительную устойчивость
изучения конкурентной валидности рассмотрены результатов теста, или ретестовую надежность.
корреляции между восьмью изучаемыми шкала- Меньшая стабильность отмечалась при ис-
ми и другими тестовыми методиками. Результаты следовании соматического компонента BDI по
приведены в табл. 4. Психометрические данные сравнению с когнитивными показателями [41],
оценивались на основании следующих критериев: что неудивительно, поскольку, как ранее уже
>0,90 — очень хорошие, от 0,90 до 0,80 — хорошие, отмечалось, соматические симптомы депрессии
от 0,70 до 0,50 — умеренные, от 0,50 до 0,30 — «перекликаются» с нормальными соматически-
низкие, и <0,30 — очень низкие [15]. ми ощущениями в послеродовом периоде. Одно
Для оценки полезности использования при из опубликованных исследований показало хо-
скрининге послеродовой депрессии Эдинбург- рошую внутреннюю согласованность теста, под-
ской шкалы послеродовой депрессии нами было твержденную методом расщепления или методом
проведено дополнительное исследование. С це- автономных частей [16]. По результатам про-
лью определения чувствительности, специфич- веденного анализа специфичность шкалы BDI
ности данной методики у российских женщин можно оценить как высокую и очень высокую. В
было проведено диагностическое исследование, в то время как чувствительность данной методики
которое вошли 195 женщин. Исследование прово- была более вариабельна по разным данным. Так,
дилось спустя два месяца после родов. В работе в исследовании, проведенном в Китае, шкала по-
использованы следующие психометрические шка- казала высокую чувствительность [44], в Южном
Уэльсе — среднюю [38], в Канаде — низкую [53].
*  Чувствительность: доля позитивных результатов Прогностическая ценность положительного ре-
теста в группе (в популяции) больных пациентов. Спец-
ифичность: доля негативных результатов теста в группе зультата (ПЦПР) данной шкалы во всех вышеу-
здоровых пациентов. Прогностическая ценность поло- казанных исследованиях также была низкой.
жительного результата (ПЦПР) определяет долю обсле- Шкала послеродовой депрессии Бромлей
дованных женщин, имеющих реальный положительный (BPDS; Stein and Van den Akker, 1992). BPDS была
результат по изучаемому тесту среди общего количества разработана для оценки как настоящих, так и
испытуемых, имеющих положительный результат (Fletcher прошедших эпизодов послеродовой депрессии.
et al., 1996).

42
ОБОЗРЕНИЕ ПСИХИАТРИИ И МЕДИЦИНСКОЙ ПСИХОЛОГИИ № 2, 2012
Исследования

Таблица 1. Вошедшие в анализ исследования


Коли-
Исследование Страна чество ис- Послеродовой период Шкалы
пытуемых
Affonso et al., 2000 США, Италия, Швеция, 892 4–6 недель, BDI, EPDS
Финляндия, С. Корея, Тай- 10–12 недель
вань, Индия, Австралия
Aydin et al., 2004 Турция 341 Через 1 год после родов EPDS, SCID-I-DSM-IV
Ballard et al., 1994 Великобритания 200 6 недель, 6 месяцев Psychiatric Assessment
Interview, EPDS
Barnett et al., 1999 Австралия 379 2-й триместр беременно- EPDS, DIS, GHQ 30
сти, 6 недель, 6 месяцев
Beck et al., 2003 США 30 2–26 недель PDSS
Beck and Gable, 2000 США 525 1–23 недели PDSS
Beck and Gable, 2001a США 150 2–12 недели SCID, BDI-II, EPDS, PDSS
Beeghly et al., 2003 США 163 3, 6, 12, 18 месяцев CES-D, BSI
Beeghly et al., 2002 США 106 2, 3, 6, 12 месяцев DIS-III-R, CES-D
Benvenuti et al., 1991 Италия 113 8–12 недель MINI DSM-IIIR, EPDS
Berle et al., 2003 Норвегия 411 6–12 недель EPDS, MINI, MADRS,
HADS, BDI
Boyce et al., 1993 Австралия 103 2–29 недель EPDS, GHQ-30, Pitt Scale,
DIS-DSM-IIIR
Campbell and Cohn, США 1033 6–8 недель SADS, CES-D
1991
Condon and Австралия 202–212 4 недели; 4 недели и 8 EPDS, HADS, POMS,
Corkingdale, 1997 месяцев Zung SDS
Eberhard-Gran et al., Норвегия 310 6–10 недель EPDS, SCL-25, PRIME-MDDSM-
2001a – Review IV, MADRS
Eberhard-Gran et al.,
2001b
Fuggle et al., 2002 Великобритания 48 8–12 недель EPDS, GHQ-28
Garcia-Esteve et al., Испания 1201 6 недель EPDS, SCID DSM-IIIR
2003
Harris et al., 1989 Великобритания 147 6 недель psychiatric interview-DSM-III,
BDI, EPDS, Raskin, MADRS
Hopkins et al., 1989 США 49 6 недель SADS with RDC, BDI
Huffman et al., 1990 США 62 12 недель BDI
Jarjoura и O’Hara, 1987 США 75 3, 6, 9, 24 недели BDI, RDC
Kitamura et al., 1994 Япония 120 1 месяц SADS с RDC,
Zung SDS, GHQ-30
Lee et al., 1998 Гонконг 220 6 недель GHQ-12, EPDS, BDI,
SCID-DSM-IIIR
Lee et al., 2001 Гонконг 145 6 недель GHQ-12, EPDS, BDI,
SCID-DSM-IIIR
Matthey et al., 2001 Австралия 230–238 6–7 недель EPDS, DIS-DSM-IV
Muzik et al., 2000 Австралия 50 3, 6-й месяцы SCID-DSM-III-R, EPDS,
Zung SDS, SCL-90
Nott and Cutts, 1982 Великобритания 212 8–14 недель Clinical Interview Schedule,
GHQ-12, 28, 30
Pop et al., 1992 Нидерланды 293 4 недели EPDS, Zung, DACL,
BDI, SCL-90
Regmi et al., 2002 Непал 100 2–3-й месяц EPDS, MINI
Stein и van den Akker, Англия 165 До родов, 6 месяцев BPDS, Dunedin Scale
1992
Stuart et al., 1998 США 107 30 недель BDI, BAI, EPDS, STAI
Sugawara et al., 1999 Япония 120 1, 6, 12, 18 месяцев SADS с RDC, Zung SDS
Whiffen, 1988 Канада 120 6–8 недель SADS с RDC, BDI
Yonkers et al., 2001 США 802 3–5 недель EPDS, IDS, SCID-DSM-IV
Werrett and Clifford США 23 2 месяца EPDS
(2006)
Clarke (2008) Канада 103 2 месяца EPDS, PDSS

43
ОБОЗРЕНИЕ ПСИХИАТРИИ И МЕДИЦИНСКОЙ ПСИХОЛОГИИ № 2, 2012
Исследования

Таблица 2
Показатели надежности изучаемых шкал
Шкала Внутренняя согласованность Ретестовая надежность Метод расщепления
BDI 0.69 [16] 0.52–0.70 [16,51] 0.86 -0.93[16]
BDI - II 0.91 [23, 25] - -
BPDS - 0.80 [50] -
CES-D 0.82 [26] 0.61-0.62 [26, 27] -
0.73–0.87 [16, 17, 28, 29, 34, 35, 36, 0.53–0.74 [16, 17, 28, 34, 35, 0.73–0.83 [16, 17, 28, 34, 35,
EPDS
48] 51] 48]
GHO - - -
IDS - - -
PDSS 0.99 [21, 22, 25] - -
Zung SDS 0.81 [52] - -

Таблица 3
Чувствительность, специфичность и положительное значение прогностического результата
Средний балл
Шкала Чувствительность Специфичность ПЦПР
(cut-off )
BDI 9–11 [38, 44, 53] 47,6–82  % [38, 44, 53] 85.9–89  % [38, 44, 53] 34–53  % [38, 44, 53]
BDI - II 20 [23] 56–57  % [21] 97–100  % [23] 74–100  % [23]
BPDS - 62  % [50] 94  % [50] 61  % [50]
CES-D 16 [32] 60  % [32] 92  % [32] 53  % [32]
8–15 [17, 19, 23, 44, 45, 59–100  % [17, 19, 23, 44, 49–100  % [17, 19, 23, 44, 19–92  % [17, 19, 23, 44,
EPDS
46, 49, 54] 45, 46, 49, 54] 45, 46, 49, 54] 45, 46, 49, 54]
EPDS* 11 75% 68% 26%
GHO 4–8 [42, 43, 44] 50–88  % [42, 43, 44] 84–89  % [42, 43, 44] 32–54  % [42, 43, 44]
IDS 18 [54] 95  % [54] 88  % [54] 54  % [54]
PDSS 80 [23, 25] 91–94  % [23, 25] 72–98  % [23, 25] 33–88  % [23, 25]
Zung SDS 9/10–29/30–60 [42, 46] 45–89  % [42, 46] 77–88  % [42, 46] 36–37  % [42, 46]

ПЦПР рассчитывалась с учетом распространенности ПРД 13  %


* Результаты, полученные в НИПНИ им. В.М. Бехтерева.

Таблица 4
Конкурентная валидность
Шкалы BDI BDI-II CES-D EPDS GHO Zung SDS
0.59–0.78 [16,
0.42–0.61 [30, 0.57–0.71 [33,
EPDS 29, 35, 38, 43, 0.82 [23, 25] - -
36, 43, 44] 48]
44, 48]
0.42–0.61 [30,
GHO 0.63 [44] - - - -
36, 43, 44]
PDSS - 0.81 [23, 25] - 0.79 [23,25] - -
0.57–0.71 [33,
Zung SDS - - - - -
48]
SCL-90 - - 0.58–0.70 [27] 0.60 [48] - -
0.79–0.80 [29,
MADRS 0.61 [38] - - - -
35]
0.57–0.65 [29,
HADS - - - - 0.63–0.68 [33]
33]
HAMD - - - 0.72 [29] - -

44
ОБОЗРЕНИЕ ПСИХИАТРИИ И МЕДИЦИНСКОЙ ПСИХОЛОГИИ № 2, 2012
Исследования

Шкала состоит из десяти пунктов и графика, на- зования EPDS равной 50  %. В данной работе мы
глядно иллюстрирующего разные этапы депрес- попытались оценить полезность EPDS в качестве
сивного состояния: когда началась депрессия, как скринингового инструмента ПРД.
долго продолжалась и в какой момент самочув- EPDS изучает эмоциональные и когнитивные
ствие было наихудшим. Шкала уникальна тем, симптомы послеродовой депрессии. Из данной
что позволяет женщинам описать свое состояние шкалы целенаправленно исключены соматические
как в период беременности, так и в послеродовом симптомы депрессии, т.  к. исследование сомати-
периоде, включая как настоящие роды, так и все ческих симптомов в послеродовом периоде мало-
бывшие ранее. Что позволяет проследить историю информативно. Шкала состоит из 10 пунктов,
заболевания. Но использование шкалы BPDS тре- каждый пункт оценивается в баллах (от 0 до 3).
бует специального обучения [50]. Кроме того, дан- EPDS была переведена на множество языков, в
ная шкала была разработана в Великобритании и том числе голландский [28], китайский, вьетнам-
доступна только на английском языке. Также не ский [19], испанский [37], финский, португаль-
все психометрические параметры данной шка- ский, итальянский [28], арабский, шведский, ту-
лы были опубликованы. BPDS показала высокую рецкий [17]. Эберхард-Гран с коллегами (2001)
устойчивость результатов теста или ретестовую провели систематический обзор 18 исследований
надежность, но данные о надежности (внутренней эффективности EPDS, опубликованных в период
согласованности) теста не были опубликованы. с 1987 по сентябрь 2000 г. Во всех исследовани-
Методика показала умеренные чувствительность, ях EPDS показала средние и высокие результаты
положительное прогностическое значение и высо- ретестовой надежности. Результаты исследований
кую специфичность. Валидность шкалы не была Эберхард-Гран выявили широкий диапазон чув-
проверена в сравнении с другими тестовыми ме- ствительности и специфичности данной шкалы,
тодиками. По мнению ряда авторов, BPDS основа- что, возможно, связано с погрешностями мето-
на на критериях DSM-III и не является «золотым» дологии. Авторы пришли к выводу, что при рас-
стандартом скринингового инструмента. пространенности ПРД 13  % в общей популяции
Center for Epidemiological Studies Depression положительное прогностическое значение EPDS
Scale (CES-D; Radloff, 1977) — состоит из 20 пунк­ составляет менее 50  %, а также отмечается боль-
тов, измеряющих депрессивные нарушения, отме- шое количество ложноположительных результа-
чающиеся у обследуемых за последние семь дней. тов. В нашем исследовании прогностическая цен-
Общий балл по данной шкале от 0 до 60 отра- ность положительного результата была менее 50  %
жает уровень депрессии. Шкала CES-D была раз- (26  %). Чувствительность шкалы по полученным
работана для эпидемиологических исследований нами денным была достаточно высокой и соста-
депрессии, широко используется и переведена на вила 75  %. В то же время специфичность данной
многие языки. В ряде исследований CES-D ис- методики была относительно невысокой — 68  %.
пользовалась для определения симптомов депрес- Следует отметить, что во всех исследуемых случаях
сии в послеродовом периоде. Тем не менее приме- выраженность депрессивной симптоматики была
нение данной методики в послеродовом периоде легкой. Также большинство авторов отмечают,
недостаточно изучено, в литературе опубликовано что чувствительность и положительное значение
мало данных о психометрических характеристи- прогностического результата EPDS, как правило,
ках данной шкалы. Одно исследование показало, ниже при использовании шкалы для определения
что CES-D обладает высокой надежностью — «малой» депрессии [17, 23, 24, 45], чем для вы-
внутренней согласованностью [26]. Тем не менее явления «большого» депрессивного расстройства
устойчивость результатов теста или ретестовая [23, 24, 29]. Положительное прогностическое зна-
надежность CES-D была умеренной [26]. В неко- чение было выше в тех исследованиях, которые
торых исследованиях CES-D показала умеренную не брали за основу уровень распространенности
чувствительность и ПЦПР, но высокую специфич- послеродовой депрессии 13  % [34, 35]. Значения
ность [32]. CES-D умеренно коррелирует с дру- ПЦПР расходились в различных исследованиях
гими самоопросниками депрессии. Шкала удобна из-за различий в значениях распространенности
для больших эпидемиологических исследований. и оценочных баллах послеродовой депрессии. Для
Но при использовании данного инструмента для разных стран (культурных групп) приняты раз-
скрининга послеродовой депрессии вероятные по- ные значения среднего балла по EPDS. Так, Barnett
тери могут составить до 40  %. et al., 1999, определили, что для группы женщин
Эдинбургская шкала послеродовой депрессии из Вьетнама и Австралии средний балл по EPDS
(EPDS; Cox et al., 1987) является наиболее широ- был 14–15 по сравнению с женщинами из групп с
ко используемым скрининговым инструментом английским и арабским языками, в которых сред-
послеродовой депрессии. Относительно недавно ний балл был 9-10 [19]. EPDS показала высокий
проведенный Matthey анализ (2009) эффективно- уровень корреляции с другими шкалами депрес-
сти использования EPDS как скринингового ин- сии. В то же время со шкалами тревоги уровень
струмента послеродовой депрессии выявил ряд корреляции EPDS в разных исследованиях был от
методических неточностей. Частично выявленные низкого до умеренного [60].
ошибки объяснялись неточностью трактовки ряда The General Health Questionnaire (GHQ; Gold-
формулировок данного самоопросника. Matthey в berg, 1972). Опросник был первоначально разра-
своем исследовании определил точность исполь- ботан для выявления распространенности пси-

45
ОБОЗРЕНИЕ ПСИХИАТРИИ И МЕДИЦИНСКОЙ ПСИХОЛОГИИ № 2, 2012
Исследования

хических заболеваний среди всех амбулаторно Америке и Великобритании, в связи с чем необ-
наблюдаемых пациентов. Опросник состоит из ходимо проведение дальнейших исследований для
четырех подшкал: подшкалы депрессии, сомати- определения транскультуральных особенностей
ческих симптомов, подшкалы тревоги/бессонни- ее применения.
цы и нарушений социального функционирования. Шкала самооценки депрессии Цунга (The Zung
Каждый пункт оценивается как 0 или 1. Суще- Self-Rating Depression Scale — SDS; Zung, 1965).
ствуют различные версии опросника, состоящие Шкала состоит из 20 пунктов, каждый оценива-
из 12, 28, 30 или 60 пунктов. Опросник был пере- ется от 1 до 4 баллов по типу шкалы Лайкерта.
веден на многие языки: японский [42], арабский, Диапазон распределения баллов по SDS составля-
вьетнамский, китайский. Для выявления после- ет от 20 до 80 баллов. Японская версия имеет от
родовой депрессии наиболее чувствительной и 0 до 60 баллов [42]. SDS переведена на множество
специфичной считается 12-пунктная GHQ [62]. языков, шкала использовалась для выявления де-
Несмотря на то что данная шкала является рас- прессии в послеродовом периоде у женщин в Ав-
пространенным диагностическим инструментом стралии, Японии, Нигерии, Австрии [33, 42, 46].
депрессии, коэффициенты надежности для ПРД Внутренняя согласованность в большинстве ис-
не приводятся в литературе. За все время было следований была хорошей. Ретестовая надежность
опубликовано только три исследования относи- не публиковалась. При проведении исследования
тельно эффективности применения GHQ в после- в Японии отмечались хорошая специфичность,
родовом периоде [42, 44, 62]. В этих исследовани- но низкая чувствительность и ПЦПР [42]. В ав-
ях GHQ показала от низкой до средней степени стрийском исследовании SDS показала хорошую
корреляции с EPDS и BDI. А также невысокие чувствительность, умеренную специфичность и
чувствительность, специфичность и ПЦПР дан- низкую ПЦПР [46]. Уровень корреляции шка-
ной методики при обследовании женщин с по- лы депрессии Цунга с другими самоопросника-
слеродовой депрессией. ми депрессии также был умеренным. Учитывая
The Inventory of Depressive Symptomatology все вышеперечисленное, данная шкала не может
(IDS; Rush et al., 1986), состоящий из 28 пунктов считаться предпочтительным инструментом для
самоопросник оценки депрессии, в том числе скрининга.
депрессивных симптомов, отвечающих DSM-IV Обсуждение
MDD критериям. Шкала редко используется для Это исследование показывает сложность вы-
определения депрессии в послеродовом периоде. бора шкалы для выявления послеродовой депрес-
По данным опубликованного в 2001 г. исследова- сии. Только три шкалы были специально разра-
ния Yonkers с соавторами, IDS показала хорошие ботаны для определения симптомов послеродовой
чувствительность, специфичность и умеренное депрессии: EDDS, BPDS и PDSS, в то время как
положительное прогностическое значение [54]. остальные шкалы измеряют общие симптомы де-
Данные относительно надежности и конкурентной прессии. Все рассмотренные методики были до-
валидности данной шкалы не были опубликованы. статочно простыми и не занимали много времени
Для обоснованного применения IDS как скринин- для заполнения. BDI-II, CES-D и PDSS продемон-
гового инструмента послеродовой депрессии в на- стрировали высокие показатели внутренней со-
стоящее время недостаточно данных, необходимо гласованности и, соответственно, надежности. Но
проведение дополнительных исследований. следует отметить, что большинство исследований,
Скрининговая шкала послеродовой депрес- в которых рассматривались данные шкалы, были
сии. (The Postpartum Depression Screening Scale — короткими и проводились в небольших группах.
PDSS; Beck and Gable, 2000, 2001). Шкала состоит EPDS показала от умеренного до хорошего уро-
из 35 пунктов и учитывает семь параметров специ­- вень надежности (внутренней согласованности), а
фичных для послеродового периода: нарушения также хорошие показатели надежности получен-
сна — питания, тревога — отсутствие чувства ные методами расщепления и ретестовой надеж-
безопасности, эмоциональная лабильность, когни- ности. Для отбора скринингового инструмента
тивные нарушения, потеря своего я, вина — стыд, критичными являются показатели чувствительно-
мысли о причинении вреда. Шкала выполнена в сти и прогностической ценности положительного
форме самоопросника, каждый пункт оценивает- результата. По полученным данным только две
ся от 1 до 5 баллов. PDSS доступна на английском шкалы имели высокую чувствительность: PDSS и
и испанском языках [21]. В разных исследованиях IDS. Указания на высокую чувствительность этих
шкала показала высокую внутреннюю согласован- шкал были приведены только в трех изучаемых
ность. Меньше данных приводится о ретестовой исследованиях [23, 25, 54] и не могут быть рас-
надежности. Ни один из опубликованных обзоров ценены как достаточно достоверные. Наиболее
не содержит информации о протоколах исследо- высокий показатель по прогностическому зна-
ваний, данных о ретестовой надежности. PDSS чению положительного результата был у BDI-II
показала хорошие чувствительность и специфич- [23]. В этом же исследовании хорошее значение
ность для выявления депрессии, соответствующей ПЦПР было получено для PDSS. Основным недо-
критериям малого депрессивного расстройства статком большинства рассмотренных шкал были
по DSM-IV. Также PDSS продемонстрировала до- невысокие чувствительность и положительное
статочно хороший уровень корреляции с BDI-II прогностическое значение (например, для BDI,
и EPDS. Шкала анализировалась в основном в EPDS, GHQ и Zung). Соответственно, следует

46
ОБОЗРЕНИЕ ПСИХИАТРИИ И МЕДИЦИНСКОЙ ПСИХОЛОГИИ № 2, 2012
Исследования

предположить, что при использовании эти шкал диагностики оправдано начиная со второй неде-
будут как ложноположительные, так и ложноо- ли после родов. На более ранних сроках резуль-
трицательные результаты. Следует отметить, что таты будут недостоверными [67]. В ряде науч-
данная проблема свойственна всем самоопросни- ных работ исследователи изучали послеродовой
кам в целом [65]. Большинство шкал, рассматри- период до 18-го месяца после родов [16, 68, 27,
ваемых в данном исследовании, имеют хорошие 52]. Было отмечено, что со временем уменьша-
показатели конкурентной валидности с другими ется количество общесоматических симп­томов
методиками определения депрессии. BDI и EPDS послеродовой депрессии и, соответственно, на
также имеют хороший уровень корреляции со более поздних сроках может быть использован
шкалами тревоги, что важно, учитывая тот факт, более широкий спектр диагностических методик.
что тревога является одним из основных симпто- В целом целесообразным представляется прове-
мов послеродовой депрессии [66]. Выбор скри- дение диагностического исследования начиная
нингового инструмента, как мы уже отмечали, со второй недели после родов и далее на разных
является сложной задачей. В связи с этим важно этапах послеродового периода.
рассмотреть результаты тех исследований, кото- Не менее важен вопрос оценки результатов, по-
рые попытались оценить эффективность и полез- лученных в интернациональных межкультураль-
ность совместного применения разных шкал. Так, ных исследованиях. В частности, при проведении
при совместном использовании GHO-12 и EPDS исследований в Австралии и Европе средний балл
эффективность обеих шкал была выше по сравне- по EPDS и BDI был существенно ниже по сравне-
нию с применением их по отдельности [44]. Так- нию с данными, полученными в Азии и Южной
же одновременное применение нескольких шкал Америке, где средний балл по изучаемым шкалам
увеличивало время и трудозатраты исследования, был максимально высоким [16]. Также могут раз-
что нежелательно для проведения исследований личаться данные, полученные у женщин из раз-
в послеродовом периоде. Поэтому всегда пред- ных культурных групп в одной стране. Это делает
почтительно использование для скрининга ми- необходимым установление оценочных норм для
нимального количества шкал. Также способству- каждой страны [17, 49].
ет проведению более эффективной диагностики В целом, сравнивая полезность применения
определение групп риска по возникновению по- различных психометрических шкал для скринин-
слеродовой депрессии. га послеродовой депрессии, можно отметить бо-
Как показал обзор различных исследований, лее высокие показатели надежности шкал специ-
наиболее изученной и доступной для применения ально разработанных для скрининга ПРД (EPDS,
на разных языках является шкала EPDS. К тому PDSS, BPDS) по сравнению со шкалами, тради-
же данная методика имеет достаточно хорошие ционно применяемыми для диагностики депрес-
показатели чувствительности и специфичности, сивной симптоматики. Особенно если речь идет
что подтверждалось при проведении исследова- о диагностике на ранних сроках послеродового
ния у российских женщин. В нашем исследова- периода. Со временем, по мере уменьшения влия-
нии чувствительность и специфичность данной ния родов и связанных с этим физиологических
шкалы имели умеренное и хорошее значение. изменений в организме женщины, список диа-
В то же время ПЦПР была достаточно невысо- гностических инструментов расширяется. Пока-
кой, что, возможно, связано с малой выражен- затели эффективности методик как специфичных
ностью депрессивной симптоматики в изучаемой для послеродового периода, так и не специфич-
группе и требует дальнейшего изучения. Также ных становятся вполне сопоставимыми. Каждая
доcтаточно перспективным видится применение из перечисленных выше шкал имела как свои до-
PDSS и BPDS. стоинства, так и недостатки. «Золотого стандарта»
Другим важным вопросом является выбор диагностики послеродовой депрессии сегодня не
оптимального времени для проведения исследо- существует.
вания. Как упоминалось ранее, согласно крите- В настоящее время сохраняется необходи-
риям DSM-IV послеродовой считается депрес- мость проведения дополнительных исследований,
сия, развивающаяся в первые четыре недели направленных на изучение клинических особен-
после родов. У большинства женщин (до 85  %) ностей, нозологической принадлежности депрес-
отмечаются явления послеродового блюза. Дан- сивной симптоматики в послеродовом периоде и
ное состояние является преходящим и не счи- разработка комплексных подходов к диагностике
тается отклонением от нормы [47]. Проведение послеродовой депрессии.
Литература

1. Milgrom J., Gemmill A.W., Bilszta J.L., Hayes Cooper P.J. (eds). Postpartum depression and
B., Barnett B., Brooks J., Ericksen J., Ellwood D., child development. Guilford Press, New York,
Buist  A., 2008. Antenatal risk factors for postnatal p. 221–236.
depression: a large prospective study. J. Affect. Dis- 3. Teti D.M., Gelfand D.M. (1991). Behavioral com-
ord. 108 (1–2), p. 147–157. petence among mothers of infants in the first year:
2. Field T. (1997). The treatment of depressed the mediational role of maternal self-efficacy. Child
mothers and their infants. In: Murray E.L., Dev. 62, p. 918–929.

47
ОБОЗРЕНИЕ ПСИХИАТРИИ И МЕДИЦИНСКОЙ ПСИХОЛОГИИ № 2, 2012
Исследования

4. O’Hara M.W., 2009. Postpartum depression: what 21. Beck A.T., Steer R.A., Brown G.K. (1996). Manual
we know. Journal of Clinical Psychology, 65, for Beck Depression Inventory-II, Psychological
p.  1258–1269. Corporation, San Antonio TX. Beck CT, Bernal H,
5. Josefsson A., Berg G., Nordin C., Sydsjo G. (2001). Froman RD (2003) Methods to document semantic
Prevalence of depressive symptoms in late pregnan- equivalence of a translated scale. Res Nurs Health,
cy and postpartum. Acta Obstet Gynecol Scand 80, 26, p. 64–73.
p. 251–255. 22. Beck C.T., Gable R.K. (2000). Postpartum Depression
6. Murray L., Sinclair D., Cooper P., Ducournau P., Screening Scale: development and psychometric
Turner P., Stein A. (1999). The socioemotional testing. Nurs Res, 49, p. 272–282.
development of 5-year-old children of postnatally 23. Beck C.T., Gable R.K. (2001a). Comparative
depressed mothers. J Child Psychol Psychiatry, 40, analysis of the performance of the Postpartum
p. 1259–1271. Depression Screening Scale with two other depression
7. American Psychiatric Association, 2000. Diagnostic instruments. Nurs Res, 50, p. 242–250.
and Statistical Manual of Mental Disorders. Text 24. Beck C.T., Gable R.K. (2001b). Ensuring content
Revision 4th edn. American Psychiatric Association, validity: an illustration of the process. J Nurs Meas,
Washington DC. 9, p. 201–215.
8. Brockington I., 2004. Postpartum psychiatric disor- 25. Beck C.T., Gable R.K. (2001c). Further validation
ders. Lancet, p. 363, 303–310. of the Postpartum Depression Screening Scale. Nurs
9. Whiffen V.E. (1991). The comparison of postpar- Res, 50, p. 155–164.
tum with non-postpartum depression: a rose by any 26. Beeghly M., Olson K.L., Weinberg M.K., Pierre
other name. J Psychol Neuros, 16. p. 160–165. S.C., Downey N., Tronick E.Z. (2003). Prevalence,
10. Yonkers K.A., Vigod S., Ross L.E., 2011. Diagnosis, stability, and socio-demographic correlates of
pathophysiology, and management of mood disor- depressive symptoms in black mothers during the
ders in pregnant and postpartum women. Obstet- first 18 months postpartum. Maternal Ch Health  J.
rics and Gynecology, 117, p. 961–977. 7, p. 157–168.
11. Chessick C.A., Dimidjian S., 2010. Screening for 27. Beeghly M., Weinberg M.K., Olson K.L., Kernan H.,
bipolar disorder during pregnancy and the postpar- Riley J., Tronick E.Z. (2002). Stability and change
tum period. Archives of Women’s Mental Health, in level of maternal depressive symptomatology
13, p. 233–248. during the first postpartum year. J Affect Dis, 71,
12. Munoz R.F., Le H.N., Ghosh Ippen C (2000). We p. 169–180.
should screen for major depression. Appl Prev Psy- 28. Benvenuti P., Ferrara M., Niccolai C., Valoriani
chol, 9, p. 123–133. V., Cox J.L. (1999). The Edinburgh Postnatal
13. Chabrol H., Teissedre F., Saint-Jean M., Teisseyre  N., Depression Scale: validation for an Italian sample.
Roge B., Mullet E. (2002). Prevention and treatment J Affect Dis, 53, p. 137–141.
of postpartum depression: a controlled randomized 29. Berle J.O., Aarre T.F., Mykletun A., Dahl A.A.,
study on women at risk. Psychol Med, 32, p. 1039– Holsten F. (2003). Screening for postnatal
1047. depression: validation of the Norwegian version
14. Anastasi A. (1988). Psychological testing, 6th edn. of the Edinburgh Postnatal Depression Scale, and
Macmillan, New York. assessment of risk factors for postnatal depression.
15. Myers K., Winters N.C. (2002). Ten-year review J Affect Dis, 76, p. 151–156.
of rating scales. I: overview of scale functioning, 30. Boyce P., Stubbs J., Todd A. (1993). The Edinburgh
psychometric properties, and selection. J Am Acad Postnatal Depression Scale: validation for an
Child Adolesc Psychiatry, 41, p. 114–122. Australian sample. Aus NZ J Psychiatry, 27,
16. Affonso D.D., De A.K., Horowitz J.A., Mayberry p.  472–476.
L.J. (2000). An international study exploring 31. Boyd R.C., Pearson J.L., Blehar M.C. (2002).
levels of postpartum depressive symptomatology. J Prevention and treatment of depression in pregnancy
Psychosom Res, 29, p. 207–216. and the postpartum period-summary of a maternal
17. Aydin N., Inandi T., Yigit A., Hodoglugil N.N.S. depression roundtable: a U.S. perspective. Arch
(2004). Validation of the Turkish version of the Womens Ment Health, 4, p. 79–83.
Edinburgh Postnatal Depression Scale among 32. Campbell S.B., Cohn J.F. (1991). Prevalence and
women within their first postpartum year. Soc correlates of postpartum depression in first-time
Psychiatry Psychiat Epidemiol, 39, p. 483–486. mothers. J Ab Psychol, 100, p. 594–599.
18. Ballard C.G., Davis R., Cullen P.C., Mohan 33. Condon J.T., Corkindale C.J. (1997). The assessment
R.N. (1994). Prevalence of postnatal psychiatric of depression in the postnatal period: a comparison
morbidity in mothers and fathers. Br J Psychiatry, of four self-report questionnaires. Aus NZ J
164, p. 782–788. Psychiatry, 31, p. 353–359.
19. Barnett B., Matthey S., Gyaneshwar R. (1999). 34. Eberhard-Gran M., Eskild A., Tambs K.,
Screening for postnatal depression in women of Opjordsmone S., Samuelson S.O. (2001a). Review
non-English speaking background. Arch Womens of the validation studies of the Edinburgh Postnatal
Ment Health, 2, p. 67–74. Depression Scale. Acta Psychiatr Scand, 104,
20. Beck A.T., Ward C.H., Mendelson M., Mock J., p.  243–249.
Erbaugh J. (1961). An inventory for measuring 35. Eberhard-Gran M., Eskild A., Tambs K., Schei B.,
depression. Arch Gen Psychiatry, 4, p. 561–571. Opjordsmoen S. (2001b). The Edinburgh Postnatal

48
ОБОЗРЕНИЕ ПСИХИАТРИИ И МЕДИЦИНСКОЙ ПСИХОЛОГИИ № 2, 2012
Исследования

Depression Scale: validation in a Norwegian 49. Regmi S., Sligl W., Carter D., Grut W., Seear  M.
community sample. Nordic J Psychiatry, 55, p.  113– (2002). A controlled study of postpartum de­
117. pression among Nepalese women: validation of
36. Fuggle P., Glover L., Khan F., Haydon K. (2002). the Edinburgh Postpartum Depression Scale in
Screening for postnatal depression in Bengali Kathmandu. Tropical Med Int Health, 7, p. 378–
women: preliminary observations from using a 382.
ranslated version of the Edinburgh Postnatal 50. Stein G., Van den Akker O. (1992). The retrospective
Depression Scale (EPDS). J Reprod Inf Psychol, diagnosis of postnatal depression by questionnaire.
20, p. 71–82. J Psychosom Res, 36, p. 67–75.
37. Garcia-Esteve L., Ascaso C., Ojuel J., Navarro 51. Stuart S., Couser G., Schilder K., O’Hara M.W.,
P. (2003). Validation of the Edinburgh Postnatal Gorman L. (1998). Postpartum anxiety and
Depression Scale (EPDS) in Spanish mothers. J depression: onset and comorbidity in a community
Affect Dis, 75, p. 71–76. sample. J Nerv Ment Dis, 186, p. 420–424.
38. Harris B., Huckle P., Thomas R., Johns S., Fung H. 52. Sugawara M., Sakamoto S., Kitamura T., Toda
(1989). The use of rating scales to identify post-natal M.A., Shima S. (1999). Structure of depressive
depression. Br J Psychiatry, 154, p. 813–817. symptoms in pregnancy and the postpartum period.
39. Hopkins J., Campbell S.B., Marcus M. (1989). J Affect Dis, 54, p. 161–169.
Postpartum depression and postpartum adaptation: 53. Whiffen V.E. (1988). Screening for postpartum
overlapping constructs? J Affect Dis, 17, p. 251– depression: a methodological note. J Clin Psychol,
254. 44, p. 367–371.
40. Huffman L.C., Lamour M., Byran Y.E., Pederson 54. Yonkers K.A., Ramin S.M., Rush A.J., Navarrete
F.A. (1990). Depressive symptomatology during C.A., Carmody T., March D., Hearwell S.F., Leveno
pregnancy and the postpartum period: is the Beck K.J. (2001). Onset and persistence of postpartum
Depression Inventory applicable? J Reprod Inf depression in an inner-city maternal health clinic
Psychol, 8, p. 87–97. system. Am JPsychiatry, 158, p. 1856–1863.
41. Jarjoura D., O’Hara M.W. (1987). A structural 55. Werrett J., Clifford 2006. Validation of a Punjabi
model for postpartum responses to the somatic and version of the Edinburgh postnatal depression scale
cognitive items on the Beck Depression inventory. J (EPDS). Int. J. Nurs. Stud. 43, p. 227–236.
Psychopat Beh Assess 9, p. 389–402. 56. Troutman B.R., Cutrona C.E. (1990). Nonpsychotic
42. Kitamura T., Shima S., Sugawara M., Toda postpartum depression among adolescent mothers.
M.A. (1994). Temporal variation of validity of J Ab Psychol, 99, p. 69–78.
self-rating questionnaires: repeated use of the 57. US Department Health Human Services (2000)
general health questionnaire and Zung’s self-rating Healthy People 2010. 2nd edn. With understanding
depression scale among women during antenatal and improving health and objectives for improving
and postnatal periods. Acta Psychiatr Scand, 20, health, 2 vols. Washington, DC: US Government
p. 446–450. Printing Office. Retrieved November 1, 2002, from
43. Lee D.T.S., Yip S.K., Chiu H.F.K., Leung T.Y.S., http:==www. [Link]=populations=www=cen20
Chan K.P.M., Chau I.O.L., Leung H.C.M., Chung 00=[Link].
T.K.H. (1998). Detecting postnatal depression in 58. Radloff L.S. (1977). The CES-D Scale: a self-report
Chinese women: validation of the Chinese version depression scale for research in the general popula-
of the Edinburgh Postnatal Depression Scale. Br J tion. App Psychol Meas, 1, p. 385–401.
Psychiatry, 172, p. 433–437. 59. Cox J.L., Holden J.M., Sagovsky R. (1987). Detec-
44. Lee D.T.S., Yip A., Chiu H., Leung T., Chung T. tion of postnatal depression: development of the
(2001). Screening for postnatal depression: are 10-item Edinburgh Postnatal Depression Scale. Br
specific instruments mandatory? J Affect Dis, 63, J Psychiatry, 150, p. 782–786.
p. 233–238. 60. Brouwers E.P.M., van Baar A.L., Pop V.J.M.
45. Matthey S., Barnett B., Kavanagh D.J., Howie (2001). Does the Edinburgh Postnatal Depres-
P. (2001). Validation of the Edinburgh Postnatal sion Scale measure anxiety? J Psychosom Res, 51,
Depression Scale for men, and comparison of item p.  659–663.
endorsement with their partners. J Affect Dis, 64, 61. Goldberg D.P. (1972). The detection of psychiatric
p. 175–184. illness by questionnaire, vol. 21, Oxford University
46. Muzik M., Klier C.M., Rosenblum K.L., Holzinger Press, Oxford.
A., UmekW., Katschnig H. (2000). Are commonly 62. Nott P.N., Cutts S. (1982). Validation of the 30-
used self-report inventories suitable for screening item General Health Questionnaire in postpartum
postpartum depression and anxiety disorders? Acta women. Psychol Med, 12, p. 409–413.
Psychiatr Scand, 102, p. 71–73. 63. Rush A.J., Giles D.E., Schlesser M.A., Fulton
47. O’Hara M.W. (1987). Post-partum blues, depression C.L.,Weissenburger J.E., Burns C.T. (1986). The
and psychosis: a review. J Psychosom Obstet Inventory for Depressive Symptomatology (IDS):
Gynecol, 7, p. 205–227. preliminary findings. Psychiatry Res, 18, p. 65–87.
48. Pop V.J., Komproe I.H., van Son M.J. (1992). 64. Zung W.W.K. (1965). A self-rating depression scale.
Characteristics of the Edinburgh Postnatal Arch Gen Psychiatry, 12, p. 63–70.
Depression Scale in the Netherlands. J Affect Dis, 65. Coyne J.C., Thompson R., Palmer S.C., Kagee A.,
26, p. 105–110. Maunsell E. (2000). Should we screen for depres-

49
ОБОЗРЕНИЕ ПСИХИАТРИИ И МЕДИЦИНСКОЙ ПСИХОЛОГИИ № 2, 2012
Исследования

sion? Caveats and potential pitfalls. App Prev Psy- for postpartum depression. Psychosom Med, 65,
chol, 9, p. 101–121 p.  357–361.
66. Heron J., O’Connor T.G., Evans J., Golding J., Glov- 68. Areias M.E.G., Kumar R., Barros H., Figueiredo
er V. (2004). The course of anxiety and depression E. (1996). Comparative incidence of depression in
through pregnancy and the postpartum in a com- women and men, during pregnancy and after child-
munity sample. J Affect Dis, 80, p. 65–73. birth: validation of the Edinburgh postnatal depres-
67. Lee D.T.S., Yip A.S., Chan S.M., Tsui M.H.Y., Wong sion scale in Portuguese mothers. Br J Psychiatry,
W.S., Chung T.K. (2003). Postdelivery screening 169, p. 30–35.

Сведения об авторах
Мазо Галина Элевна, д. м. н., ведущий научный сотрудник отделения биологической терапии
психически больных, руководитель группы эндокринологической психиатрии Санкт-Петербургского
научно-исследовательского психоневрологического института им. В.М. Бехтерева, профессор кафедры
психиатрии Санкт-Петербургского государственного университета. E-mail: galina-mazo@[Link]
Вассерман Людвиг Иосифович, д. м. н., профессор, главный научный сотрудник лаборатории кли-
нической психологии Санкт-Петербургского научно-исследовательского психоневрологического инсти-
тута им. В.М. Бехтерева, профессор кафедры медицинской психологии и психофизиологии психологи-
ческого факультета Санкт-Петербургского государственного университета. E-mail: psy-lab@[Link]
Шаманина Мария Валерьевна, м. н. с. отделения биологической терапии психически больных
Санкт-Петербургского научно-исследовательского психоневрологического института им. В.М. Бехте-
рева. E-mail: shamaninamv@[Link]

50

Вам также может понравиться