2 (17) • 2010 1 Караганда 2010


Рис. 2 Горизонтальная дендрограмма



Pdf көрінісі
бет10/25
Дата01.02.2017
өлшемі2,62 Mb.
#3196
1   ...   6   7   8   9   10   11   12   13   ...   25

Рис. 2 Горизонтальная дендрограмма
древовидной классификации регионов Казахстана
по уровню жизни
Если  снизить  ограничение  до  0,2,  количе-
ство  кластеров  увеличится  до  7,  из  которых  4
будут  являться  монокластерами.
В  связи  с  этим  встает  вопрос  определения
точного  числа  кластеров.  Для  этого  также  мо-
гут  использоваться  различные  алгоритмы.  Од-
ним из  подобных алгоритмов  считается анализ
изменения  межкластерных расстояний  на  каж-
дом  шаге  объединения,  который  приведен  на
рисунке  3.
 
Plot of Linkage Distances across Steps
Euclidean distances
 Linkage
Distance
0
2
4
6
8
10
12
14
16
Step
-0,2
0,0
0,2
0,4
0,6
0,8
1,0
1,2
L
in
k
a
g
e
 D
is
ta
n
c
e
Рис. 3 График пошагового изменения
межкластерного расстояния
Считается,  что  на  графике  не  должно  быть
слишком  длинных  прямых  участков.  Как  вид-
но,  из  графика  3  первый  длинный  участок  на-
ступает на 13 шаге, который соответствует 4 кла-
стерам:
1.  Мангистауская  область.
2.  Астана,  Алматы,  Атырауская  область.
3.  Алматинская,  Кызылординская  области.
4.  Акмолинская,  Актюбинская,  Восточно-
Казахстанская,  Жамбылская,  Западно-Казах-
станская,  Карагандинская,  Костанайская,  Пав-
лодарская,  Северо-Казахстанская,  Южно-Казах-
станская  области.

ВЕСТНИК КЭУ: ЭКОНОМИКА, ФИЛОСОФИЯ, ПЕДАГОГИКА, ЮРИСПРУДЕНЦИЯ
4 6
Более точно узнать число кластеров можно
с  помощью  V-кратной  кросс-проверки.  Этот
метод  относится  к  одному  из  перспективных
направлений  кластерного  анализа,  связанного
с  интеллектуальным  анализом  данных  (data
mining).
В  данном  случае  широко  используются
два  подхода.  Первый  подход  называется  метод
k-средних.  Метод  основан  на  минимизации
среднеквадратического  отклонения.  Данный
метод  подтвердил,  что  наиболее  достоверное
число кластеров - 4 (рис. 4).
 
Graph of Cost Sequence
Best number of clusters: 4
k-Means
1
2
3
4
5
Number of clusters
0,30
0,31
0,32
0,33
0,34
0,35
0,36
0,37
0,38
0,39
0,40
0,41
C
lu
s
te
r c
o
s
t
Рис. 4. График функции стоимости кластера по
методу k-средних
Рисунок 4 показывает, что при достижении
4  кластеров  стоимость  кластера  практически
перестает снижаться, поэтому более мелкие кла-
стеры фактически близки друг к другу и их вы-
деление  по  большей  части  искусственно.
Интересно,  однако,  что  метод  k-средних
выделил немного  иные кластеры  (табл.  5).
Таблица 5
Кластеры регионов Казахстана по уровню жизни,
выделенные методом k-средних
Р е г и о н  
К л а с т е р  
А к м о л и н с к а я  
1  
К а р а г а н д и н с к а я  
1  
К о с т а н а й с к а я  
1  
С е в е р о - К а з а х с т а н с к а я  
1  
В о с т о ч н о - К а з а х с т а н с к а я  
1  
А к т ю б и н с к а я  
2  
З а п а д н о - К а з а х с т а н с к а я  
2  
Ж а м б ы л с к а я  
2  
Ю ж н о - К а з а х с т а н с к а я  
2  
П а в л о д а р с к а я  
2  
А л м а т и н с к а я  
3  
К ы з ы л о р д и н с к а я  
3  
А т ы р а у с к а я  
4  
М а н г и с т а у с к а я  
4  
г .   А с т а н а  
4  
г .   А л м а т ы  
4  
 
В  данном  случае  Мангистауская  область
присоединилась  к  кластеру  с  городами  Астана
и Алматы,  зато  самый  крупный кластер  разде-
лился  на  равные  по  количеству  объектов  клас-
теры.
Корректность результатов кластерного ана-
лиза  можно  дополнительно  проверить  прину-
дительным разделением на большее число кла-
стеров  (например, 5). Результаты представлены
в таблице 6.
Таблица 6
Кластеры регионов Казахстана по уровню жизни,
выделенные методом k-средних (5 кластеров)
Р е г и о н  
К л а с т е р  
А к м о л и н с к а я  
1  
К а р а г а н д и н с к а я  
1  
К о с т а н а й с к а я  
1  
С е в е р о - К а з а х с т а н с к а я  
1  
В о с т о ч н о - К а з а х с т а н с к а я  
1  
А к т ю б и н с к а я  
2  
З а п а д н о - К а з а х с т а н с к а я  
2  
П а в л о д а р с к а я  
2  
Ж а м б ы л с к а я  
5  
Ю ж н о - К а з а х с т а н с к а я  
5  
А л м а т и н с к а я  
3  
К ы з ы л о р д и н с к а я  
3  
А т ы р а у с к а я  
4  
М а н г и с т а у с к а я  
4  
г .   А с т а н а  
4  
г .   А л м а т ы  
4  
 
Как видно из таблицы 6, новый кластер об-
разован внутри кластера №2 (выделились Жам-
былская  и  Южно-Казахстанская  области).  При
этом  ни  один  из  других  регионов  не  перемес-
тился в "чужой" кластер, то есть старые границы
были  сохранены.  Это  подтверждает  коррект-
ность проведенного анализа.  Еще одним спосо-
бом  оценка  достоверности  анализа  является
проверка  на  нормальность  распределения,  од-
нако  в  данном  случае  она  бессмысленна  ввиду
малого количества объектов в каждом кластере.
Итак,  в  данном  случае  можно  сделать  вы-
вод,  что  кластеризация  данных  объектов  воз-
можна (часто бывают и обратные случаи, тогда
речь идет об обычной группировке, а не о клас-
терах), и наиболее достоверное число кластеров
- 4. Результаты кластеризации показаны  на ри-
сунке  5.

2 (17) • 2010
4 7
Рис. 5 Выявленные кластеры регионов Казахстана
по уровню жизни населения (отсутствие заливки -
первый кластер, тёмная заливка - второй кластер,
продольная штриховка - третий кластер,
точечная закраска - четвертый кластер)
Проведем  анализ  полученных  результатов.
Средние  значения  по  каждому  кластеру  пред-
ставлены в таблице  7.
Таблица 7
Средние значения показателей уровня жизни по
выделенным кластерам в 2008 году
К л а с т е р ы  
П р о д о л ж и
т е л ь н о с т ь  
ж и з н и ,  
л е т  
С р е д н е д у ш е
в ы е  
м е с я ч н ы е  
д е н е ж н ы е  
д о х о д ы  
н а с е л е н и я ,  
т е н г е  
С о о т н о ш е н и е  
д о х о д а ,  
н а п р а в л е н н о г о  
н а   п о т р е б л е -
н и е ,   и   п р о ж и -
т о ч н о г о   м и н и -
м у м а ,   р а з  
У р о в е н ь  
б е д н о с т и ,  
%  
С о в о к у п н а я  
д о л я   о х в а т а  
о б р а з о в а н и е
м   н а с е л е н и я  
в   в о з р а с т е  
о т   6   д о   2 4  
л е т ,   %  
П е р в ы й  
6 5 , 3  
2 7   3 6 6  
1 , 8 5  
8 , 4  
6 9 , 2  
В т о р о й  
6 7 , 5  
2 4   0 7 2  
1 , 5 6  
1 1 , 0  
7 3 , 6  
Т р е т и й  
6 7 , 5  
2 2   9 0 5  
1 , 3 1  
2 1 , 3  
6 3 , 9  
Ч е т в е р т ы й  
7 0 , 1  
5 9   8 1 2  
1 , 7 8  
1 4 , 1  
9 1 , 1  
 
Первый  кластер (регионы, расположенные,
главным образом, на севере страны) выделяется
наиболее  низкой  продолжительностью  жизни,
сравнительно  низким  уровнем  доли  охвата  на-
селения  образованием,  но  при  этом  самыми
низкими  показателями  уровня  бедности.
Второй  кластер  (регионы  юга  и  северо-за-
пада  страны)  характеризуется  показателями,
близкими к средним значениям по республике.
Третий кластер (Кызыл-Ординская и Алма-
тинская  области)  отличается  наиболее  высоки-
ми показателями бедности и наименьшим уров-
нем  охвата  образованием.
Наиболее благополучным выглядит четвер-
тый  кластер,  в  который  входят  промышленные
регионы, а также города республиканского зна-
чения.  В  этом  кластере  самые  высокие  показа-
тели продолжительности жизни, образования и
дохода.
Для  оценки  корректности  выводов  необхо-
димо  провести  дисперсионный  анализ.  Расчет
дисперсии  представлен  в  таблице  8.
Таблица 8
Межгрупповая и внутригрупповая дисперсия по
выделенным показателям кластеризации
П о к а з а т е л и  
М е ж г р у п п о в а я   д и с п е р с и я  
В н у т р и г р у п п о в а я  
д и с п е р с и я  
П р о д о л ж и т е л ь н о с т ь  
ж и з н и  
1 2 , 4 3  
0 , 0 1  
С р е д н е д у ш е в о й   д о х о д  
4 , 6 9  
0 , 0 5  
У р о в е н ь   б е д н о с т и  
2 , 3 9  
0 , 4 6  
У р о в е н ь  
о х в а т а  
о б р а з о в а н и е м  
8 , 1 7  
0 , 0 5  
 
По  трем из четырем показателей наблюда-
ются  очень  низкие  значения  внутригрупповой
дисперсии.  Это  означает,  что  сделанные  выше
выводы  справедливы для каждого объекта в  со-
ответствующем  кластере.  Более  высокий  пока-
затель  по  уровню  бедности  связан  с  четвертым
кластером.  В  этом  кластере  есть  как  город  с
очень низким значением  бедности (Астана), так
и регионы с высокими значениями (Атырауская
и  Мангистауская  области).  Существенное  пре-
вышение  значений  межгрупповой  дисперсии
надо  значениями  внутригрупповой  также  сви-
детельствует об обособленности кластеров и кор-
ректном  их  выделении.  Рисунок  6  демонстри-
рует  существенную  дифференциацию  населе-
ния Казахстана  по уровню  жизни  населения.
 
Two-Way Joining Results
 > 1,4 
 < 1,4 
 < 1,2 
 < 1 
 < 0,8 
 < 0,6 
 < 0,4 
 < 0,2 
Результатом  данного  исследования  стала
группировка  регионов  Казахстана  по  уровню
жизни населения. Выявлено, что регионы делят-
ся  на  4  ярко  выраженных  кластера,  каждый  из
которых имеет свою специфику. Целесообразно
учитывать  подобную  типологизацию  при  про-
ведении  социальной  политики.  Этот  пример
демонстрирует  возможности,  открываемые  со-
временными  методами  кластерного  анализа.
Следует  отметить,  что  многообразие  методов
открывает  настоящий  простор  для  исследова-
телей,  при  чем  эти  исследования  имеют  суще-
ственное  практическое  значение.
Литература:
1.Демографический ежегодник Казахстана.
Статистический  сборник / Под ред. А. Мешим-
баевой.  -  Астана:  Агентство  Республики  Казах-
стан по статистике, 2009 - 637  с.

ВЕСТНИК КЭУ: ЭКОНОМИКА, ФИЛОСОФИЯ, ПЕДАГОГИКА, ЮРИСПРУДЕНЦИЯ
4 8
2.Елисеева И.И. Социальная статистика. - 3-
е изд., перераб. и доп. - М.: Финансы и статисти-
ка, 2001. - 480 с.
3.Мандель  И.Д.  Кластерный  анализ.  -  М.:
Финансы  и статистика,  1988.  - 176  с.
4.Орлов  А.И.  Нечисловая  статистика.  -  М.:
МЗ-Пресс, 2004. -  513 с.
5.Уровень  жизни  населения  в  Казахстане.
Статистический сборник / Под ред. А.  Смаило-
ва.  -  Астана:  Агентство  Республики  Казахстан
по статистике,  2009. -  172 с.
6.Arabie  P.,  Hubert L. J.,   Soete G.  Clustering
and  classification.  -  Singapore:  World  Scientific,
1996.  -  490  p.
7.Human  Development  Indices:  A  statistical
update  2008.  -  New  York:  United  Nations
Development  Programme,  2008.  -  56  p.
8.Jobson  J.  D.  Applied  Multivariate  Data
Analysis:  Categorical  and  Multivariate  Methods.
-  New  York:  Springer, 1992.  -  731  p.
9.Punj  G.,  Stewart  D.W.  Cluster  analysis  in
marketing  research:  review  and  suggestions  for
application  //  Journal  of  Marketing  Research.  -
1983. - № 20. -  C. 134-148.
10.
Romesburg  С.  Cluster  Analysis  for
Researchers.  -  Morrisville,  North  Carolina:
Lulu.com,  2004.  -  344  p.
Очевидно, что неуклонное падение качества
школьной  подготовки  во  многом  обусловлено
неэффективной  системой  заработной  платы
учителей,  требующей  срочного  изменения  су-
ществующей системы оплаты труда учителей об-
щеобразовательных  школ.  Для  этого  полезно,
на  наш  взгляд,  рассмотреть  международный
опыт  с  целью  изучения  извлеченных  уроков  и
положительного  опыта  для  апробации  и  при-
менения  в  Кыргызстане.
Система "оплаты за результаты" или за эф-
фективность  деятельности  начала  внедряться  в
Англии  в 1861 г.,  которую немедленно вознена-
видели учителя. Тем не менее, эта система при-
менялась  в  течение  30  лет.  Система  была  рас-
критикована  за  деквалификацию  учителей,  за
то,  что большее  внимание  уделяется  только  ус-
пешному  прохождению  тестов,  основанных  на
узком и скучном учебном плане. Среди англий-
ских учителей был сформирован предрассудок,
который просуществовал в течение века.
Но, тем не менее, данная система была мед-
ленно  принята  другими  странами.  Ряд  школь-
ных  округов  в  США  испытал  систему  заработ-
ной платы на основе эффективности деятельно-
сти учителей (или "оплата за заслуги") в начале
20-го  века,  но  применение  данных  систем  не
продлилось долго, и большинство из них исчез-
ло к 1930 г. Когда в 1957 г. в России был запущен
спутник, свидетельствующий о торжестве совет-
ской  системы  образования,  американцы  обви-
нили  своих  учителей  за  неэффективную  систе-
му  образования  и вернулись  к оплате  за  заслу-
ги,  чтобы  создать  в  школе  подобие  атмосферы
бизнеса. Эта система снова исчезла из-за сопро-
тивления  учителей.  Но  идея  снова  вернулась  в
УДК  37.014.543.5
"СОВЕРШЕНСТВОВАНИЕ СИСТЕМЫ МОТИВАЦИИ УЧИТЕЛЕЙ
ОБЩЕОБРАЗОВАТЕЛЬНЫХ ШКОЛ В КЫРГЫЗСКОЙ РЕСПУБЛИКЕ"
ИМАНАЛИЕВА  Ж.Т.,  к.э.н.
Кыргызский экономический университ, Кыргызстан
1980-х  годах  в  связи с  новой  всеобщей паникой
в стране по поводу стандартов образования, хотя
на  этот раз упор больше делался на  предостав-
ление  дополнительной  платы  за  дополнитель-
ную работу или хорошую посещаемость, и мень-
ше  внимания  уделялось  оценке  качества  рабо-
ты  учителя.  Большинство  схем  применялось  в
течение короткого времени. Тем не менее, идея
никуда не исчезла. К настоящему моменту были
приняты законодательные акты в 30 штатах, тре-
бующие  какой-либо  формы  платы  за  заслуги
для учителей, хотя не многие из них действуют
в настоящее время.
В  настоящее  время  существует  4  альтерна-
тивные системы компенсации для учителей, ко-
торые используются или обсуждаются в США:
• Оплата  за  заслуги:  отдельные  учителя
получают бонусные выплаты на основе повыше-
ния  эффективности своей  деятельности.
• Оплата  за  знания  и  навыки:  учителя  по-
лучают  постоянные  доплаты  за  приобретение
новых навыков и их применение.
• Оплата  за  эффективность  деятельности
(ОЭД):  учителя получают  доплаты,  связанные с
повышением  успеваемости  учащихся,  измеря-
емой  посредством  стандартизированных  тестов
или  других  критериев.
• Оплата  за  эффективность  деятельности
школы: весь профессиональный коллектив шко-
лы  получает бонусную выплату, если учащиеся
достигают  определенных  целей.
В Австралии в штате Виктория эксперимен-
тально внедрили, а затем отменили три различ-
ные системы на основе эффективности деятель-
ности  (в  1970-х,  1980-х  и  1990-х).  Последняя  си-
стема была отменена в 1999 г. в связи с жалоба-

2 (17) • 2010
4 9
ми  на чрезмерную  бюрократию,  недофинанси-
рование и несправедливую, субъективную оцен-
ку  эффективности  деятельности  учителей.  Не-
сколько лет назад федеральный Министр обра-
зования  Австралии  предложил  систему  платы
за  заслуги  на  основе  комбинации    взаимного
оценивания  (учителями,  родителями  и  учащи-
мися) и измерения улучшений учащихся, а так-
же  пригрозил  приостановить  финансирование
штатов, если ими не  будет применяться подоб-
ная  система.  В  штате  Виктория  вновь  рассмат-
ривается  возможность  проведения  нового  экс-
перимента  по  оплате  труда  за  эффективность
деятельности  (ОЭД).
Когда  система  ОЭД  внедрялась  в  конце
1990-х  в  Новой  Зеландии,  были  учтены  некото-
рые ошибки других стран. Полученные уроки и
ошибки  были  тщательно  обсуждены  с  профсо-
юзами  учителей, чтобы  учителя понимали,  что
стандарты  оценивания  соответствующим  обра-
зом описывают их работу.
В Израиле и Новой Зеландии внимание фо-
кусировалось  на  эффективности  деятельности
школ.  В  Израиле  школы  ранжируются  по  эф-
фективности  деятельности  (результаты  экзаме-
нов  и  число  учащихся, бросивших  учебу),  а  за-
тем премируются в соответствии с положением,
соревнуясь  за  фиксированную  сумму.  Призы
затем  используются  для  выплаты  бонусов  учи-
телям  в  успешных  школах.
В 1980-х годах в Китае была внедрена схема
платы  на  основе  эффективности  деятельности
для  учителей  старшей  школы,  которая  являет-
ся  противоположностью  схем,  примененных  в
Новой  Зеландии  и  Израиле.  Учителя  оценива-
ются  индивидуально,  исходя  из  их  преподава-
тельских способностей. Затем школы ранжиру-
ются  в  соответствии  с  качеством  работы  учите-
лей, а школы, занявшие верхние позиции полу-
чают больший бюджет. Выделяются четыре  ка-
тегории  учителей:  от  учителя  "3-го  класса"  до
"высшей категории". В результате выплачивают-
ся  значительные  доплаты,  и  учитель  "высшей
категории"  получает  на  80%  больше,  чем  учи-
тель "3-го класса" с таким же опытом.
В  Латинской  Америке  используются  как
индивидуальные  модели,  так  и  школьные.  В
рамках  мексиканской  преподавательской  про-
граммы  "Каррера"  отдельные  учителя  получа-
ют премии, которые варьируются от 24% до 200%
базовой зарплаты. Оценивание основывается на
эффективности  работы  в  классе,  взаимном  на-
блюдении  и  результатах  учащихся  по  тестам.
Например,  в  Чили  функционирует  школьная
схема, в рамках которой учителя получают вре-
менные премии,  если школа добивается успеха
в  соревновании  на  основе  результатов  нацио-
нального  экзамена  учащихся  (проводимого
каждые  два года) .
Свидетельств применения ОЭД  в африкан-
ских  странах  немного.  В  Бенине  в  1999  г.  была
внедрена  схема  оплаты  за  заслуги,  но  в  2003  г.
учителя  начали  забастовку  и  добились  возвра-
щения к старой системе. В Кении оценка схемы
платы за заслуги показала, что она не повлияла
на  уровень  учащихся, бросающих  школу, посе-
щаемость учителей и педагогику. Учебный план
стал ограничиваться сессиями интенсивной под-
готовки перед процедурами оценивания учите-
лей .
В 2000  году правительство Великобритании
вернулось  к  идее  вознаграждения  учителей  за
высокий  уровень  эффективности  деятельности.
За  последнее  десятилетие  школьная  система
стала крайне централизованной, и поэтому при-
менялись механизмы, необходимые для внедре-
ния одной из самых обширных и быстро реали-
зованных  схем  современного  мира.
Применение  системы  оплаты  в  различных
странах мира за  эффективность труда позволя-
ет выделить следующие преимущества этой си-
стемы:
• Стимулирует  учителей  работать  более
интенсивно  и  прилагать  больше  усилий  к  под-
готовке к урокам, потому что это может привес-
ти  к  выгодным  результатам;
• Стимулирует  способных  высококвалифи-
цированных  учителей  оставаться  в  преподава-
тельской профессии, а не переходить в управле-
ние или уходить из образования;
• Повышает достижения учащихся, так как
учителя поощряют работу учеников и достиже-
ние  высоких  результатов;
• Поощряет большую отчетность, давая ме-
неджерам больше  гибкости; и
• Меняет  культуру школы,  фокусируя вни-
мание  на  общих, а  не  индивидуальных  целях.
Некоторые  считают,  что  ОЭД  ослабляет
власть  профсоюзов,  отходя от  заключения  кол-
лективных контрактов; и экономит средства, за-
медляя  автоматическое повышение  заработной
платы.
Большинство  исследований  ОЭД  для  учи-
телей было проведено в школьных округах США,
где применение ОЭД  было  начато и затем пре-
кращено.  Было  обнаружено,  что  учителя,  в  об-
щем,  положительно  реагируют  на  финансовые
поощрения,  но  когда  практика  финансового
поощрения  была утверждена, те аспекты, кото-
рые ранее воспринимались в качестве нормаль-
ной  составляющей  работы,  приобрели  денеж-
ную  ценность.  Учителя  начали  требовать  плату
за внеклассные мероприятия, которые ранее они
проводили  бесплатно,  запрашивали  плату  за
участие в родительских  собраниях и т.д.
Подобные  исследования  в  США  показали,
что ОЭД может быть эффективной для улучше-
ния  процесса  найма;  тем  не  менее,  деньги  не
являются  основным  фактором,  влияющим  на
выбор преподавательской профессии (более ва-
жен  длинный  отпуск).  Большая  корреляция
была  обнаружена  между  привлекательной  за-
работной  платой  и  закреплением  учителей  на
рабочих  местах.  В  школьных  округах  с  лучшей
заработной  платой  наблюдалась  самая  низкая
текучесть  кадров.
Таким  образом,  учитывая  в  большинстве
случаев положительный опыт применения ОЭД

ВЕСТНИК КЭУ: ЭКОНОМИКА, ФИЛОСОФИЯ, ПЕДАГОГИКА, ЮРИСПРУДЕНЦИЯ
5 0
в  развитых  и  развивающих  странах,  в  Кыргыз-
стане начиная с 2006 г. в Таласской и Иссыккуль-
ской  областях  также  была  применена    данная
система  оплаты  поощрений  учителей  и  адми-
нистраторов  школ  за  эффективность  деятель-
ности  в  рамках  пилотного  проекта  Всемирного
Банка  "Сельское  образование".
В  резуль-
тате  деятельности  проекта  была  разработана
новая система  управления эффективностью  де-
ятельности школ, которая включала в себя стан-
дарты  оценивания  эффективности  деятельнос-
ти  на основе  нового   компетентностного  подхо-
да;  систему  оценивания  эффективности  дея-
тельности, включая внутреннюю верификацию/
оценивание, проводимое в школах, и внешнюю
верификацию/  оценивание,  проводимое  вне-
шними  оценщиками  и  районными  отделами
образования (районо); а также  новую схему по-
ощрений  для увеличения  основной  заработной
платы  и  вознаграждение  наилучших  учителей
и администраторов школ  за эффективность  де-
ятельности  в преподавании и  управлении шко-
лой.
Система  управления  эффективностью  дея-
тельности,  предлагаемая  в  Кыргызской  Респуб-
лике,  включает  в  себя  3  компонента:  годовой
цикл управления эффективностью, оценивание
эффективности и поощрения для всей школы
Система  управления  эффективностью  дея-
тельности может быть  изображена следующим
образом (см. график  1):

Достарыңызбен бөлісу:
1   ...   6   7   8   9   10   11   12   13   ...   25




©emirsaba.org 2024
әкімшілігінің қараңыз

    Басты бет