“Матн лингвистикаси” фани бўйича ўқув қўлланма яратилмоқда

O‘zbekekistonda matnni tekshirishda lingvostatistik metodlardan foydalanish

Rus va o‘zbek tillarining qiyosiy fonetikasi bo‘yicha dastlabki statistik tadqiqot V.M.Popovning “O‘zbek va rus tillarini qiyosiy o‘rganishda statistik metodni qo‘llash” nomli maqolasi (1949) sanaladi. Bu maqolada har ikki tildagi tovushlarning nutkdagi o‘rni, ishlatilishi, miqdori, yumshoqlik va qattiqlik xususiyatlarini aniqlash bo‘yicha olib borilgan tekshirishlarning natijalari keltirilgan.

A.Pankrateva 60-70-yillarda rus va o‘zbek tillarida so‘zlarning qo‘llanish chastotalarini M.Sholoxovnining «Tinch Don» epopeyasi misolida tahlil etgan edi. Olimaning hisob-kitoblariga qaraganda, o‘zbek tilida 187 ta rang bildiruvchi so‘z mavjud, rus tilida esa 147 ta rang ifodalovchi so‘z bor. Ana shu 147 rang bildiruvchi so‘zlardan 45 tasi, ya’ni 33,0 % i o‘zbek tilida o‘z ekvivalentiga ega emas.
Tilshunos olim B.Bafoevning Alisher Navoiy asarlari leksikasiga oid monografiyasining dastlabki bobi "Alisher Navoiy asarlari leksikasini statistik o‘rganish natijalari" deb nomlanadi. Ishning "So‘z boshi" qismida Alisher Navoiy asarlari tilini statistik jihatdan o‘rganish bo‘yicha amalga oshirilgan tadqiqotlar, e’lon qilingan lug‘atlar, "Abushqa", "Sangloh", "Badoe ul-lug‘at" singari bir qator qo‘lyozma lug‘atlardagi izohlangan so‘zlar miqdori haqida qisqacha ma’lumot berilgan. B.Bafoev Alisher Navoiy asarlari tilida forscha-tojikcha va
arabcha so‘zlar miqdori haqida aniq tasavvur hosil qilish uchun
shoirning "G‘aroyib us-sig‘ar" devoniga kiritilgan bir g‘azaldagi
100 ta so‘zni olib, ularning 55 tasi o‘zbekcha, 20 tasi arabcha, 19 tasi
forscha-tojikcha ekanligini qayd etadi hamda bu ma’lumotlarni ulug‘
shoirga yaqin zamondosh bo‘lgan Gadoiy, Atoiy, Lutfiy, Sakkokiy,
Husayniy she’riyatidan olingan xuddi shunday miqdoriy
ko‘rsatkichlar bilan qiyoslaydi va quyidagi haqqoniy xulosaga
keladi: 1) barcha ijodkorlar ijodida, arabcha, forscha-tojikcha
so‘zlar deyarli bir xil sonni tashkil qiladi; 2) Alisher Navoiy o‘z
asarlarida arabcha, forscha-tojikcha so‘zlarni, ko‘p qo‘llagandek
tuyulsa-da, bu ko‘plik uning asarlarining hajmi bilan bog‘liqdir.¹⁷⁹ Eng muhimi, bu monografiyada Alisher Navoiyning 24
ta asari qo‘lda, EHMsiz miqdoriy tahlil qilinib, ularda jami
26035 ta so‘z qo‘llangani haqidagi aniq statistik ma’lumotlar keltirilgan.
O‘zbek tilshunosligida matnning lug‘aviy tarkibini miqdoriy jihatdan o‘rganish sohasida V.V.Reshetov (1934), A.K.Borovkov (1940), F.Abdullayev (1949), M.Mirzayev (1951), I.Rasulov (1951), G.Muhammadjonova (1972), N.G‘ulomova (1975) kabi olimlar amalga oshirgan ishlar keyinchalik ayrim olimlar tomonidan tanqid qilindi. Masalan, prof.E.Bsgmatov matn leksikasini tahlil qilishning bunday miqdoriy usullarini o‘z mohiyatiga ko‘ra noilmiy, nazariy jihatdan etarli asoslanmagan bir urinish, deb hisoblaydi. Prof.E.Begmatov o‘zining bu fikrini quyidagi dalillar bilan asoslashga intiladi: 1. Matnlarda ko‘p bor takror qo‘llanuvchi so‘zlar (masalan bog‘lovchilar, atoqli otlar va b.) miqdoran qanday hisoblangani bu ishlarda noaniq. 2. O‘zlashma so‘zlar asosida o‘zbek tilida yasalgan so‘zlarning o‘z qatlamga kiritilgani yoki o‘zlashma qatlamga kiritilgani ham noma’lum. 3. Olib borilgan tahlillarda asosiy diqqat o‘zlashma qatlamning miqdoriy nisbatini aniqlash va baholashga qaratiladi, xolos.¹⁸⁰
Shulardan kelib chiqib, E.Begmatov leksikaning miqdoriy nisbatini belgilash uchun qo‘llanilgan statistik usul tilshunoslik fani manfaatlariga emas, balki ko‘proq mafkuraviy, siyosiy manfaatlarga xizmat qilib keldi, degan xulosani bayon etadi. Bu xulosada qisman jon bor, chunki totalitar tuzum davrida
liigvostatistik metod natijalari haqiqatdan ham ruscha-
baynalmilal so‘zlar mikdorining tilimizda ko‘payib
borayotganligini ta’kidlash uchun xizmat qilgan. Lekin shunga
asoslanib, lingvostatistik metodlardan foydalanishni cheklash mumkin emas.
Keyingi yillarda mamlakatimizda lingvostatistik metod yordamida bir qator leksikografik ishlar ham amalga oshirildi Jumladan, bir guruh olimlar ''Hozirgi o‘zbek tili faol so‘zlarining izohli lug‘ati" ni yaratishda leksik birliklarni to‘plash, ularni kompyuter xotirasiga kiritish, muayyan maqsad ostida ularga ishlov berishda kompyuter texnologiyalaridan unumli foydalandilar. Hozirgi o‘zbek tili materiallarining ijtimoiy-siyosiy matnlarda eng ko‘p aks etishini inobatga olib "Yoshlik", "Tafakkur", "Guliston", "Sharq yulduzi" kabi jurnallar hamda bir qator gazetalarda qo‘llangan barcha so‘zlar maxsus dastur asosida 94 ta faylda sahifalab chiqildi. Bu fayllar ichidan ajratib olingan so‘zlar 8168 sahifani tashkil etdi. Har bir sahifada 200 tadan so‘z mavjud bo‘lib, jami ishlatilgan so‘zlar (turli grammatik shakllarda) 1633600 tani tashkil etdi. Kompyuter yordamida bu so‘zlarning qo‘llanish chastotasi aniqlab chiqildi. Eng kamida 4 marta qo‘llangan lug‘aviy birlikka nisbatan faol so‘z deb qaraldi va bunday lug‘aviy birliklar lug‘atga kiritish uchun tanlab olindi. Natijada bunday faol so‘zlar tilimizda 15000 tani tashkil qilishi aniqlandi, shu asosda lug‘atning so‘zligi yaratildi hamda alifbo tartibi bilan muayyan leksemalarga izohlar yozildi.¹⁸¹
Sh.Egamova Alisher Navoiy asarlari tilidagi qadimgi turkiy leksikaning lingvostatistik tahlilini amalga oshirdi. Olib borilgan bu lingvostatistik tahlil natijasida Navoiy asarlari tilida tahminan 1400 ga yaqin qadimgi turkiy va eski turkiy tilga taalluqli so‘zlarning qo‘llanishda davom etganligi aniqlandi. Ot turkumiga oid leksemalar yuqorida keltirilgan 1400 ta leksik birlikning deyarli 25,1 % ini, ya’ni 583 tasini tashkil qiladi. Sifat kategoriyasiga oid 116 ta qadimgi turkiy leksema Navoiy asarlarida qo‘llanishda davom etgan. Qadimgi turkiy tildagi son turkumiga oid so‘zlarning 44 tasi Navoiy asarlarida ham qo‘llangan. Statistik tahlil Navoiy asarlari so‘z boyligida 33 ta olmoshlar keng qo‘llanganligidan dalolat beradi. Navoiy asarlarida qo‘llanishda davom etgan leksemalarning 557 tasi (24,0 %)ni fe’l kategoriyasiga oid so‘zlar tashkil etadi, bu fe’llarning 183 tasi tub, qolgan 374 tasi esa yasama ekanligi aniqlandi.¹⁸²
O‘zbek tili materiallari bo‘yicha statistik tadqiqotlar olib borgan yana bir olimlar S.Rizayev va S.Muhamedovlardir. Mazkur olimlar ham asosan kompyuter lingvistikasining statistik tahlil yo‘nalishi bo‘yicha ishlarni amalga oshirishgan. S.Muhamedov o‘zining R.R.Piotrovskiy bilan hammualliflikda yozgan «Инженерная лингвистика и опыт системно-статистического исследования узбекских текстов» nomli kitobida lingvistik modellar, modellashtirish va uning umumiy tamoyillari haqida fikr yuritib, o‘zbekcha matnlarning kvantitotiv modellarini keltiradi. Mualliflar, shuningdek, mazkur asarda turk gazeta matnlarining leksik-morfologik mashina tarjimasini ham berganlar (ishning oldingi sahifalarida qayd etilgan A.Babanarovning tadqiqotlariga munosabat sifatida). Mazkur asarda sun’iy intellekt yaratish va injener lingvistikasi metodlari bilan o‘zbekcha nutqni avtomatik qayta ishlash jarayonida foydalanish uchun zaururiy bo‘lgan o‘zbekcha matnlarning leksik – morfologik tuzilishining statistik tahlili natijalari keltirilgan. Albatta, bunday yirik, jiddiy ilmiy asarni yaratishda S.Muhamedov bu sohadagi o‘z izlanishlariga suyangan. Yа’ni uning «Статистический анализ лексико-морфологической структуры узбекских газетных текстов» (nomzodlik dissertatsiyasi) va «O‘zbek tilining alfavitli–chastotali lug‘ati (gazeta tekstlari asosida)» asarlari yuqoridagi asarning yozilishida manba bo‘lib xizmat qilgan.
S.Rizayev «Kibernetika va tilshunoslik» asarida tilshunoslikda aniq metodlarning qo‘llanilishi va bunda EHMni qo‘llash, til va nutq hodisalariga statistik yondashishining sabablari hamda matnlarni avtomatik qayta ishlash va mashina tarjimasi muammolari, shuningdek, harflar chastotasini aniqlashda EHMdan foydalanishga doir ma’lumotlar bergan⁵. S.Rizayevning ko‘plab boshqa ilmiy ishlari ham asosan kompyuter lingvistikasining statistik tahlil yo‘nalishiga oiddir. Shu jumladan, olimning nomzodlik dissertatsiyasi ham o‘zbek adabiy tilining grammatik va fonologik sistemasini statistik tekshirishga bag‘ishlangan. S.Rizayev 2008 -yilda “O‘zbek tilining statistik tadqiqi” mavzusidagi doktorlik dissertatsiyasini yoqladi. Doktorlik ishida fonetik, morfologik va leksik sath birliklarini statistik tadqiq qilish metodlari ko‘rsatilgan.
Demak, o‘zbek tilshunosligida ham keyingi yillarda statistik metodlardan foydalanish sohasida muayyan natijalarga erishilgan.