Eshitishida nuqsoni bor inson uchun auditoriyadagi oddiy suhbat ham to‘siqqa aylanishi mumkin: o‘qituvchi imo-ishora tilini bilmaydi, tarjimon esa har doim ham yonida bo‘lmaydi. So‘nggi yillarda sun’iy intellekt bu bo‘shliqni to‘ldirishga harakat qilmoqda — kamera orqali imo-ishoralarni tanib, ularni matn va jonli nutqqa aylantiradigan tizimlar paydo bo‘lmoqda.
Texnologiya qanday ishlaydi?
Bunday tizim odatda bir necha bosqichdan iborat:
- Kompyuter ko‘rish: kamera tasviridan qo‘l, barmoqlar, yuz ifodasi va tana holatining tayanch nuqtalari (keypoints) ajratib olinadi;
- Ketma-ketlikni tahlil qilish: imo-ishora bitta kadr emas, balki harakat bo‘lgani uchun neyron tarmoq (masalan, LSTM yoki Transformer) harakatlar ketma-ketligini o‘rganadi;
- Matnga o‘girish: tanilgan ishoralar so‘z va gaplarga aylantiriladi;
- Nutq sintezi (TTS): hosil bo‘lgan matn ovozli nutq sifatida eshittiriladi.
Asosiy qiyinchiliklar
Imo-ishora tili og‘zaki tilning “qo‘l bilan ko‘rsatilgan” shakli emas, balki o‘z grammatikasiga ega mustaqil tildir. Unda yuz ifodasi, harakat tezligi va yo‘nalishi ham ma’no tashiydi. Modelni o‘qitish uchun esa katta hajmdagi, sifatli belgilangan video ma’lumotlar kerak. Mamlakatimizda qo‘llaniladigan imo-ishora tili bo‘yicha bunday ochiq ma’lumotlar to‘plamlari hozircha juda kam. Yorug‘lik, fon, kamera burchagi va har bir insonning o‘ziga xos ishora uslubi ham aniqlikka ta’sir qiladi.
Ta’limdagi ahamiyati
Agar bunday tizim auditoriyada ishlasa, eshitishida nuqsoni bor talaba o‘qituvchi va kursdoshlariga savol berishi, muhokamada qatnashishi ancha osonlashadi. Teskari yo‘nalishda esa nutqni matnga aylantiruvchi (speech-to-text) texnologiyalar o‘qituvchining gaplarini ekranda subtitr sifatida ko‘rsatishi mumkin. Ikki texnologiya birgalikda haqiqiy inklyuziv muhit yaratishga xizmat qiladi.
Talabalar uchun tadqiqot maydoni
Bu yo‘nalish informatika va sun’iy intellekt yo‘nalishidagi talabalar uchun ham ajoyib amaliy loyiha: ma’lumotlar to‘plamini yig‘ish va belgilash, kompyuter ko‘rish modellarini o‘qitish, natijani real sharoitda sinash — bularning barchasi zamonaviy mutaxassis uchun zarur ko‘nikmalardir. Eng muhimi, bunday loyihalar imo-ishora tilidan foydalanuvchi insonlarning o‘zlari bilan hamkorlikda olib borilishi kerak.
Sun’iy intellekt tarjimonning o‘rnini to‘liq bosa olmaydi, ammo kundalik muloqotdagi to‘siqlarni kamaytirishda kuchli yordamchi bo‘la oladi.