korpus detallariga ishlov berishning tipavoy texnologik jarayonlari

PPTX 21 стр. 274,4 КБ Бесплатная загрузка

Предварительный просмотр (5 стр.)

Прокрутите вниз 👇
1 / 21
powerpoint presentation korpus detallariga ishlov berishning tipavoy texnologik jarayonlari isaqov yahyo 1. korpus tahlili va modellashtirish texnologiyalari 2. matnni tozalash va oldindan qayta ishlash usullari 3. korpus ma'lumotlarini qayta ishlashning oddiy texnologik jarayonlari reja: korpusni segmentizatsiya qilish va morfologik tahlil lemmatizatsiya jarayoni, morfologik tahlildan so'ng, so'zlarning asosiy shakllarini (lemmalarini) aniqlashga yordam beradi, bu esa korpusni qayta ishlashning keyingi bosqichlari, masalan, mavzu tahlili yoki so'z chastotasini hisoblash uchun zarurdir. morfologik tahlil algoritmlari 90% dan ortiq aniqlik bilan so'zlarning grammatik xususiyatlarini (ot, fe'l, sifat va hokazo) aniqlaydi va ularni tegishli kategoriyalariga ajratadi. korpusni segmentizatsiya qilish jarayoni, odatda, jumlalarni (1000 tagacha) va so'zlarga (50000 tagacha) bo'lishni o'z ichiga oladi, bu esa keyinchalik morfologik tahlil uchun asos bo'lib xizmat qiladi. sintaktik tahlil va semantik tahlil sintaktik tahlil, jumlalarni tarkibiy qismlarga (2 yoki undan ortiq so'z birikmalariga) ajratib, ular orasidagi grammatik munosabatlarni aniqlash jarayonini o'z ichiga oladi. zamonaviy sintaktik va semantik tahlil usullari, jumladan, 70% …
2 / 21
tahlil qilish imkonini beradi. mashina o'rganishi algoritmlari, masalan, svm yoki lojistik regressiya, matn korpusini tahlil qilishda 90% gacha aniqlik bilan mavzulashtirish yoki his-tuyg'ularni aniqlash kabi vazifalarni bajara oladi. korpus ma'lumotlarini ko'rish va vizualizatsiya qilish korpus ma'lumotlarini vizualizatsiya qilishda 2d va 3d tarqalish diagrammalari, masalan, word clouds yordamida so'z chastotalarini 1000 ta so'zgacha aniq ko'rsatish mumkin. annotatsiya qilingan korpuslarni ko'rish uchun 5000 ta elementgacha bo'lgan interaktiv o'q-diagramma va tarmoq grafikalari samarali vosita bo'lib xizmat qiladi. korpusdagi ma'lumotlar o'rtasidagi munosabatlarni aniqlash uchun 30 ga yaqin turdagi statistik korelyatsiya va klasterlash usullari qo'llanilishi mumkin. korpus tafsilotlarini tozalash va oldindan qayta ishlash noto'g'ri yozilgan so'zlarni aniqlash va tuzatish uchun 80% aniqlikka ega bo'lgan imlo tekshirgichlari va 20% qo'lda tahrirlash usuli qo'llaniladi, bu esa korpus sifatini oshiradi. stemming va lemmatization jarayonlari so'zlarning ildiz shakllarini aniqlash uchun qo'llaniladi. bu jarayonlar korpusdagi 5000 ta eng ko'p uchraydigan so'zlarni tahlil qilishda samaradorlikni oshiradi. korpusni tozalash jarayonida, masalan, 100 …
3 / 21
korpus detallariga ishlov berishning tipavoy texnologik jarayonlari - Page 3
4 / 21
korpus detallariga ishlov berishning tipavoy texnologik jarayonlari - Page 4
5 / 21
korpus detallariga ishlov berishning tipavoy texnologik jarayonlari - Page 5

Хотите читать дальше?

Скачайте все 21 страниц бесплатно через Telegram.

Скачать полный файл

О "korpus detallariga ishlov berishning tipavoy texnologik jarayonlari"

powerpoint presentation korpus detallariga ishlov berishning tipavoy texnologik jarayonlari isaqov yahyo 1. korpus tahlili va modellashtirish texnologiyalari 2. matnni tozalash va oldindan qayta ishlash usullari 3. korpus ma'lumotlarini qayta ishlashning oddiy texnologik jarayonlari reja: korpusni segmentizatsiya qilish va morfologik tahlil lemmatizatsiya jarayoni, morfologik tahlildan so'ng, so'zlarning asosiy shakllarini (lemmalarini) aniqlashga yordam beradi, bu esa korpusni qayta ishlashning keyingi bosqichlari, masalan, mavzu tahlili yoki so'z chastotasini hisoblash uchun zarurdir. morfologik tahlil algoritmlari 90% dan ortiq aniqlik bilan so'zlarning grammatik xususiyatlarini (ot, fe'l, sifat va hokazo) aniqlaydi va ularni tegishli kategoriyalariga ajratadi. korpusni segmentizatsiya ...

Этот файл содержит 21 стр. в формате PPTX (274,4 КБ). Чтобы скачать "korpus detallariga ishlov berishning tipavoy texnologik jarayonlari", нажмите кнопку Telegram слева.

Теги: korpus detallariga ishlov beris… PPTX 21 стр. Бесплатная загрузка Telegram