
2 103 ko‘rishlar
Matnlarni aniqlashning yangilangan algoritmi
O‘xshashlikni aniqlash algoritmining yangi versiyasini taqdim etamiz. Yangilanish natijaning to‘liqligi va aniqligini bir vaqtning o‘zida yaxshiladi.
Yangi algoritm matnni kichikroq bo‘laklarga ajratib solishtiradi. Bu esa qayta yozilgan yoki so‘zlari almashtirilgan fragmentlarni ham topish imkonini beradi.
Har bir topilgan o‘xshashlik uchun tizim manbaga aniq havola beradi. Foydalanuvchi o‘xshashlik qayerdan kelganini ko‘rishi va uni tekshirishi mumkin.
“Har bir o‘xshashlik ortida uni tekshirib bo‘ladigan manba turishi kerak.”
Fragmentlarning hujjat ichidagi joylashuvi aniqlashtirildi: tizim endi matnning aynan qaysi bo‘limlarini belgilashni aniqroq hisoblaydi.
Algoritm o‘zbek tilidagi morfologik xususiyatlarni hisobga oladi. So‘z shakllarining o‘zgarishi endi o‘xshashlikni yashirishga imkon bermaydi.