roshan-research / hazm

Persian NLP Toolkit
https://www.roshan-ai.ir/hazm/
MIT License
1.19k stars 180 forks source link

عدم حذف \u200c #315

Closed Alipira closed 4 months ago

Alipira commented 8 months ago

هنگام استفاده از normalize در خروجی تغییری ایجاد نمی شود norm = Normalizer() norm.normalize("میاندوآب- خ شهدا- روبروی آتش نشانی")

Output: 'میاندوآب- خ شهدا- روبروی آتش\u200cنشانی'

mohsenoon commented 6 months ago

See the #30