عدم تشخیص ای ندا در نرمال سازی

roshan-research / hazm

Persian NLP Toolkit

https://www.roshan-ai.ir/hazm/

MIT License

1.19k stars 180 forks source link

عدم تشخیص ای ندا در نرمال سازی #337

Open r3dparr0t opened 3 months ago

r3dparr0t commented 3 months ago

عبارتی همانند ترسم که به کعبه نرسی ای اعرابی یا امثال آن را به کعبه‌ای تبدیل می‌کنند. حقیقتا اگر دستور زبان بهتر بلد بودم خودم حلش میکردم ولی راه حلی نیافتم.

imani commented 3 months ago

تشخیص این طور موارد با استفاده از قواعد زبانی بسیار مشکل هست. راه حلش این هست که با استفاده از علائم نگارشی به تشخیص الگوریتم کمک کنیم مثل ویرگول در: 'ترسم نرسی به کعبه، ای اعرابی'

r3dparr0t commented 3 months ago

پس شما هم راه حل دیگه ای پیدا نکردید. چون کاربر متاسفانه متوجه نیست. و باید خودم یک راه حلی پیدا کنم. ممنون جواب دادید. کلا راهی برای تشخیص تفاوت این دو ای با توجه به قواعد زبان فارسی وجود داره؟

imani commented 3 months ago

با توجه به قواعد زبان فارسی سخت هست. به نظرم راه حلش دادن هر دو حالتش به یک مدل زبانی برای تشخیص نوع درست هست.