microsoft / botbuilder-tools

Welcome to the Bot Framework Tools repository, which is the home for a set of tools for developers building bots with the Microsoft Bot Framework
https://github.com/Microsoft/botframework
MIT License
444 stars 262 forks source link

QnA Maker return wrong answer for exact questions #1532

Closed hebaelfadly closed 3 years ago

hebaelfadly commented 3 years ago

Information:

Issue Description:

I am trying to upload a QnA pairs excel file to through https://www.qnamaker.ai/ The file is uploaded normally, but when I try to test it through the test panel same questions are answered normally, some return wrong answer, and the others returns No good match found in KB.

For example:

  1. Question: "أنا أعمل في أبوظبي والخطيبة من دبي فكيف العمل؟" Expected Answer: "يرجى الدخول على الموقع الالكتروني لموؤسسة الامارات للخدمات الصحية https://www.ehs.gov.ae/ar/Pages/default.aspx" Actual Answer: "في حالة التحويل من هيئة الصحة في دبي أو أبوظبي يجب أن يكون الترخيص ساري المفعول، وإذا لم يُجدد أو تم إلغائه يجب ألا يتجاوز فترة 6 شهور، وفي حالة تجاوز 6 شهور بيوم واحد لا يتم التحويل ويخضع المتقدم للامتحانات المقررة" which is the answer of a completely different question.

  2. Question: "كم عدد الزيارات التي يجب القيام بها لعلاج عصب الأسنان؟" Expected Answer: "يرجى الدخول على الموقع الالكتروني لموؤسسة الامارات للخدمات الصحية https://www.ehs.gov.ae/ar/Pages/default.aspx" Actual Answer: No good match found in KB.

Reproduction Steps:

  1. Upload file.
  2. Open Test Panel.
  3. Write a question from the uploaded file.

Expected Behavior:

Return the question answer from the file.

Actual Results:

Return an answer of a completely different question.

lauren-mills commented 3 years ago

Hi @hebaelfadly, this team and repo do not support the QnA Maker product, so we cannot help explain this behavior.

Here is a link for the QnA Maker team's feedback portal and their StackOverflow tag. Hopefully this helps!