search

Sivan22 / otzaria-library

the library for otzaria app, with the scripts that created it
3 stars 3 forks source link

ספרי ויקיטקסט ואוצר הספרים היהודי השיתופי #4

Open zevisvei opened 2 months ago

zevisvei commented 2 months ago

ניתן להוריד ספר מויקיטקסט על ידי הכלי הזה: https://ws-export.wmcloud.org/ קוד המקור של הכלי: https://github.com/wikimedia/ws-export צריך יהיה לכתוב סקריפט שיתאים את הספרים המיוצאים דרך הכלי בבחירת האפשרויות הבאות: html ,ללא תמונות וללא קרדיט לפורמט שיתאים לאוצריא. צריך גם להתאים את הכלי כך שיוריד את כל ויקיטקסט בב"א. יתכן שיש לספריא כלי טוב יותר, חיפשתי במאגר של ספריא ולא מצאתי. יתכן שיש לספריא את כל הספרים מויקיטקסט, צריך לבדוק. ניתן על ידי כלי זה להוריד ספר שלם, ולא רק עמוד בודד, לדוג': כסף_משנה יתכן שניתן יהיה להתאים את הכלי גם לאוצר הספרים היהודי השיתופי על ידי שינוי ה url וה api אגב יש את תוכנת סטנדר שמורידה מאוצר הספרים היהודי השיתופי, אולי ניתן להיעזר בה.

Y-PLONI commented 2 months ago

שלום @Sivan22 אנו זקוקים לעזרתך. הכלי הנ"ל מסובך להתקנה ולהפעלה והוא מיצה את רמת הידע הטכני שיש לי... אצטרך את עזרתך בהורדת המאגרים [כוונתי לוויקיטקסט וכן לאוצר הספרים היהודי השיתופי], אנו יכולים לבנות אינדקס בצורה ידנית, אך את ההורדה עצמה אנו לא יכולים לעשות! יש לציין, כי בוויקי טקסט ספציפית, לאחר בניית האינדקס אנחנו בעצם לא זקוקים לקינפוג הכלי, כיון שניתן לשלוח בקשות HTTP עם הURL, לדוג': כסף משנה html ללא קרדיטים, ללא היסטוריית עריכת טקסט וללא תמונות, הURL נראה כך: https://ws-export.wmcloud.org/?lang=he&page=%D7%9B%D7%A1%D7%A3_%D7%9E%D7%A9%D7%A0%D7%94&format=htmlz&fonts=&credits=false&images=false אך כיון שמסתבר שהספרים כולם נמצאים באוצר הספרים השיתופי [גם בהנחה שאינם בספריא], א"כ אנו רוצים לעבוד על מאגר זה [לשימוש אישי, ולפי הכללים]. אך לצורך זה אנו זקוקים לעזרתך. תודה רבה!

Danthig commented 2 months ago

עד כמה שידוע לי אוצר הספרים היהודי השיתופי שומר לעצמו זכויות על הטקטסים, כך שצריך לבקש מהם! "התוכן זמין לשימוש אישי (לא ציבורי ולא מסחרי) אלא אם נאמר אחרת." (עיין למטה בדף הבית).

Y-PLONI commented 2 months ago

נכון. אני רוצה הדרכה להורדה לשימוש אישי. מותר לבקש, נכון?

Danthig commented 2 months ago

לדעתי כדאי ליצור איתם קשר, יש סיכוי שהם יתנו את כל מסד הנתונים, כמו שהם נתנו בשעתו לסטנדר ז"ל.

NHLOCAL commented 2 months ago

בזמנו סטנדר קיבלו את זה עם הגבלות בלתי נסבלות שכבר לא שוות את זה

Y-PLONI commented 2 months ago

לא נכון. הסיבה שהתוכנה שלהם רעה, היא בגלל סיבה אחרת, אשתף אותך במייל שלהם. הם מוכנים לתת בתנאי ש @Sivan22 יאפשר בתוכנה לערוך. לדעתי זה יעזור לנו [גם אם זה ניצול מחפיר שלהם] לספרי דיקטה, אך סיון לא עונה בצורה ברורה, וחבל.

Danthig commented 2 months ago

יאפשר בתוכנה לערוך

גם כעת ניתן לערוך, פשוט לפתוח את הקובץ בפנקס רשימות או כל קורא טקסט אחר... אם הוא רוצה שבתוך התוכנה תהיה אפשרות עריכה, לדעתי זה כבר סיפור אחר. שלכאורה דורש גם הרבה עבודה בקוד. אני לא חושב שזה יצדיק את עצמו, למה לא לפנות ישירות לאוצר הספרים?

Y-PLONI commented 2 months ago

יש מאגרי גיט שעושים חלק נכבד מהעבודה, למשל: https://github.com/Yiddishe-Kop/jewishbooks-wiki https://github.com/fastily/jwiki לא חפרתי, וזה מה שעלה... בטח יש הרבה, אך אני לא יודע אם זה מתאים לקוד של סיון.

Sivan22 commented 2 months ago

לא יודע אם שמת לב, הגיט הראשון זה לא פחות ולא יותר אלא סטנדר... בכל אופן זה כתוב בג'אווה סקריפט ואוצריא כתובה בדארט, זה לא הולך כל כך ביחד.

בתאריך יום ג׳, 7 במאי 2024, 0:09, מאת Y-PLONI @.***>:

יש מאגרי גיט שעושים חלק נכבד מהעבודה, למשל: https://github.com/Yiddishe-Kop/jewishbooks-wiki https://github.com/fastily/jwiki לא חפרתי, וזה מה שעלה... בטח יש הרבה, אך אני לא יודע אם זה מתאים לקוד של סיון.

— Reply to this email directly, view it on GitHub https://github.com/Sivan22/otzaria-library/issues/4#issuecomment-2096922896, or unsubscribe https://github.com/notifications/unsubscribe-auth/AVHE7PPT5FTPXZ6DGTFM75DZA7WQ7AVCNFSM6AAAAABG4ONFL6VHI2DSMVQWIX3LMV43OSLTON2WKQ3PNVWWK3TUHMZDAOJWHEZDEOBZGY . You are receiving this because you were mentioned.Message ID: @.***>

Y-PLONI commented 2 months ago

כן, שמתי לב. זה המפתח של סטנדר, לא הבעלים. אגב, ניסיתי לשלוח לו מייל, הוא לא ענה לי.

בתאריך יום ג׳, 7 במאי 2024, 0:22, מאת Sivan22 @.***>:

לא יודע אם שמת לב, הגיט הראשון זה לא פחות ולא יותר אלא סטנדר... בכל אופן זה כתוב בג'אווה סקריפט ואוצריא כתובה בדארט, זה לא הולך כל כך ביחד.

בתאריך יום ג׳, 7 במאי 2024, 0:09, מאת Y-PLONI @.***>:

יש מאגרי גיט שעושים חלק נכבד מהעבודה, למשל: https://github.com/Yiddishe-Kop/jewishbooks-wiki https://github.com/fastily/jwiki לא חפרתי, וזה מה שעלה... בטח יש הרבה, אך אני לא יודע אם זה מתאים לקוד של סיון.

— Reply to this email directly, view it on GitHub < https://github.com/Sivan22/otzaria-library/issues/4#issuecomment-2096922896>,

or unsubscribe < https://github.com/notifications/unsubscribe-auth/AVHE7PPT5FTPXZ6DGTFM75DZA7WQ7AVCNFSM6AAAAABG4ONFL6VHI2DSMVQWIX3LMV43OSLTON2WKQ3PNVWWK3TUHMZDAOJWHEZDEOBZGY>

. You are receiving this because you were mentioned.Message ID: @.***>

— Reply to this email directly, view it on GitHub https://github.com/Sivan22/otzaria-library/issues/4#issuecomment-2096946074, or unsubscribe https://github.com/notifications/unsubscribe-auth/A3Z3BBFFTNDDD3ZPOKSX6BDZA7YBRAVCNFSM6AAAAABG4ONFL6VHI2DSMVQWIX3LMV43OSLTON2WKQ3PNVWWK3TUHMZDAOJWHE2DMMBXGQ . You are receiving this because you commented.Message ID: @.***>

Sivan22 commented 2 months ago

גם אני ניסיתי.

בתאריך יום ג׳, 7 במאי 2024, 0:24, מאת Y-PLONI @.***>:

כן, שמתי לב. זה המפתח של סטנדר, לא הבעלים. אגב, ניסיתי לשלוח לו מייל, הוא לא ענה לי.

בתאריך יום ג׳, 7 במאי 2024, 0:22, מאת Sivan22 @.***>:

לא יודע אם שמת לב, הגיט הראשון זה לא פחות ולא יותר אלא סטנדר... בכל אופן זה כתוב בג'אווה סקריפט ואוצריא כתובה בדארט, זה לא הולך כל כך ביחד.

בתאריך יום ג׳, 7 במאי 2024, 0:09, מאת Y-PLONI @.***>:

יש מאגרי גיט שעושים חלק נכבד מהעבודה, למשל: https://github.com/Yiddishe-Kop/jewishbooks-wiki https://github.com/fastily/jwiki לא חפרתי, וזה מה שעלה... בטח יש הרבה, אך אני לא יודע אם זה מתאים לקוד של סיון.

— Reply to this email directly, view it on GitHub <

https://github.com/Sivan22/otzaria-library/issues/4#issuecomment-2096922896>,

or unsubscribe <

https://github.com/notifications/unsubscribe-auth/AVHE7PPT5FTPXZ6DGTFM75DZA7WQ7AVCNFSM6AAAAABG4ONFL6VHI2DSMVQWIX3LMV43OSLTON2WKQ3PNVWWK3TUHMZDAOJWHEZDEOBZGY>

. You are receiving this because you were mentioned.Message ID: @.***>

— Reply to this email directly, view it on GitHub < https://github.com/Sivan22/otzaria-library/issues/4#issuecomment-2096946074>,

or unsubscribe < https://github.com/notifications/unsubscribe-auth/A3Z3BBFFTNDDD3ZPOKSX6BDZA7YBRAVCNFSM6AAAAABG4ONFL6VHI2DSMVQWIX3LMV43OSLTON2WKQ3PNVWWK3TUHMZDAOJWHE2DMMBXGQ>

. You are receiving this because you commented.Message ID: @.***>

— Reply to this email directly, view it on GitHub https://github.com/Sivan22/otzaria-library/issues/4#issuecomment-2096948072, or unsubscribe https://github.com/notifications/unsubscribe-auth/AVHE7POTG4HOAGFWELGTWD3ZA7YHLAVCNFSM6AAAAABG4ONFL6VHI2DSMVQWIX3LMV43OSLTON2WKQ3PNVWWK3TUHMZDAOJWHE2DQMBXGI . You are receiving this because you were mentioned.Message ID: @.***>