הצעת ייעול | שער הציון

[שמואל5]

@חד-בדרא זה הספריה הלאומית, אין להם זכויות על הספרים עצמם

[חד בדרא]

@שמואל5 תפנה לבעל הספר (לי אין גישה לשם בנטפרי)

[איש גמזו]

חכמים ונבונים:
דיקטה הודיעו שהם לא יכולים לעבוד על השער הציון היות והוא רק חלק מהעמוד הכולל של המשנ״ב, והמודל לא יכול לבודד רק את השעה״צ.
אבל אם מישהו יחתוך מכל העמודים רק את השעה״צ הם יוכלו לעבוד על זה.

אם יש מישהו שיש לו כח לעשות את זה תבוא עליו ברכה.
רק שישים לב שהוא עושה את זה מספר שאין עליו זכויות.

נ.ב. גם אם דיקטה יעבדו על זה יש את הנושא של הקישורים למשנ״ב שזה נושא בפני עצמו.

[יאיר דניאל]

@איש-גמזו כתב:

אבל אם מישהו יחתוך מכל העמודים רק את השעה״צ הם יוכלו לעבוד על זה.

@רוצה-לגדול כתב פעם שהוא מוכן לעשות את זה.
רק שים לב!

@איש-גמזו כתב:

רק שישים לב שהוא עושה את זה מספר שאין עליו זכויות.

[איש־שלו']

@איש-גמזו כתב:

נ.ב. גם אם דיקטה יעבדו על זה יש את הנושא של הקישורים למשנ״ב שזה נושא בפני עצמו.

ובשביל זה יצטרכו:

א. לסרוק גם את המשנה ברורה עצמו, לזהות היכן עומד הציון לכל ס"ק, ולזהות את המילים שבאות אחריו
למשל אם יש ציון (א) על הדברים האלה...

ב. ולקשר את הס"ק הזה למילים 'על הדברים האלה'.

Spoiler

וסליחה שאני שוב כבד: בזהירות ובאחריות גדולה!

[איש גמזו]

שימו לב שהרב @יעקב052 כבר עבד על חלק א׳.
שימו לב לא לעבוד כפול.

[יעקב052]

הרב @איש-גמזו
תיקון טעות עבדתי על חלק ב'

[סנאי]

חותך שער הציון (2).py
2‏‏משנב ישן1_שער_הציון_בלבד.pdf
על מנת להקל את העבודה מצורף קוד פייתון שחותך בשניות את שער הציון מקובץ פי די אף - מצורף בסוף קישור לקובץ פי די אף המקורי של המשנ"ב (זה לא של בלום! נראה בלי זכויות יוצרים, מהיברו בוקס) (זה חלק א' אז זה לא רלוונטי, אבל סתם לשם הדוגמה)
העבודה לא מושלמת אבל הוא מצא 244 עמודים וזה יפה מאוד, בסיום הוא גם מביא את רשימת העמודים בהם לא נמצא שער הציון, ואז אפשר פשוט לעבור עליהם. זה ממש אמור להקל את העבודה.
הנה קישור להיברו בוקס לקובץ המקורי
https://hebrewbooks.org/14170
@יעקב052

[סנאי]

אם מישהו צריך ואין לו פייתון אוכל להמיר לקובץ EXE

[איש גמזו]

@יום-חדש-מתחיל כדאי להמשיך לעבוד על שאר החלקים?

[יום חדש מתחיל]

@איש-גמזו דיקטה עדיין לא ענו לי.

[אהרן]

@סנאי כתב:

אם מישהו צריך ואין לו פייתון אוכל להמיר לקובץ EXE

אני אשמח שתמיר לexe אין לי כרגע פייתון על המחשב.

[סנאי]

@אהרן בל"נ בהמשך הבוקר
אגב התלבטתי על 2 דברים א. האם לעשות שבכל עמוד יהיה גם את כותרת העמוד כדי שידעו את הסימן או שזה יפריע לסריקה של דיקטה? ב. האם לעשות שאת העמודים שהוא לא זיהה בהם שער הציון שיכניס בשלמותם במקום שלהם? ככה יהיה אפשר לעבוד רק על הקובץ המעודכן?

[סנאי]

@אהרן
חותך שער הציון 4.exe

יצא קובץ מידי גדול, לא הצלחתי להעלות, מצורף קישור לדרייב, להוריד כוכביות. יש בו את ההצעות שכתבתי קודם כאפשרות לבחירה

https://drive.google.com/*****file/d/1hRyWZGCa-pbhyoxYvPKJ5v5SNb278nDx/view?usp=sharing

[איש גמזו]

כהמשך להנ״ל דיקטה טענו שהOCR שלהם על השער הציון לא יצא מאד איכותי, באופן שלפי הקריטריונים שלהם הם לא מעבירים את זה למגיהים.
אם מישהו מכאן רוצה מוכן ורוצה להגיה הם מוכנים לתת לו גישה לאתר ההגהה שלהם.

---

על כל פנים, אם זה דורש עבודת הגהה רצינית אני חושב שלא שווה לעשות זאת דרכם.
כך שאולי שווה לנסות על השער הציון פיילוט שהציע @י.-פל.
יש אתר נפלא בשם ״כתב ai" שעל פי מה שבחנתי אותו רמת הזיהוי שם מאד גבוהה גם בכתב רש״י דוגמא בספוילר למטה.
(נגמרו לי הקרדיטים כך שלא יכולתי לבדוק ספציפית את השער הציון)
יש שם כמות מוגבלת של קרדיטים חינמיים, אבל אם שולחים קישור לחבר והחבר מגיע דרכו מקבלים עוד קרדיטים, ולכן הכנסו דרך הקישור הזה שיתן לחשבון של אוצריא קרדיטים.
הייתי שמח לנסות לעשות זאת בשיתוף עם הציבור המעוניין.
לע״ע אני חושב שנעבוד דרך אתר העריכה המוכר והטוב, רק שכל משתמש יוריד את העמודים שלו ויעשה להם זיהוי באתר כתב ai, ויחזיר את הפלט לאחר הגהה למקומו באתר העריכה.

היות ואם הבנתי נכון כל עמוד לוקח רמת קרדיטים זהה בלי קשר לכמות המלל שבו, יהיה בזבוז משאבים לעלות כל פעם רק שער הציון מעמוד אחד.
לכן כדאי שאחרי שהשער הציון ייחתך ע״י התוכנה של הרב @סנאי שיחיה נצח, ראוי לצרף כמה ״שער הציונים״ בעמוד אחד ככל שיכנסו.
אם מישהו יודע על דרך קלה לעשות זאת יבורך.
כשיעשה נוכל לעבור לשלב הטכני של שוד הקרדיטים הגדול.

נ.ב. אני מעלה לכאן דוגמא מהשער הציון אם מישהו יוכל לעשות אותו עם ״קטבאי״ ולתת אינדיקציה על אחוזי הדיוק, יבורך.שער הציון חתוך (נגרר).pdf

Spoiler

דוגמא מהעמוד בספר ״יד מלאכי״ איכות הכתב עדיפה אולי במקצת על של השער הציון.
השורות מעל ומתחת ג״כ היו עם 100 אחוזי דיוק

עריכה: @י.-פל. נטפרי התחילו לשלוח לבדיקה תמונות מהפורום?

[יעקב052]

@איש-גמזו
לא נראה לי בסדר...
אולי צריך להגדיר כתב רש"י? לא מצאתי איפה.

כתב AI.pdf
כתב AI.pdf.docx

[איש גמזו]

@יעקב052 אני לא מצליח לראות את הקבצים שהעלת, בגלל נטפרי שהתחילו לעשות לנו כאן בעיות משום מה.

אבל בשביל להבין אם הבעיה בשער הציון או במה שעשית, אולי תנסה את העמוד ביד מלאכי שאני בדקתי.
מצורף יד מלאכי (נגרר).pdf

[י. פל.]

@איש-גמזו כתב:

יש אתר נפלא בשם ״כתב ai " שעל פי מה שבחנתי אותו רמת הזיהוי שם מאד גבוהה גם בכתב רש״י דוגמא בספוילר למטה.
(נגמרו לי הקרדיטים כך שלא יכולתי לבדוק ספציפית את השער הציון)
יש שם כמות מוגבלת של קרדיטים חינמיים, אבל אם שולחים קישור לחבר והחבר מגיע דרכו מקבלים עוד קרדיטים.

אם אתם נרשמים - הכנסו דרך הקישור הזה:
https://ktavyad.com?ref=08f90e750dff
זה יוסיף לחשבון של אוצריא קרדיטים!!!

[יאיר דניאל]

@י.-פל. כתב:

אם אתם נרשמים - הכנסו דרך הקישור הזה:
https://ktavyad.com?ref=08f90e750dff
זה יוסיף לחשבון של אוצריא קרדיטים!!!

אז בואו נעשה קמפיין הרשמה?

[י. פל.]

@יאיר-דניאל
תכננתי לעשות מזה נושא, לכתוב פוסט מסודר...
אבל הוא גנב את האירוע, כי התמהמהתי...