המלצה | מידע על מחברים

[יום חדש מתחיל]

@י.-פל. לא מצאתי, אפשר קישור?
(גם אני בבעי' הזו)

[י. פל.]

@יום-חדש-מתחיל
https://github.com/Otzaria/otzaria/tree/migrationDB_V2#:~:text=Build Troubleshooting
לפתרון קבוע, צור משתנה סביבה (מערכת) בשם CMAKE_TLS_VERIFY עם הערך 0.

[דנדי]

@יום-חדש-מתחיל אם הבנת תעדכן אותי אם אפשר

[arieldaniely]

לכאורה ככה:
Windows (דרך שורת הפקודה):
פתח את ה-CMD כ-Administrator והרצת הפקודה הבאה:

setx /M CMAKE_TLS_VERIFY 0.

ואז לנסות להריץ שוב את התוכנה (fluttr run).

[הספריה התורנית]

לא הצלחתי להבין כ"כ מה נסגר עם ההצעה.
רק רציתי לציין שהויקי\המכלול יש ביגרפיות מעולות ואין שם את הבעיות ניסוח וכו' שהעלתם.

[arieldaniely]

@הספריה-התורנית כתב בהמלצה | מידע על מחברים:

שהויקי\המכלול יש ביגרפיות מעולות ואין שם את הבעיות ניסוח וכו' שהעלתם.

ואיך אפשר ללקט אותם עבור עשרות המחברים? (מה גם שלהרבה מהם אין)

[D9]

@הספריה-התורנית כתב בהמלצה | מידע על מחברים:

רק רציתי לציין שהויקי\המכלול יש ביגרפיות מעולות ואין שם את הבעיות ניסוח וכו' שהעלתם.

גם עם זה רעיון טוב זה דורש עבודה של שעות הפיתוח של אוצריא נעשה על ידי מתנדבים
אולי תתנדב לעשות את זה
בכל אופן נראה לי שלסנן את ספריא יהיה קל בהרבה וגם תואם יותר לאוצריא

[הספריה התורנית]

@d9 @arieldaniely
שמות הערכים תואמים לשמות הספרים או\המחברים.
אני הייתי מוכן בהחלט לעזור אבל נראה לי שבקוד פשוט או בAI זה מאוד פשוט לכן חבל שאטרח לעשות אחד אחד.
בכל אופן עדיין לא התקבל על זה אישור עקרוני (אשמח מאוד מאוד שיתקבל).
אני אישית הייתי מעדיף את הערכים מהמכלול כמות שהם הם מקיפים מאוד ובכל מקרה אני יחזור לקרא אותם שם...
בכל מקרה ניתן לעשות בינתיים שיהיה רק קישור ולא להכניס ממש לתוך ספריה.

[arieldaniely]

@הספריה-התורנית כתב:

שמות הערכים תואמים לשמות הספרים או\המחברים.

לא תמיד, אבל באמת הרבה פעמים, בכל מקרה, ע"ב הנתונים מספריא הכנתי רשימה של שמות מחברים וקישורים אם זה עוזר: קישורים למכלול.xlsx

[י. פל.]

@הספריה-התורנית
אנו בקשר עם יוזמה אחרת, לא התקבלו דברים מוחלטים כרגע.
בכל מקרה, זה לא יהיה במקום מה שיש מספריא.

[האדם החושב]

mediawiki.rar

import requests
import json
from pathlib import Path
from tqdm import tqdm
from bs4 import BeautifulSoup

WEKEPEDIA_API_URL = "https://he.wikipedia.org/w/api.php"
WIKISOURCE_API_URL = "https://he.wikisource.org/w/api.php"
HAMICHLAL_API_URL = "https://www.hamichlol.org.il/w/api.php"

def get_authors_list(json_path: Path) -> set[str]:
    all_authors = set()
    with json_path.open('r', encoding='utf-8') as f:
        data = json.load(f)
    for book in data:
        authors = book.get("heAuthors")
        if authors is None:
            continue
        for author in authors:
            if author and author.strip():
                all_authors.add(author.strip())
    return all_authors


def get_search_results(url: str, author_name: str, session: requests.Session, params: dict | None = None) -> requests.Response:
    if params is None:
        params = {}
    headers = {
        "User-Agent": "MyWikipediaScript/1.0 (your_email@example.com)"
    }
    params.update({
        "action": "query",
        "format": "json",
        "list": "search",
        "srsearch": author_name,
        "utf8": 1
    })
    return session.get(url, params=params, headers=headers)


def prosess_response(response: requests.Response) -> list[dict]:
    result = []
    data = response.json()
    for item in data['query']['search']:
        snippet = BeautifulSoup(item['snippet'], "html.parser").get_text()
        title = item['title']
        page_id=  item['pageid']
        result.append({
            "title": title,
            "snippet": snippet,
            "page_id": page_id
        })
    return result

def main():
    all_results = {}
    metadata_path = Path(r"C:\Users\User\Downloads\all_metadata.json")
    # outpoot_path = Path(r"C:\Users\User\Downloads\authors_wikipedia_results.json")
    # outpoot_path = Path(r"C:\Users\User\Downloads\authors_wikisource_results.json")
    outpoot_path = Path(r"C:\Users\User\Downloads\authors_hamichlol_results.json")
    authors = get_authors_list(metadata_path)
    if outpoot_path.exists():
        with outpoot_path.open("r", encoding="utf-8") as f:
            all_results = json.load(f)
    with requests.Session() as session:
        for author in tqdm(authors, desc="Processing authors"):
            if author in all_results:
                continue
            try:
                # search_results = get_search_results(WEKEPEDIA_API_URL,author, session)
                # search_results = get_search_results(WIKISOURCE_API_URL, author, session, {"srnamespace": 108})
                search_results = get_search_results(HAMICHLAL_API_URL, author, session)
                all_results[author] = prosess_response(search_results)
            except Exception as e:
                print(f"Error processing author {author}: {e}")
        with outpoot_path.open('w', encoding='utf-8') as f:
            json.dump(all_results, f, ensure_ascii=False, indent=4)



if __name__ == "__main__":
    main()

מבוסס על שמות המחברים מהקובץ הזה.
צריך סינון של הדף הרלווטי (אולי ai), מה שמופיע שם זה תוצאות חיפוש, בויקיטקסט כל התוצאות הם ממרחב השם "מחברים".