Mitmachen
GerMedBench ist ein offenes Projekt — Beiträge sind willkommen
Modell vorschlagen
Du möchtest ein Modell im Leaderboard sehen, das noch nicht evaluiert wurde? Erstelle ein GitHub Issue mit der Modell-ID (z.B. Together AI oder Hugging Face ID). Wir übernehmen die Evaluation und veröffentlichen die Ergebnisse.
Task vorschlagen
Du hast eine Idee für einen neuen klinischen Task? Erstelle ein GitHub Issue mit folgenden Informationen:
- — Beschreibung der Aufgabe und klinische Relevanz
- — Vorgeschlagenes Input/Output-Format
- — Evaluationsansatz (automatisch vs. LLM-as-Judge)
- — Beispiel-Fälle (wenn vorhanden)
Daten verbessern
Die aktuelle Datengrundlage ist synthetisch. Verbesserungen sind besonders wertvoll:
- — Korrektur fehlerhafter ICD-10 Codes oder Ground-Truth-Annotationen
- — Hinweise auf unrealistische Fallkonstruktionen
- — Beitrag anonymisierter klinischer Fälle (mit Ethikvotum)
Kontakt
Technische Fragen und Bug Reports: GitHub Issues
Kooperationsanfragen und allgemeines Feedback: hello@thalamiq.io